企業(yè)信息工廠

第1章 創(chuàng)建信息生態(tài)系統(tǒng) 1
1.1 信息生態(tài)系統(tǒng)的簡單定義 3
1.2 轉變業(yè)務模式 4
1.2.1 客戶需求 5
1.2.2 競爭與復雜性 5
1.2.3 操作效率 5
1.3 應對變化 6
1.4 企業(yè)信息工廠 8
1.5 人與處理過程 9
1.6 小結 9
第2章 企業(yè)信息工廠簡介 11
2.1 企業(yè)信息工廠中的數(shù)據(jù) 13
2.1.1 外部數(shù)據(jù) 15
2.1.2 引用數(shù)據(jù) 18
2.1.3 歷史數(shù)據(jù) 20
2.1.4 決策支持系統(tǒng)的信息反饋 23
2.1.5 數(shù)據(jù)流 25
2.2 企業(yè)信息工廠的變化 27
2.3 操作型處理與DSS處理 27
2.4 企業(yè)信息工廠中的報表 29
2.5 企業(yè)信息工廠的用戶 29
2.5.1 應用的用戶 30
2.5.2 決策支持系統(tǒng)（DSS）/信息用戶 30
2.5.3 企業(yè)信息工廠環(huán)境中的各種DSS用法 35
2.6 集中式還是分布式 37
2.7 數(shù)據(jù)建模與企業(yè)信息工廠 39
2.8 遷移到企業(yè)信息工廠 41
2.9 組織企業(yè)信息工廠中的數(shù)據(jù) 44
2.10 小結 46
第3章 外部世界 47
3.1 交易生產(chǎn)者 49
3.2 交易的分類 49
3.3 信息消費者 50
3.4 誰是參與者 50
3.5 小結 51
第4章 應用 53
4.1 應用的時效性 55
4.2 非集成化的應用 55
4.3 應用的響應時間 56
4.4 從非集成狀態(tài)遷移到集成狀態(tài) 56
4.5 外部數(shù)據(jù)、元數(shù)據(jù)與應用 58
4.6 應用環(huán)境的輸入和輸出 58
4.7 小結 60
第5章 集成轉換層 61
5.1 什么是集成轉換層 63
5.1.1 不穩(wěn)定的接口 63
5.2 集成轉換層的輸入與輸出 65
5.3 集成轉換層的復雜性 66
5.4 數(shù)據(jù)模型的作用 68
5.5 創(chuàng)建元數(shù)據(jù) 68
5.5.1 集成轉換程序的自動創(chuàng)建 69
5.6 集成轉換層中的處理 69
5.6.1 執(zhí)行鍵轉換 69
5.6.2 創(chuàng)建簡檔/聚合記錄 71
5.6.3 編碼結構 71
5.6.4 簡單的重新格式化 72
5.6.5 數(shù)學轉換 72
5.6.6 數(shù)據(jù)的重排序 72
5.6.7 賦予默認值 73
5.6.8 處理多個數(shù)據(jù)源 73
5.7 把日志磁帶作為數(shù)據(jù)源 73
5.8 改變平臺環(huán)境 74
5.8.1 誰負責 75
5.9 小結 75
第6章 操作型數(shù)據(jù)存儲（ODS） 77
6.1 什么是操作型數(shù)據(jù)存儲（ODS） 79
6.1.1 可變的 80
6.1.2 反映當前數(shù)據(jù)值的 80
6.1.3 詳細數(shù)據(jù) 80
6.2 ODS的輸入和輸出 80
6.2.1 來自集成轉換層的輸入數(shù)據(jù) 81
6.3 不同類型的ODS 82
6.3.1 一型ODS 82
6.3.2 二型ODS 83
6.3.3 三型ODS 83
6.3.4 四型ODS 83
6.3.5 確定ODS類型 83
6.4 動態(tài)匯總數(shù)據(jù) 84
6.5 靜態(tài)匯總數(shù)據(jù) 85
6.6 ODS的工作負載 85
6.6.1 加載處理 86
6.6.2 更新處理 86
6.6.3 訪問處理 87
6.6.4 DSS分析處理 87
6.7 不同的處理窗口 87
6.7.1 什么是同質(zhì)的工作負載 88
6.8 ODS中的外部數(shù)據(jù) 88
6.9 小結 89
第7章 數(shù)據(jù)倉庫 91
7.1 什么是數(shù)據(jù)倉庫 93
7.1.1 面向主題 93
7.1.2 集成 94
7.1.3 反映數(shù)據(jù)的歷史變化 94
7.1.4 歷史數(shù)據(jù) 95
7.1.5 相對穩(wěn)定性 96
7.1.6 包含匯總數(shù)據(jù)和詳細數(shù)據(jù) 96
7.2 數(shù)據(jù)倉庫管理 97
7.3 數(shù)據(jù)倉庫的規(guī)模 97
7.4 數(shù)據(jù)倉庫的輸入與輸出 98
7.4.1 來自ODS的輸入數(shù)據(jù) 99
7.4.2 來自集成轉換層的輸入數(shù)據(jù) 99
7.4.3 輸入數(shù)據(jù)倉庫 99
7.4.4 輸出到數(shù)據(jù)集市 100
7.4.5 與備用存儲之間的數(shù)據(jù)傳輸 100
7.4.6 探索倉庫的輸入數(shù)據(jù) 101
7.5 數(shù)據(jù)倉庫中的數(shù)據(jù) 101
7.6 數(shù)據(jù)倉庫中的數(shù)據(jù)處理 102
7.7 應對技術挑戰(zhàn) 103
7.7.1 歸檔從數(shù)據(jù)倉庫中輸出的數(shù)據(jù) 104
7.8 小結 105
第8章 數(shù)據(jù)集市 107
8.1 什么是數(shù)據(jù)集市 109
8.1.1 數(shù)據(jù)集市的必要性 111
8.2 數(shù)據(jù)倉庫與數(shù)據(jù)集市之間的接口 111
8.3 不同的數(shù)據(jù)集市 113
8.3.1 MOLAP數(shù)據(jù)集市 113
8.3.2 ROLAP數(shù)據(jù)集市 113
8.4 星型連接模式與數(shù)據(jù)集市 114
8.5 數(shù)據(jù)集市中的數(shù)據(jù)處理 115
8.5.1 重復處理方式 115
8.5.2 不可預測的處理方式 116
8.6 第一序（FIRST ORDER）數(shù)據(jù)和第二序（SECOND ORDER）數(shù)據(jù) 117
8.7 元數(shù)據(jù) 118
8.8 小結 120
第9章 數(shù)據(jù)探索倉庫與數(shù)據(jù)挖掘倉庫 123
9.1 探索者怎樣處理大型查詢 125
9.2 探索倉庫的必要性 126
9.2.1 探索倉庫的發(fā)展 126
9.2.2 數(shù)據(jù)挖掘倉庫與數(shù)據(jù)探索倉庫之間的差別 128
9.2.3 探索倉庫的輸入 129
9.2.4 隔離探索者的處理 130
9.2.5 何時需要探索倉庫 130
9.2.6 凍結探索數(shù)據(jù) 131
9.2.7 探索倉庫中的顆粒數(shù)據(jù) 132
9.3 探索倉庫的數(shù)據(jù)加載 133
9.3.1 悄悄地工作——成功前的惟一方法 134
9.4 數(shù)據(jù)集市與探索倉庫 135
9.5 探索倉庫及其有關技術 135
9.6 探索倉庫的某些潛在的好處 136
9.7 小結 137
第10章 備用存儲 139
10.1 閑置數(shù)據(jù)日漸增多 141
10.1.1 管理閑置數(shù)據(jù) 142
10.1.2 找出分界線 143
10.1.3 活動監(jiān)視器的位置 144
10.2 備用存儲技術 145
10.2.1 元內(nèi)容數(shù)據(jù) 146
10.2.2 多介質(zhì)存儲管理器 146
10.3 備用存儲與探索處理 148
10.4 為什么使用備用存儲 149
10.4.1 節(jié)省費用 149
10.4.2 良好的查詢性能 150
10.4.3 保持最低顆粒級的數(shù)據(jù) 151
10.5 供應商的實現(xiàn) 151
10.5.1 備用存儲：FileTek 152
10.5.2 多介質(zhì)管理：Unitree 155
10.6 小結 156
第11章 INTERNET/INTRANET 157
11.1 通信問題 160
11.1.1 數(shù)據(jù)量 160
11.1.2 數(shù)據(jù)的傳輸速度 161
11.1.3 網(wǎng)絡容量 161
11.1.4 傳輸方式 162
11.1.5 電信線路的費用 162
11.1.6 傳輸特性 163
11.1.7 通信結構的可用性 163
11.2 誰使用通信設施 165
11.3 小結 168
第12章 元數(shù)據(jù) 169
12.1 什么是元數(shù)據(jù) 171
12.2 元數(shù)據(jù)中的沖突 172
12.2.1 集中化是否就是一種好的解決方案 173
12.2.2 自治性是否能夠滿足要求 174
12.2.3 尋求平衡 175
12.2.4 區(qū)分共享元數(shù)據(jù)與自主元數(shù)據(jù) 176
12.3 定義記錄系統(tǒng) 177
12.4 使用元數(shù)據(jù) 179
12.4.1 元數(shù)據(jù)在操作環(huán)境與DSS環(huán)境中的使用情況 181
12.5 元數(shù)據(jù)的版本管理 183
12.6 歸檔與元數(shù)據(jù) 184
12.7 收集元數(shù)據(jù) 185
12.8 元進程信息 187
12.8.1 用于集成轉換層 187
12.8.2 用于應用 187
12.8.3 用于從數(shù)據(jù)倉庫到數(shù)據(jù)集市的數(shù)據(jù)傳遞 187
12.9 小結 188
第13章 決策支持能力 189
13.1 從整個上下文環(huán)境中看數(shù)據(jù)倉庫的作用 192
13.1.1 數(shù)據(jù)倉庫增加了數(shù)據(jù)的歷史深度 192
13.1.2 歷史的維度 194
13.1.3 易于訪問的數(shù)據(jù) 195
13.2 數(shù)據(jù)集市分類介紹 196
13.2.1 部門級數(shù)據(jù)集市 196
13.2.2 DSS應用式數(shù)據(jù)集市 196
13.2.3 兩種數(shù)據(jù)集市之間的相似點與不同之處 197
13.2.4 每種數(shù)據(jù)集市的優(yōu)缺點 198
13.3 數(shù)據(jù)集市的數(shù)據(jù)庫設計 199
13.4 商業(yè)決策支持應用 202
13.4.1 ERP分析應用 202
13.4.2 電子商務分析應用 204
13.5 數(shù)據(jù)倉庫與ODS之間的交互 205
13.5.1 四型ODS的例子 206
13.6 什么是操作型數(shù)據(jù)集市 207
13.7 商品化的應用產(chǎn)品 208
13.7.1 商品化決策支持應用的選擇指南 208
13.8 小結 210
第14章 企業(yè)信息工廠的變化 211
14.1 應當先建數(shù)據(jù)集市還是數(shù)據(jù)倉庫 213
14.1.1 首先建立數(shù)據(jù)集市 214
14.1.2 隨同數(shù)據(jù)倉庫一起建立數(shù)據(jù)集市 215
14.2 是否應當把數(shù)據(jù)倉庫和ODS組合在一起 223
14.2.1 不兼容的交易類型的組合 224
14.2.2 強制使不兼容的工作負載類型組合在一起 225
14.3 小結 230
第15章 建立企業(yè)信息工廠 233
15.1 策略規(guī)劃 235
15.1.1 應用環(huán)境 237
15.1.2 ODS 237
15.1.3 數(shù)據(jù)倉庫與數(shù)據(jù)集市 237
15.2 策略動作 238
15.3 開發(fā)方法 238
15.4 管理不同的開發(fā)機構 241
15.5 部署數(shù)據(jù)庫 243
15.5.1 通用DBMS策略 245
15.6 不同的硬件平臺 247
15.7 顯示信息 249
15.8 小結 249
第16章 管理企業(yè)信息工廠 251
16.1 應用環(huán)境的日常管理 255
16.2 集成轉換層的日常管理 255
16.2.1 創(chuàng)建和維護接口 256
16.2.2 執(zhí)行代碼 256
16.2.3 元數(shù)據(jù)的生成 257
16.3 ODS的日常管理 257
16.4 數(shù)據(jù)倉庫的日常管理 258
16.5 數(shù)據(jù)集市的日常管理 259
16.6 INTERNET/INTRANET的日常管理 259
16.7 監(jiān)控企業(yè)信息工廠 259
16.8 企業(yè)信息工廠中的安全考慮 261
16.9 歸檔處理 264
16.9.1 應用歸檔 264
16.9.2 ODS歸檔 266
16.9.3 數(shù)據(jù)倉庫歸檔 266
16.9.4 數(shù)據(jù)集市歸檔 266
16.9.5 歸檔介質(zhì) 267
16.10 小結 267
第17章 分布于大型企業(yè)中的多個數(shù)據(jù)倉庫 269
17.1 定義集成需求 271
17.2 定義企業(yè)框架 272
17.2.1 業(yè)務范圍 272
17.2.2 數(shù)據(jù)的類型和實例 273
17.2.3 數(shù)據(jù)的屬主 274
17.2.4 共享數(shù)據(jù) 275
17.2.5 在多個數(shù)據(jù)倉庫中共享數(shù)據(jù) 276
17.2.6 相關的數(shù)據(jù)實例 277
17.2.7 其他關系 278
17.3 定義記錄系統(tǒng) 280
17.4 本地數(shù)據(jù)倉庫 281
17.4.1 “純”本地數(shù)據(jù)倉庫的變體 281
17.5 全局數(shù)據(jù)倉庫 282
17.6 企業(yè)中數(shù)據(jù)倉庫的類型 282
17.6.1 簡單的本地數(shù)據(jù)倉庫 284
17.6.2 簡單的全局數(shù)據(jù)倉庫 284
17.6.3 多個不相關的本地數(shù)據(jù)倉庫 286
17.6.4 業(yè)務范圍之間的關系 286
17.6.5 交叉需求 287
17.6.6 擴展的全局數(shù)據(jù)倉庫 288
17.7 企業(yè)范圍架構中的其他重要問題 289
17.8 小結 289
附錄A 企業(yè)信息工廠架構指南 291
A.1 標準的企業(yè)信息工廠構件 294
A.1.1 目的 294
A.1.2 重點問題 294
A.1.3 集成轉換層 295
A.1.4 ODS（選用的） 295
A.1.5 數(shù)據(jù)倉庫 296
A.1.6 數(shù)據(jù)集市 297
A.1.7 探索倉庫（選用的） 298
A.1.8 備用存儲（選用的） 299
A.2 其他企業(yè)信息工廠構件 300
A.2.1 目的 300
A.2.2 重點問題 300
A.2.3 ERP 300
A.2.4 SAP 301
A.2.5 BAAN 301
A.2.6 PeopleSoft 301
A.2.7 J D Edwards 302
A.2.8 Oracle Financials 302
A.2.9 電子商務 302
A.2.10 CRM 302
A.2.11 其他分析應用 303
A.3 企業(yè)信息工廠的變化 303
A.3.1 目的 303
A.3.2 分布式數(shù)據(jù)倉庫 303
A.3.3 全局數(shù)據(jù)倉庫 304
A.4 標準操作 305
A.4.1 目的 305
A.4.2 重點問題 305
A.4.3 正常數(shù)據(jù)流情況 305
A.4.4 逆向數(shù)據(jù)流情況 306
A.4.5 更新與快照 306
A.5 監(jiān)控 306
A.5.1 目的 306
A.5.2 重點問題 306
A.5.3 數(shù)據(jù)倉庫 307
A.5.4 網(wǎng)絡 307
A.5.5 備用存儲 308
A.6 數(shù)據(jù)集市與最終用戶訪問 308
A.6.1 目的 308
A.6.2 重點問題 308
A.7 數(shù)據(jù)倉庫的協(xié)調(diào)與調(diào)整 309
A.7.1 目的 309
A.7.2 重點問題 309
A.8 數(shù)據(jù)倉庫的糾錯 309
A.8.1 目的 309
A.8.2 特定的問題 310
A.9 企業(yè)信息工廠的保密性和安全性 310
A.9.1 目的 310
A.9.2 重點問題 310
A.10 數(shù)據(jù)量 310
A.10.1 目的 310
A.10.2 重點問題 311
A.10.3 預測 311
A.10.4 增長率 312
A.10.5 當前狀態(tài) 312
A.10.6 分界線 312
A.10.7 應對未來 312
A.10.8 備用存儲 312
A.10.9 數(shù)據(jù)存儲規(guī)則 313
A.11 探索倉庫 313
A.11.1 目的 313
A.11.2 重點問題 313
A.11.3 查詢 314
A.11.4 數(shù)據(jù)量 314
A.11.5 外部數(shù)據(jù) 315
A.12 技術覆蓋 316
A.12.1 目的 316
A.12.2 重要問題 316
A.12.3 系統(tǒng) 317
A.12.4 硬件 317
A.12.5 DBMS 317
A.12.6 最終用戶工具 318
A.12.7 中間件 318
A.12.8 交易管理 319
A.13 設計覆蓋 320
A.13.1 目的 320
A.13.2 規(guī)范化 320
A.13.3 星型連接/雪花模式 320
A.14 WEB接口 321
A.14.1 目的 321
A.14.2 粒度管理 321
A.14.3 ODS支持 321
A.14.4 Web內(nèi)部ODS 321
A.14.5 企業(yè)信息工廠ODS 322
A.14.6 點擊流管理 322
A.15 開發(fā)方法 322
A.15.1 目的 322
A.15.2 重點問題 323
A.16 元數(shù)據(jù) 323
A.16.1 目的 323
A.16.2 重點問題 323
A.16.3 本地收集與自包含 324
A.16.4 共享 324
A.16.5 記錄系統(tǒng) 324
A.16.6 中央存儲 324
A.17 企業(yè)信息工廠機構管理 325
A.17.1 目的 325
A.17.2 重點問題 325
A.17.3 機構管理 325
A.18 數(shù)據(jù)倉庫的性能 326
A.18.1 目的 326
A.18.2 索引 326
A.18.3 ODS 327
A.18.4 數(shù)據(jù)集市 327
A.18.5 順序存儲設備 327
A.18.6 非規(guī)范化處理 328
A.18.7 探索倉庫 328
A.18.8 匯總 328
A.18.9 聚合 328
A.18.10 冗余 329
A.18.11 數(shù)據(jù)共處 329
A.18.12 數(shù)據(jù)加載的優(yōu)化 329
A.18.13 監(jiān)控 329
A.18.14 服務級的一致性 330
A.19 預算 330
A.19.1 目的 330
A.20 端到端的數(shù)據(jù)流速度 330
A.20.1 目的 330
A.21 企業(yè)信息工廠管理 331
A.21.1 目的 331
A.21.2 怎樣監(jiān)控 331
A.21.3 容量規(guī)劃 332
A.21.4 異常管理 332
A.21.5 監(jiān)控程序的開銷 332
A.21.6 監(jiān)控程序的復雜性 333
A.22 企業(yè)信息工廠的歷史 333
A.22.1 目的 333
A.22.2 開發(fā)周期 333
A.22.3 規(guī)模 333
A.22.4 增長率 333
A.22.5 各個構件的建設順序 334
附錄B 術語解釋 335