數(shù)據(jù)倉庫結(jié)構設計與實施：建造信息系統(tǒng)的金字塔

第1章  數(shù)據(jù)倉庫技術與應用概述    1
1.1  數(shù)據(jù)倉庫的基本概念    2
1.1.1  數(shù)據(jù)倉庫的系統(tǒng)體系    2
1.1.2  數(shù)據(jù)倉庫的應用目標    2
1.2  數(shù)據(jù)倉庫與常規(guī)事務處理數(shù)據(jù)庫的區(qū)別與聯(lián)系    3
1.2.1  從數(shù)據(jù)倉庫到操作型數(shù)據(jù)庫——數(shù)據(jù)倉庫的根與源    3
1.2.2  數(shù)據(jù)倉庫與傳統(tǒng)數(shù)據(jù)庫的區(qū)別    3
1.3  數(shù)據(jù)倉庫的產(chǎn)生原因    5
1.3.1  數(shù)據(jù)囚籠現(xiàn)象    5
1.3.2  信息孤島現(xiàn)象    5
1.3.3  相互矛盾的信息流    6
1.3.4  集成的解決辦法    6
1.3.5  動力和動機    7
1.4  管理信息系統(tǒng)的“上層建筑”    8
1.4.1  管理層次的概念    8
1.4.2  中層和上層管理存在的系統(tǒng)真空    9
1.4.3  數(shù)據(jù)倉庫系統(tǒng)應用的基本作用    9
1.4.4  數(shù)據(jù)倉庫應用的基本目標    11
1.4.5  數(shù)據(jù)倉庫應用成功的保障    11
1.5  電子商務與電子政務    12
1.5.1  現(xiàn)代社會中的電子商務與電子政務    12
1.5.2  以客戶為中心的現(xiàn)代社會環(huán)境    14
1.5.3  電子商務與電子政務提高了服務效率    14
1.6  數(shù)據(jù)倉庫的ROI（回報投入比）    17
1.7  聯(lián)機綜合分析系統(tǒng)中數(shù)據(jù)倉庫的應用    18
1.8  挑戰(zhàn)和趨勢    20
第2章  數(shù)據(jù)倉庫的總體結(jié)構    24
2.1  金字塔結(jié)構    24
2.2  數(shù)據(jù)倉庫的結(jié)構與環(huán)境    28
2.3  準備區(qū)——數(shù)據(jù)源和數(shù)據(jù)倉庫之間的過渡    31
2.4  元數(shù)據(jù)與模型    31
2.4.1  元數(shù)據(jù)的定義    33
2.4.2  元數(shù)據(jù)的作用    33
2.4.3  元數(shù)據(jù)和模型的整建    33
2.4.4  命名法    34
2.4.5  元數(shù)據(jù)存儲區(qū)    35
2.4.6  元數(shù)據(jù)的維護和應用    36
2.4.7  元數(shù)據(jù)的定義和管理    37
2.4.8  統(tǒng)一元數(shù)據(jù)標準和元數(shù)據(jù)交換    42
2.5  多維數(shù)據(jù)結(jié)構    45
2.5.1  星型結(jié)構    45
2.5.2  雪花型結(jié)構    47
2.5.3  混雜型結(jié)構    49
2.5.4  度量應用舉例    49
2.6  映像    49
2.6.1  映像的含義    51
2.6.2  數(shù)據(jù)遷移和轉(zhuǎn)換的過程    51
2.6.3  抽象與映像層次    55
2.6.4  應變式映像策略    56
2.6.5  映像類型    57
2.7  滾動綜合數(shù)據(jù)    58
2.8  聯(lián)機分析處理    63
2.8.1  聯(lián)機分析處理——數(shù)據(jù)倉庫的自然延伸    63
2.8.2  聯(lián)機分析處理系統(tǒng)的集成    64
2.8.3  維的作用    64
2.8.4  對多維數(shù)據(jù)方陣的鏈接和分析    65
2.8.5  方陣系列的設計要點    66
2.8.6  總計數(shù)據(jù)的自動更新    66
2.8.7  報表構架    66
2.8.8  聯(lián)機分析處理（OLAP）的解決辦法    67
2.8.9  表示工具    67
2.8.10 表示工具的預處理    67
2.9  數(shù)據(jù)發(fā)掘    68
2.9.1  數(shù)據(jù)發(fā)掘的重要性    69
2.9.2  數(shù)據(jù)發(fā)掘的方法與技術    69
2.10  實現(xiàn)閉環(huán)的聯(lián)機分析處理    70
2.11  卸載操作型數(shù)據(jù)庫與保護數(shù)據(jù)源    73
2.11.1  數(shù)據(jù)源——企業(yè)最重要的信息資產(chǎn)    73
2.11.2  操作型事務處理數(shù)據(jù)庫的特征    73
2.11.3  決策支持數(shù)據(jù)庫系統(tǒng)的特點    73
2.11.4  兩種作業(yè)混合的弊端    74
2.11.5  回顧過去作業(yè)的局限性    74
2.11.6  卸載    75
2.11.7  雙贏的解決辦法    77
2.12  數(shù)據(jù)倉庫的三要素    78
2.13  多維總計方陣    80
2.13.1  從基本數(shù)據(jù)到綜合信息    80
2.13.2  方陣是聯(lián)機分析的基礎結(jié)構    80
2.13.3  方陣的類型    81
2.13.4  方陣的卸載與底層數(shù)據(jù)表的屏蔽    84
2.13.5  刷新    85
2.13.6  方陣的設計要點    86
2.13.7  從數(shù)據(jù)倉庫基本數(shù)據(jù)（事實/維）到最終分析報告的映像    87
2.14  ETL（提取—轉(zhuǎn)換—加載）從數(shù)據(jù)源到目標    88
2.14.1  數(shù)據(jù)的啟程    89
2.14.2  數(shù)據(jù)標準化的準備工作和數(shù)據(jù)清洗的工具字典    89
2.14.3  粒度與聚合數(shù)據(jù)    89
2.14.4  魔力無邊的巨型章魚    90
2.14.5  數(shù)據(jù)倉庫的數(shù)據(jù)追加    90
2.14.6  提取—轉(zhuǎn)換—加載處理的映像過程    91
2.14.7  作業(yè)順序、依賴關系和進程控制    91
2.14.8  從數(shù)據(jù)源進入數(shù)據(jù)倉庫到以分析報表輸出    92
2.14.9  數(shù)據(jù)提取—轉(zhuǎn)換—加載的主要流程和會話期流程    93
2.15  從數(shù)據(jù)源到目標——Informatica    96
2.16  數(shù)據(jù)倉庫在因特網(wǎng)環(huán)境下的應用    98
2.16.1  客戶-服務器系統(tǒng)的特點    99
2.16.2  因特網(wǎng)數(shù)據(jù)倉庫的特點    99
2.16.3  設計指南    99
2.16.4  安全性技術    102
第3章  數(shù)據(jù)倉庫應用實例    104
3.1  分布式數(shù)據(jù)倉庫——獨立的數(shù)據(jù)庫接口    104
3.2  共享式數(shù)據(jù)倉庫——共享式支票信用認可網(wǎng)絡    107
3.3  某飛機制造公司——單源生產(chǎn)數(shù)據(jù)    108
3.4  汽車銷售管理網(wǎng)絡——數(shù)據(jù)倉庫支持下的聯(lián)機分析報表    109
第4章  數(shù)據(jù)倉庫應用開發(fā)的策略與過程    111
4.1  數(shù)據(jù)倉庫開發(fā)策略    111
4.2  跳躍（蛙跳）式發(fā)展    113
4.2.1  數(shù)據(jù)倉庫的演變史    113
4.2.2  建立真正的數(shù)據(jù)倉庫    114
4.3  數(shù)據(jù)倉庫系統(tǒng)平臺    116
4.3.1  觀察數(shù)據(jù)倉庫系統(tǒng)的基本結(jié)構    116
4.3.2  多層結(jié)構環(huán)境    116
4.3.3  多層次、多分區(qū)系統(tǒng)    117
4.3.4  堅實的胡桃    118
4.3.5  表示層與內(nèi)核的部署    118
4.3.6  應用軟件的基本結(jié)構    119
4.4  數(shù)據(jù)倉庫應用開發(fā)的要點與特征    123
4.4.1  數(shù)據(jù)倉庫應用的命題/主題確定    123
4.4.2  往復循環(huán)式開發(fā)數(shù)據(jù)倉庫    128
4.4.3  建立數(shù)據(jù)集市    133
4.5  數(shù)據(jù)倉庫設計質(zhì)量    134
4.5.1  數(shù)據(jù)倉庫質(zhì)量的重要性    134
4.5.2  數(shù)據(jù)質(zhì)量保障    135
4.5.3  數(shù)據(jù)質(zhì)量保障的環(huán)境和各個處理環(huán)節(jié)    135
4.5.4  錯誤檢測    137
4.5.5  質(zhì)量保障系統(tǒng)    137
4.5.6  及時發(fā)現(xiàn)錯誤    138
4.5.7  錯誤追蹤    138
4.5.8  解決劣質(zhì)數(shù)據(jù)    144
4.6  數(shù)據(jù)倉庫應用開發(fā)保障技術    144
4.6.1  知識與知識產(chǎn)權的維護    145
4.6.2  團隊    147
4.7  數(shù)據(jù)倉庫安全性與有關技術    152
4.7.1  識別安全威脅的類型與攻擊方法    152
4.7.2  安全性防范思想與布局    154
4.7.3  安全性策略與技術    155
4.7.4  數(shù)據(jù)倉庫安全性的應用結(jié)構設計技術    156
第5章  數(shù)據(jù)倉庫設計與應用開發(fā)    160
5.1  數(shù)據(jù)倉庫的概念設計    160
5.1.1  概念設計    161
5.1.2  元數(shù)據(jù)定義及管理    162
5.1.3  數(shù)據(jù)結(jié)構概圖    162
5.1.4  數(shù)據(jù)倉庫的基本表    163
5.1.5  從邏輯設計到物理設計    164
5.2  數(shù)據(jù)倉庫的物理設計    166
5.2.1  事實表設計    166
5.2.2  維數(shù)    170
5.2.3  分區(qū)    173
5.2.4  索引設計    175
5.2.5  完整性約束設計    176
5.2.6  實體化視圖設計    177
5.3  數(shù)據(jù)提取—轉(zhuǎn)換—加載（ETL）    188
5.3.1  建立事件映像    189
5.3.2  建立視圖或?qū)嶓w化視圖與視圖模擬    189
5.3.3  ETL過程舉例    189
5.3.4  提取—轉(zhuǎn)換—加載的方法    192
5.3.5  數(shù)據(jù)的標準化與規(guī)范化    193
5.3.6  數(shù)據(jù)清洗與實例    195
5.3.7  數(shù)據(jù)提取—轉(zhuǎn)換—加載工具    198
5.3.8  數(shù)據(jù)提取    200
5.3.9  加載和轉(zhuǎn)換    204
5.3.10 數(shù)據(jù)提取—轉(zhuǎn)換—加載的主流程    209
5.4  綜合管理    212
5.4.1  總體構架    212
5.4.2  匯總準備    214
5.4.3  報表準備工作的基礎——從數(shù)據(jù)倉庫生成并刷新實體化視圖    214
5.4.4  刷新實體化視圖    214
5.4.5  監(jiān)控數(shù)據(jù)倉庫的刷新    216
5.4.6  實體化視圖的管理要點    218
5.5  聯(lián)機分析處理（OLAP）    219
5.5.1  SQL與綜合函數(shù)    219
5.5.2  多維分析技術    220
5.5.3  數(shù)據(jù)倉庫SQL總計分析語句結(jié)構與流程    221
5.5.4  綜合SQL和函數(shù)的應用    223
5.5.5  SQL和分析函數(shù)    236
5.6  報表發(fā)布    243
5.6.1  表示系統(tǒng)軟件工具的聯(lián)用——從后臺到前臺    243
5.6.2  建立報表的過程    245
5.6.3  對多維方陣的鉆入/聚合操作    245
5.6.4  表示工具的預處理    246
5.6.5  應用SQL分析服務器    246
5.7  報表系統(tǒng)構架    249
5.7.1  報表系統(tǒng)構架及其支撐結(jié)構    250
5.7.2  從數(shù)據(jù)庫生成XML數(shù)據(jù)    250
5.7.3  建立報表函數(shù)庫    259
5.7.4  建立報表程序庫    287
5.7.5  報表系統(tǒng)構架及其支撐結(jié)構    301
5.7.6  應用表函數(shù)    312
附錄A  技術詞匯    319
參考文獻    321