數(shù)據倉庫結構設計與實施：建造信息系統(tǒng)的金字塔

第1章  數(shù)據倉庫技術與應用概述    1
1.1  數(shù)據倉庫的基本概念    2
1.1.1  數(shù)據倉庫的系統(tǒng)體系    2
1.1.2  數(shù)據倉庫的應用目標    2
1.2  數(shù)據倉庫與常規(guī)事務處理數(shù)據庫的區(qū)別與聯(lián)系    3
1.2.1  從數(shù)據倉庫到操作型數(shù)據庫——數(shù)據倉庫的根與源    3
1.2.2  數(shù)據倉庫與傳統(tǒng)數(shù)據庫的區(qū)別    3
1.3  數(shù)據倉庫的產生原因    5
1.3.1  數(shù)據囚籠現(xiàn)象    5
1.3.2  信息孤島現(xiàn)象    5
1.3.3  相互矛盾的信息流    6
1.3.4  集成的解決辦法    6
1.3.5  動力和動機    7
1.4  管理信息系統(tǒng)的“上層建筑”    8
1.4.1  管理層次的概念    8
1.4.2  中層和上層管理存在的系統(tǒng)真空    9
1.4.3  數(shù)據倉庫系統(tǒng)應用的基本作用    9
1.4.4  數(shù)據倉庫應用的基本目標    11
1.4.5  數(shù)據倉庫應用成功的保障    11
1.5  電子商務與電子政務    12
1.5.1  現(xiàn)代社會中的電子商務與電子政務    12
1.5.2  以客戶為中心的現(xiàn)代社會環(huán)境    14
1.5.3  電子商務與電子政務提高了服務效率    14
1.6  數(shù)據倉庫的ROI（回報投入比）    17
1.7  聯(lián)機綜合分析系統(tǒng)中數(shù)據倉庫的應用    18
1.8  挑戰(zhàn)和趨勢    20
第2章  數(shù)據倉庫的總體結構    24
2.1  金字塔結構    24
2.2  數(shù)據倉庫的結構與環(huán)境    28
2.3  準備區(qū)——數(shù)據源和數(shù)據倉庫之間的過渡    31
2.4  元數(shù)據與模型    31
2.4.1  元數(shù)據的定義    33
2.4.2  元數(shù)據的作用    33
2.4.3  元數(shù)據和模型的整建    33
2.4.4  命名法    34
2.4.5  元數(shù)據存儲區(qū)    35
2.4.6  元數(shù)據的維護和應用    36
2.4.7  元數(shù)據的定義和管理    37
2.4.8  統(tǒng)一元數(shù)據標準和元數(shù)據交換    42
2.5  多維數(shù)據結構    45
2.5.1  星型結構    45
2.5.2  雪花型結構    47
2.5.3  混雜型結構    49
2.5.4  度量應用舉例    49
2.6  映像    49
2.6.1  映像的含義    51
2.6.2  數(shù)據遷移和轉換的過程    51
2.6.3  抽象與映像層次    55
2.6.4  應變式映像策略    56
2.6.5  映像類型    57
2.7  滾動綜合數(shù)據    58
2.8  聯(lián)機分析處理    63
2.8.1  聯(lián)機分析處理——數(shù)據倉庫的自然延伸    63
2.8.2  聯(lián)機分析處理系統(tǒng)的集成    64
2.8.3  維的作用    64
2.8.4  對多維數(shù)據方陣的鏈接和分析    65
2.8.5  方陣系列的設計要點    66
2.8.6  總計數(shù)據的自動更新    66
2.8.7  報表構架    66
2.8.8  聯(lián)機分析處理（OLAP）的解決辦法    67
2.8.9  表示工具    67
2.8.10 表示工具的預處理    67
2.9  數(shù)據發(fā)掘    68
2.9.1  數(shù)據發(fā)掘的重要性    69
2.9.2  數(shù)據發(fā)掘的方法與技術    69
2.10  實現(xiàn)閉環(huán)的聯(lián)機分析處理    70
2.11  卸載操作型數(shù)據庫與保護數(shù)據源    73
2.11.1  數(shù)據源——企業(yè)最重要的信息資產    73
2.11.2  操作型事務處理數(shù)據庫的特征    73
2.11.3  決策支持數(shù)據庫系統(tǒng)的特點    73
2.11.4  兩種作業(yè)混合的弊端    74
2.11.5  回顧過去作業(yè)的局限性    74
2.11.6  卸載    75
2.11.7  雙贏的解決辦法    77
2.12  數(shù)據倉庫的三要素    78
2.13  多維總計方陣    80
2.13.1  從基本數(shù)據到綜合信息    80
2.13.2  方陣是聯(lián)機分析的基礎結構    80
2.13.3  方陣的類型    81
2.13.4  方陣的卸載與底層數(shù)據表的屏蔽    84
2.13.5  刷新    85
2.13.6  方陣的設計要點    86
2.13.7  從數(shù)據倉庫基本數(shù)據（事實/維）到最終分析報告的映像    87
2.14  ETL（提取—轉換—加載）從數(shù)據源到目標    88
2.14.1  數(shù)據的啟程    89
2.14.2  數(shù)據標準化的準備工作和數(shù)據清洗的工具字典    89
2.14.3  粒度與聚合數(shù)據    89
2.14.4  魔力無邊的巨型章魚    90
2.14.5  數(shù)據倉庫的數(shù)據追加    90
2.14.6  提取—轉換—加載處理的映像過程    91
2.14.7  作業(yè)順序、依賴關系和進程控制    91
2.14.8  從數(shù)據源進入數(shù)據倉庫到以分析報表輸出    92
2.14.9  數(shù)據提取—轉換—加載的主要流程和會話期流程    93
2.15  從數(shù)據源到目標——Informatica    96
2.16  數(shù)據倉庫在因特網環(huán)境下的應用    98
2.16.1  客戶-服務器系統(tǒng)的特點    99
2.16.2  因特網數(shù)據倉庫的特點    99
2.16.3  設計指南    99
2.16.4  安全性技術    102
第3章  數(shù)據倉庫應用實例    104
3.1  分布式數(shù)據倉庫——獨立的數(shù)據庫接口    104
3.2  共享式數(shù)據倉庫——共享式支票信用認可網絡    107
3.3  某飛機制造公司——單源生產數(shù)據    108
3.4  汽車銷售管理網絡——數(shù)據倉庫支持下的聯(lián)機分析報表    109
第4章  數(shù)據倉庫應用開發(fā)的策略與過程    111
4.1  數(shù)據倉庫開發(fā)策略    111
4.2  跳躍（蛙跳）式發(fā)展    113
4.2.1  數(shù)據倉庫的演變史    113
4.2.2  建立真正的數(shù)據倉庫    114
4.3  數(shù)據倉庫系統(tǒng)平臺    116
4.3.1  觀察數(shù)據倉庫系統(tǒng)的基本結構    116
4.3.2  多層結構環(huán)境    116
4.3.3  多層次、多分區(qū)系統(tǒng)    117
4.3.4  堅實的胡桃    118
4.3.5  表示層與內核的部署    118
4.3.6  應用軟件的基本結構    119
4.4  數(shù)據倉庫應用開發(fā)的要點與特征    123
4.4.1  數(shù)據倉庫應用的命題/主題確定    123
4.4.2  往復循環(huán)式開發(fā)數(shù)據倉庫    128
4.4.3  建立數(shù)據集市    133
4.5  數(shù)據倉庫設計質量    134
4.5.1  數(shù)據倉庫質量的重要性    134
4.5.2  數(shù)據質量保障    135
4.5.3  數(shù)據質量保障的環(huán)境和各個處理環(huán)節(jié)    135
4.5.4  錯誤檢測    137
4.5.5  質量保障系統(tǒng)    137
4.5.6  及時發(fā)現(xiàn)錯誤    138
4.5.7  錯誤追蹤    138
4.5.8  解決劣質數(shù)據    144
4.6  數(shù)據倉庫應用開發(fā)保障技術    144
4.6.1  知識與知識產權的維護    145
4.6.2  團隊    147
4.7  數(shù)據倉庫安全性與有關技術    152
4.7.1  識別安全威脅的類型與攻擊方法    152
4.7.2  安全性防范思想與布局    154
4.7.3  安全性策略與技術    155
4.7.4  數(shù)據倉庫安全性的應用結構設計技術    156
第5章  數(shù)據倉庫設計與應用開發(fā)    160
5.1  數(shù)據倉庫的概念設計    160
5.1.1  概念設計    161
5.1.2  元數(shù)據定義及管理    162
5.1.3  數(shù)據結構概圖    162
5.1.4  數(shù)據倉庫的基本表    163
5.1.5  從邏輯設計到物理設計    164
5.2  數(shù)據倉庫的物理設計    166
5.2.1  事實表設計    166
5.2.2  維數(shù)    170
5.2.3  分區(qū)    173
5.2.4  索引設計    175
5.2.5  完整性約束設計    176
5.2.6  實體化視圖設計    177
5.3  數(shù)據提取—轉換—加載（ETL）    188
5.3.1  建立事件映像    189
5.3.2  建立視圖或實體化視圖與視圖模擬    189
5.3.3  ETL過程舉例    189
5.3.4  提取—轉換—加載的方法    192
5.3.5  數(shù)據的標準化與規(guī)范化    193
5.3.6  數(shù)據清洗與實例    195
5.3.7  數(shù)據提取—轉換—加載工具    198
5.3.8  數(shù)據提取    200
5.3.9  加載和轉換    204
5.3.10 數(shù)據提取—轉換—加載的主流程    209
5.4  綜合管理    212
5.4.1  總體構架    212
5.4.2  匯總準備    214
5.4.3  報表準備工作的基礎——從數(shù)據倉庫生成并刷新實體化視圖    214
5.4.4  刷新實體化視圖    214
5.4.5  監(jiān)控數(shù)據倉庫的刷新    216
5.4.6  實體化視圖的管理要點    218
5.5  聯(lián)機分析處理（OLAP）    219
5.5.1  SQL與綜合函數(shù)    219
5.5.2  多維分析技術    220
5.5.3  數(shù)據倉庫SQL總計分析語句結構與流程    221
5.5.4  綜合SQL和函數(shù)的應用    223
5.5.5  SQL和分析函數(shù)    236
5.6  報表發(fā)布    243
5.6.1  表示系統(tǒng)軟件工具的聯(lián)用——從后臺到前臺    243
5.6.2  建立報表的過程    245
5.6.3  對多維方陣的鉆入/聚合操作    245
5.6.4  表示工具的預處理    246
5.6.5  應用SQL分析服務器    246
5.7  報表系統(tǒng)構架    249
5.7.1  報表系統(tǒng)構架及其支撐結構    250
5.7.2  從數(shù)據庫生成XML數(shù)據    250
5.7.3  建立報表函數(shù)庫    259
5.7.4  建立報表程序庫    287
5.7.5  報表系統(tǒng)構架及其支撐結構    301
5.7.6  應用表函數(shù)    312
附錄A  技術詞匯    319
參考文獻    321