《资料与知识管理》(33页).ppt

1、資料與知識管理1本章概要q資料管理：關鍵成功因素q資料倉儲q企業情報發現的資訊與知識q資料探勘概念與應用q資料視覺化科技q以網路為基礎的資料管理系統q知識管理資料管理 q關鍵成功因素(Critical Success Factors，CSF)組織將資料管理視為關鍵成功因素w有高品質的資料資料需具備精確與完整性、即時性、一致性、可存取性、相關性、簡單扼要等特性管理資料的困難度w資料的量隨著時間以指數的方式增加w資料散置在組織各處，且由多人用各種方式來蒐集w組織作決策時，需要考量外部資料w資料安全性、品質與完整性是相當重要的w選擇適當的資料管理工具是一個很大的問題 資料確認與資料管理的困難度，讓組

2、織需尋求更有效率及有效的資料管理解決方案資料生命週期資料來源q內部資料來源通常指的是儲存於公司資料庫中的人事、產品、服務與流程等資料q個人資料根據公司員工的專業將資料文件化，並由員工作維護形式w銷售預估、競爭者情報、經營法則、程序等q外部資料來源商業資料庫、政府報告等文件管理q定義：對電子化文件、全文影像、試算紙、文書處理文件與其他複雜文件的自動化控制，其管理時間涵蓋了從文件產生到最後存檔的整個生命週期q文件管理系統(Document Management Systems，DMSs)以電子化格式提供辨識、儲存、整理、追蹤與簡報資訊給決策者的電腦系統功能w文件確認、儲存與管理w追蹤、版本控制w工

3、作流程管理w簡報主要工具w工作流程軟體、作者工具、掃瞄器、影像系統以及資料庫資料倉儲q交易處理(Transaction Processing)資料以階級結構被組織，並集中以快速與有效率地處理例行、重複的資料q分析處理(Analytical Processing)累積資料的分析，常常由最終使用者進行，也稱為企業情報包含資料探勘、DSS、查詢等q資料倉儲(Data Warehouse)隨時可供分析處理活動(像是資料探勘、決策支援、查詢與其他應用)的形式組織而成的主題導向之歷史資料的儲存處資料倉儲的特徵q 組織Organization-資料以主題方式組織，包含只與決策支援相關的資訊q 一致性Cons

4、istency在不同營運資料庫的資料可能以不同方式編碼，在資料倉儲裡，會用一致性的方式編碼q時間變化Time variant資料被儲存多年所以可以用來瞭解趨勢、預測與比較q不變性Nonvolatile-資料一旦輸入到倉儲就不再更新q多維度-一般資料倉儲使用多維度結構q網路為基礎 以網路為基礎之有效率的運算環境資料倉儲架構與觀點關聯式資料庫q關聯式資料庫：將資料儲存在二度空間的表格多維度資料庫q多維度資料庫：一般以陣列方式儲存資料，至少是要三個維度的組合，例如地理區域、產品線、業務、時間等Data Cube關聯式與多維度資料庫之間的對應陣列關聯式與多維度資料庫之間的對應陣列(續)資料超市q資料超

5、市(Data Mart)設計給策略專業單位(SBU)或是部門使用的小型資料倉儲優點w低成本(價格低於10萬美元，比起資料倉儲要價高達100萬美元或是更多)w明顯較短的導入提前期，常常少於90天w地方控制而非中央控制，賦與使用團體權力w比起泛企業資料倉儲有更快速的反應並更容易瞭解與操作q類型複製型資料超市(Replicated/dependent data marts)單機型資料超市(Stand-alone data marts)w針對特定應用，例如行銷、財務、或工程等企業情報(Business Intelligence，BI)qBI：蒐集、儲存、分析和提供存取資料的應用與技術之廣稱，用以協助企

6、業使用者做更好的企業與策略決策q主要應用查詢與報告的活動與技術、線上分析處理(OLAP)、決策支援、資料探勘、預測與統計分析qBI的工具分為資訊與知識發現(information and knowledge discovery)決策支援與情報分析(decision support and intelligent analysis)BI的運用企業情報類別知識發現(Knowledge Discovery，KD)q從大量資料萃取知識的流程，包括資料探勘q主要的目標-在資料裡辨識有效的、新的、潛在的、有用的，與最終可理解的模式(pattern)qKD所使用的科技支援大量資料蒐集有力的多處理器電腦資料探

7、勘與其他演算法q主要工具傳統的查詢語言(例如 SQL(structured query language)或QBE(query-by-example)OLAP資料探勘(Data mining)資訊與知識發現演進的階段線上分析處理(Online Analytical Processing,OLAP)qOLAP分析與綜整資料以反應企業需求的一組工具企業結構允許使用者作快速的問與答 在資料倉儲與資料超市上進行q分類ROLAP(Relational OLAP)w在現存關連式資料庫上執行w多維角度：每次針對使用者需求產生MOLAP(Multidimensional OLAP)w特殊的多維資料倉庫(mul

8、tidimensional data store，例如 Data Cube）w多維角度：已實體儲存於特定資料檔案中資料探勘(Data mining)q資料探勘在大型資料庫、資料倉儲或是資料超市裡搜尋有價值的企業資訊q功能趨勢與行為的自動化預測-在大型資料庫自動化找尋預測性資訊的流程自動化過去未知模式的發現-辨識過去隱藏的模式q應用零售業與銷售：預測銷售以及決定正確的存貨水準與商店之間的配銷時程和預防虧損銀行業：預測借貸呆帳水準與盜刷信用卡製造業與生產：預測機械的錯誤，並發現主要控制製造功能最佳化的因素保險：預測申請理賠數量與醫療保險內容的成本警察工作：追蹤犯罪模式、地點與犯罪行為健康保建：提供

9、與重要病症相關的病人地理位置行銷：用來預測哪些顧客將會反應郵件或是購買特定產品的顧客地理位置資料探勘技術與工作q技術案例推理(Case-based reasoning)使用歷史案例辨識型態類神經計算(Neural computing)機器學習方法，對型態作解釋智慧型代理人(Intelligent agents)從網際網路或公司內網路為基礎之資料庫擷取資訊關連式分析(Association analysis)使用演算法從大型資料組中作整理排序，表示項目(items)間的統計規則決策樹(Decision trees)基因演算法(Genetic algorithms)q工作分類(Classifica

10、tion)分群(Clustering)關連式法則(Association)循序分析(Sequencing)預測(Forecasting)迴歸(Regression)時間序列(Time Series)其他探勘環境q文字探勘(Text Mining)對於無結構與較無結構的文字檔案作資料探勘查詢隱藏的文件內容或利用一般主題的群體文件(如辨識所有類似抱怨之保險公司的顧客)q網路探勘(Web Mining)對web資料作探勘應用領域：w資訊過濾(電子郵件、雜誌與報紙)w監視(競爭者、專利與技術發展)w分析使用狀況的網路存取登錄的探勘(點選狀況的分析)w協助瀏覽；以及網際網路對抗犯罪的服務。功能w資源發現

11、：在網路上找出不熟悉的文件與服務w資訊萃取：從網路上發現新的資訊自動化萃取特定資訊w歸納：在網站上與跨許多網站上找出一般模式q空間探勘(Spatial Mining)q時間探勘(Temporal Mining)資料視覺化科技 q資料視覺化(Data Visualization)利用數位影像、地理資訊系統、使用者繪圖介面、多維度表格與圖片、虛擬實境、3D呈現、視訊與動畫以及其他多媒體格式的資料視覺呈現視覺化套裝軟體-提供使用者自我引導探索與大量資料的視覺分析的功能q類型地理資訊系統(Geographical Information System，GIS)w以電腦為主使用數位繪製的擷取、儲存、查詢

12、、整合、操作與顯示資料的系統w最明顯的特徵：每筆紀錄或是數位元件有可辨識的地理位置，利用整合空間導向資料庫與其他資料庫的地圖，使用者可以產生規劃、問題解決與決策的資訊，以增加其生產力與決策品質視覺互動模式(Visual Interactive Modeling，VIM)w使用電腦繪圖顯示呈現不同管理或是營運決策在目標上的影響，如利潤或市場佔有率，該模式可以使用在決策支援與訓練上視覺互動模擬(Visual Interactive Simulation，VIS)w最終使用者以動畫形式觀看模擬模式的一種方法，其使用繪圖終端機q虛擬實境(Virtual Reality，VR)互動的、電腦產生的、三度空

13、間繪圖，透過頭戴式顯示器傳送給使用者虛擬實境標記語言(VRML)w虛擬實境的獨立平台標準使人們可以線上方式在超級市場、博物館，與商店瀏覽如同與文字資訊一樣簡易wVRML可以允許物件被網際網路使用者用來在虛擬空間裡行走以網路為主的資料管理系統以網路為主的資料管理系統（續）Continued知識管理(Knowledge Management,KM)q知識(Knowledge)或稱智慧資本/資產(Intellectual capital/assets)有背景的、有意義的與可行動的，且必須在人們之間交換且必須可以成長知識分類w外顯知識(Explicit Knowledge)：更多客觀的、合理的與技術的

14、知識w內隱知識(Tacit knowledge)：主觀或是經驗學習累積儲存的、它是高度個人的難以形式化q知識管理協助組織辨識、選擇、組織、散播、轉換已成為組織部分記憶的重要資訊與專家知識之程序q知識長(Chief Knowledge Officer，CKO)目標：將公司的知識資產最大化、設計與導入知識管理策略，並且有效地在內部與外部交換知識資產實務社群(Community of practice)：組織中一群有共同專業興趣的人知識管理系統(Knowledge management system,KMS)q知識管理系統使用現代資訊科技來系統化、提升與促進公司內部與公司之間的知識管理目的-利用組織

15、的人力資本廣泛的存取專家知識來協助組織處理流動、快速變革與裁員q知識管理系統循環創造知識：知識是當人們決定新的做事方式或是發展新的技能時所創造出來的擷取知識：新知識必須被認為是有價值且以合理的方式呈現精鍊知識：新知識必須以脈絡方式被放置，如此才可以行動儲存知識：有用的知識必須以合理的格式被儲存在知識儲存處，如此在組織裡的其他人才可以存取管理知識：就像圖書館，知識必須隨時維持在最新狀態散播知識：知識必須在組織裡以有用的格式讓任何需要的人在任何時候獲得知識管理系統循環圖知識管理-資訊科技 q通訊科技(Communication technologies)允許使用者存取需要的知識，並且與彼此溝通-特

16、別是與專家溝通電子郵件、網際網路、公司內部網路與其他以網路為主的工具提供通訊功能q協同科技(Collaboration technologies)提供執行團隊工作的方法例如以電子腦力激盪提昇團隊工作，特別是對知識的貢獻q儲存與檢索科技(Storage and retrieval technologies)指利用資料庫管理系統以儲存與管理外顯知識屬於協同運算系統的電子文件管理系統與特殊化儲存系統是用來擷取、儲存與管理內隱知識的工具 知識管理之支援技術q人工智慧(Artificial intelligence)是人類思考流程並且在機器上呈現這些流程的研究(像是電腦與機器人等)q智慧型代理人(Intelligent Agents)學習使用者如何工作並提供其日常任務協助的軟體系統q資料庫裡的知識發現(Knowledge Discovery in Database，KDD)用來從大量文件與資料搜尋與萃取有用資訊的流程q資料探勘(Data mining)q模式倉儲(Model warehouses)qXML(Extensible Markup Language)知識管理工具知識管理系統之整合