1991年,比爾·恩門(Bill Inmon)出版了他的第一本關于數據倉庫的書《Building the Data Warehouse》,标志着數據倉庫概念的确立。 我們所常說的企業數據倉庫Enterprise Data Warehouse (EDW) ,就是一個用于聚合不同來源的數據(比如事務系統、關系數據庫和操作數據庫),然後方便進行數據訪問、分析和報告的系統(例如銷售交易數據、移動應用數據和CRM數據),隻要數據彙集到數倉中,整個企業都訪問和使用,從而方便大家來全面的了解業務。我們的數據工程師和業務分析師可以将這些不同來源的相關數據應用于商業智能(BI)和人工智能(AI)等方面,以便帶來更好的預測,并最終為我們作出更好的業務決策。
Omega vs. Lambda vs. Kappa 結語: 面對複雜多變的新業務場景,随着數據技術不斷成熟,新的實時技術棧會出現,數據技術也會經曆分離與融合。目前,融合的趨勢比較明顯,如實時湖倉一體,将實時處理能力融入數據倉庫中。不論企業如何選型實時數倉,數據平台技術棧的建設一般都應該遵循三條基本原則: