云原生數據中臺:架構、方法論與實踐
本書中討論了云原生架構對于數據中臺的必要性。數據中臺的一個天然特性是支持多元異構的數據以及處理這些數據的工具。雖然很多時候孤島的產生有組織架構的原因,但是缺乏統一的數據平臺,無法快速支持不同部門對數據的不同需求,這些也是產生孤島的重要原因—因為業務部門需要不斷建設獨立的系統以滿足眼前的緊迫需求。在Twitter的大數據平臺建設過程中,公司規模從300人發展到4000人,集群規模從80臺服務器擴展到8000臺服務器,利用云原生架構我們快速滿足了各個部門對不同數據的需求,并極大簡化了統一數據規范的工作。各個業務部門可以快速自主地在平臺上開發自己的數據應用,很少需要額外的系統支持,從而大大降低了出現孤島的可能性。隨著云平臺及容器技術的不斷成熟,我們認為云原生架構一定是未來數據平臺建設的必然選擇。
·19.4萬字