滴滴數(shù)據(jù)平臺建設實踐

案例背景:
在企業(yè)發(fā)展過程中，會越來越多地依賴大數(shù)據(jù)，同時也會產(chǎn)生各種各樣的數(shù)據(jù)工具，彼此可能會有交叉、重合；數(shù)據(jù)量和計算量越來越大，數(shù)據(jù)成本高企，缺乏有效的治理。
如何為數(shù)據(jù)開發(fā)降本提效？

解決思路:
通過建設一站式數(shù)據(jù)開發(fā)平臺，解決內部數(shù)據(jù)工具的銜接問題，打通從數(shù)據(jù)采集、同步，到ETL加工，到監(jiān)控告警、運維等平臺。并做到在一個平臺做離線數(shù)據(jù)開發(fā)、流計算開發(fā)以及機器學習任務的開發(fā)和運維。
通過建設一站式數(shù)據(jù)資產(chǎn)平臺，解決內部數(shù)據(jù)的治理問題，從存儲、計算、質量、安全、模型、價值等多個維度，關注數(shù)據(jù)管理的各個方面。通過平臺，提供更短的決策鏈條、更完整的問題暴露以及更快的治理操作方式。

成果:
通過開發(fā)平臺的建設，做到一站式數(shù)據(jù)開發(fā)，降低門檻，開發(fā)效率增加3成以上。
通過資產(chǎn)管理平臺的建設，做到快速定位數(shù)據(jù)問題，節(jié)約集群成本、提升數(shù)據(jù)質量以及監(jiān)控安全漏洞。