数据中台技术栈课件.pptx

《数据中台技术栈课件.pptx》由会员分享，可在线阅读，更多相关《数据中台技术栈课件.pptx（25页珍藏版）》请在三一办公上搜索。

1、数据中台技术栈,演讲人,2025-11-11,2020,数据中台技术栈演讲人2025-11-112020,目录,01.,中台概念,02.,数据库,03.,方法论,04.,数据开发,05.,数据应用,06.,应用支撑,目录01.中台概念02.数据库03.方法论04.数据开发05,中台概念,中台概念,中台概念,架构分层,数据采集,应用层,计算层,中台概念架构分层数据采集应用层计算层,数据库,数据库,数据库,MPP数据库 GBaseGauss 200GrennPlumTiDB数据仓库 Hive,数据库MPP数据库,方法论,方法论,方法论,方法论,数据开发,数据开发,数据开发,数据汇聚,kettle,

2、A,data-x,B,Spark SQL,C,Spring batch,D,JDBC,E,Sqoop,F,数据开发数据汇聚kettleAdata-xBSpark S,数据开发,数据汇聚,Camel,Flink-X,Canal,Flume,Kafka,爬虫,数据开发数据汇聚Camel Flink-XCanal Flu,Apache Atlas,数据血缘关系元数据管理,数据治理,Apache Atlas数据血缘关系数据治理,数据质量,Apache Griffin,数据开发,数据质量Apache Griffin数据开发,数据应用,数据应用,共享交换数据查询机器学习知识图谱,数据应用,共享交换数据应用

3、,数据应用,数据查询,A,Presto,B,Apache Kylin,C,Apache Calcite,D,Impala,E,SparkSQL,F,Drill,数据应用数据查询APrestoBApache KylinCA,数据应用,数据查询,Apache HAWQ,1,Apache Tajo,2,Apache Trafodion,3,Apache Phoenix,4,数据应用数据查询Apache HAWQ1Apache Taj,应用支撑,应用支撑,链路追踪 zipkinSleuthPrometheus,监控,链路追踪监控,应用支撑,调度,Xxl-job,Azkaban,应用支撑调度Xxl-job Azkaban,应用支撑,数据权限,应用支撑数据权限,应用支撑,身份认证,Kerberos,01,Auth2.0,02,应用支撑身份认证Kerberos01Auth2.002,ELK,日志采集,Rsyslogfilebeat,Sentry,日志管理,ELK 日志采集RsyslogSentry 日志管理,应用支撑,数据安全,Apache Sentry,Ranger,应用支撑数据安全Apache SentryRanger,感谢聆听,感谢聆听,