大数据相关技术栈数据组件全景图
2022-02-28 16:20:55 18 举报AI智能生成
登录查看完整内容
框架： hadoop相关 spark相关 flink相关 资源调度：yarn olap相关：kylin 查询与数据流QUERY / DATA FLOW： hadoop系列:hive spark系列： spark sql flink系列：flink sql 数据访问和数据库 DATA ACCESS & DATABASES ： Cassandra ： mongodb： 非结构化数据库 habse：构建在hadoop框架之上，列式存储 druid: 多维分析 数据同步： Flume 、sqoop 调度： 任务调度：oozie 、airflow 节点调度：zookeeper 资源调度：mesos
作者其他创作
大纲/内容
流式计算： spark streaming /flink streaming 国内阿里主导，flink用的更多消息中间件： kafka 、rocketmq
流与消息
Sqlpythonscala
统计工具和语言
子主题
AI平台
AI / 机器学习/ 深度学习
elk组合： logstach 日志同步、 elasticsearch 存储和搜索 、kibana 界面查询
日志与监控
协作
hadoop相关spark相关flink相关资源调度：yarnolap相关：kylin
框架 FREAMEWORKS
hadoop系列:hivespark系列： spark sqlflink系列：flink sql
查询与数据流QUERY / DATA FLOW
Cassandra ：mongodb： 非结构化数据库habse：构建在hadoop框架之上，列式存储druid: 多维分析数据同步： Flume 、sqoop
数据访问和数据库 DATA ACCESS & DATABASES
任务调度：oozie 、airflow节点调度：zookeeper资源调度：mesos
调度
搜索
可视化
数据权限：Apache ranger 分库分表分列分人权限： sentry
安全
全景图
大数据技术栈大数据组件全景图
0 条评论
回复 删除
下一页
