视频数据接口框架Kafka
2017-03-10 11:21:27 0 举报
Kafka是一个分布式流处理平台,主要用于构建实时数据管道和流应用。它是水平可扩展的,具有故障容忍性,并且能够在秒内处理数以亿计的事件。Kafka的核心是一个发布/订阅消息系统,它能够处理消费者网站的所有数据流。这些数据可以存储在磁盘上,以便在任何时候都可以进行快速访问。Kafka还提供了一种简单的API,使开发人员可以轻松地将数据集成到他们的应用程序中。总之,Kafka是一个强大的、可扩展的、容错的分布式流处理平台,适用于构建实时数据管道和流应用。
作者其他创作
大纲/内容
API
Log
分析结果库 (MySQL)
video_view
video_iddate: 日期device:PC|移动端view_timesview_lenavg_view_len
url = http://192.168.4.214:91/res
每个视频每个热度区间一条
PHP
video_view_time_range
video_idtime_range: 区间view_times
Kafka
分析报告
[GET]
Open站
*action: play*school_id*res_id*res_type:
分析程序
每个视频每天最多24条
DataService
Nginx
video_view_time_heat
video_idstart_timeend_timeview_times
EduSoho
video_view_log
每个视频每天最多1条
Java?
flume
播放器
读写分离?
0 条评论
下一页