视频数据接口框架Kafka-HBase
2017-03-10 11:21:27 0 举报
Kafka-HBase是一个用于处理大规模实时数据的视频数据接口框架。它结合了Apache Kafka和Apache HBase两个开源项目的优势,实现了高性能、可扩展和容错的数据存储和处理能力。Kafka负责实时数据的接收、传输和存储,而HBase则提供了高效的分布式数据存储和查询功能。通过Kafka-HBase框架,用户可以方便地实现视频数据的实时采集、处理和分析,为各种应用场景提供强大的支持。
作者其他创作
大纲/内容
API
Log
HBase
video_view
video_iddate: 日期device:PC|移动端view_timesview_lenavg_view_len
[GET]
infuageo
每个视频每个热度区间一条
Java
video_view_times_24h
video_idtime_range: 区间view_times
Kafka
http://192.168.4.214:91/res/player.png
分析报告
原始数据存档
Open站
分析程序
RESTful
每个视频最多24条
DataService
video_view_log
school_idvideo_idtimestampstart_timeend_timeuser_agent: IPuserId: username...
Nginx
video_view_times_timeline
video_idstart_timeend_timeview_times
EduSoho
player_access_log
每个视频每天最多1条
kafka-hbase-connector
logstash
flume
播放器
LoadProcess
0 条评论
下一页