Hadoop发展史
2022-12-07 09:38:15 0 举报AI智能生成
登录查看完整内容
站在巨人的肩膀上之Hadoop前世今生
作者其他创作
大纲/内容
Nutch(2004)
Lucene（1998）
NDFS(2004)
Doug Cutting将NDFS和MapReduce进行了升级改造，并重新命名为Hadoop（NDFS也改名为HDFS，Hadoop Distributed File System）。
2006年，Yahoo招安Doug Cutting
2008年，Hadoop正式成为Apache基金会顶级项目
HBase
BigTable(2006)
2005年，Doug Cutting基于MapReduce，在Nutch搜索引擎实现了该功能
MapReduce编程模型(2004)
GFS（2003)
【美·工程师】Doug Cutting
1998年
用于文本搜索的函数库
编程语言：Java
2001年底，成为Apache软件基金会jakarta项目的一个子项目
Lucene
2004年
Doug Cutting & Mike Cafarella
开源搜索引擎，建立在Lucene核心之上
建立在Lucene核心之上的网页搜索应用程序
Nutch
2003年
Google
为了存储海量搜索数据而设计的专用文件系统
GFS（Google File System)
分布式数据存储系统
处理海量数据的非关系型数据库
2006年
BigTable
Doug Cutting
Hadoop里面的BigTable
分布式文件存储系统
NDFS（Nutch Distributed File System）
用于大规模数据集（大于1TB）的并行分析运算
MapReduce编程模型
Hadoop前世今生
0 条评论
回复 删除
下一页
