Hadoop发展史
2022-12-07 09:38:15 0 举报AI智能生成
站在巨人的肩膀上之Hadoop前世今生
作者其他创作
大纲/内容
Lucene（1998）
Nutch(2004)
GFS（2003)
NDFS(2004)
MapReduce编程模型(2004)
2005年，Doug Cutting基于MapReduce，在Nutch搜索引擎实现了该功能
2006年，Yahoo招安Doug Cutting
Doug Cutting将NDFS和MapReduce进行了升级改造，并重新命名为Hadoop（NDFS也改名为HDFS，Hadoop Distributed File System）。
BigTable(2006)
HBase
2008年，Hadoop正式成为Apache基金会顶级项目
Lucene
【美·工程师】Doug Cutting
1998年
用于文本搜索的函数库
编程语言：Java
2001年底，成为Apache软件基金会jakarta项目的一个子项目
Nutch
2004年
Doug Cutting & Mike Cafarella
开源搜索引擎，建立在Lucene核心之上
建立在Lucene核心之上的网页搜索应用程序
GFS（Google File System)
2003年
Google
为了存储海量搜索数据而设计的专用文件系统
BigTable
分布式数据存储系统
处理海量数据的非关系型数据库
2006年
Google
HBase
Doug Cutting
Hadoop里面的BigTable
NDFS（Nutch Distributed File System）
2004年
Doug Cutting
分布式文件存储系统
MapReduce编程模型
2004年
Google
用于大规模数据集（大于1TB）的并行分析运算
0 条评论
下一页
