Hadoop克服了大数据处理的挑战:

- 海量数据的分布式计算

- 搜索引擎中大量索引和数据的存储

- 传统数据库无法处理的海量数据统计

- 大文件中的重复行识别

- 海量信息中的热点新闻统计