多年来,开源大数据技术经过持续发展,如今正逐步成熟。然而,技术进步的步伐依然不减。基于京东的大数据实践,展望未来一两年的技术发展趋势。当前的Hadoop架构在计算与存储逻辑分离方面取得了重要进展,尤其是在存储本地性的优化方面。随着高速网络的普及,机器之间的带宽限制不再是关键瓶颈,而单节点上的硬盘IO和CPU性能则日益成为技术优化的焦点。