大数据基本概念
大数据诞生背景
大数据的诞生背景、基本概念以及传统数据处理架构的限制。大数据是一种技术,用于满足数据达到海量规模以后的存储和计算需求。


大数据场景具有数据规模巨大、数据生成和处理速度快、多样性和价值等四个特征。针对大数据的存储和计算需求,传统的数据处理架构存在瓶颈,而大数据技术则能提供更强大的扩展性和处理效率。
离线与实时场景
大数据的离线处理场景和实时处理场景。离线处理场景适用于有界数据,采用批处理方式进行计算,得到最终结果。实时处理场景适用于无界数据,采用流处理方式进行实时计算,展示结果并进行外部调用。离线处理适合于数据仓库搜索与检索、图计算、数据分析等场景,实时处理适合于实时流计算。要区分离线处理和实时处理,关键在于数据是否有界。

大数据基本架构

大数据基本概念
http://example.com/2024/06/13/大数据/大数据概念/