1. 定义

大数据是指利用常用软件工具捕获、管理和处理数据所耗时间超过可容忍时间的数据集

2. 应用领域

大数据在政治、金融、教育、出行、旅游、政府公共安全、体育等领域都有丰富的应用案例。

3.大数据时代的机遇与挑战

image.png
image.png
企业面临的挑战主要有需求不清晰、数据孤岛严重、数据可用性低、缺乏管理技术、数据安全、人才缺乏、开放和隐私权衡等方面;

  • hadoop成为大数据批量处理的基础,但无法提供实时分析。

Hadoop业界参考实例:英特尔优化HBase数据库,使用SSD固态硬盘和CPU指令的优化使HBase的检索效率大大增强,来提供即时数据处理。

  • 内存计算业界参考实例:Google PowerDrill image.png
  • 流计算业界参考实例:image.png


  • 华为侧大数据解决方案:FusionInsight

提供了从hadoop环境层、数据洞察层、系统管理层各个不同层次的服务。
image.png