第14章-大数据管理PPT.ppt

大数据管理是指利用相关技术对大规模、高速度、多样性和价值密度各异的数据集合进行获取、存储、管理、分析和服务的过程。在当今信息社会，大数据已成为一种战略资源，对经济、科技和社会发展具有重要影响。本章内容主要围绕大数据的概述、应用、管理系统以及具体的应用案例展开，涵盖了大数据的基本概念、核心特征和实际应用场景。 大数据概述部分，首先提出了大数据的定义，然后从应用类型的角度将大数据分为三大类：海量交易数据、海量交互数据和海量处理Web数据。随后，深入探讨了大数据的四个基本特征：巨量（Volume）、多样（Variety）、快变（Velocity）和价值（Value）。其中，巨量是指数据规模庞大且不断增长，多样涉及不同类型的数据源和数据格式，快变意味着数据流动迅速且需要实时处理，而价值则强调了大数据潜在的巨大经济、产业和社会科学价值。 在大数据的应用部分，强调了大数据管理不仅是数据对象的管理，更是数据治理，并指出大数据作为一种研究方法和信息化思维，在多个学科领域和应用场景中已经取得成效。列举了两个应用案例：感知现在、预测未来的互联网文本大数据管理与挖掘，以及数据服务、实时推荐的基于大数据分析的用户建模。 以互联网文本大数据管理与挖掘为例，具体介绍了时事探针系统如何实现实时监控、收集和深度挖掘互联网媒体数据，有效应对了信息过载问题，并具备动态数据抓取、历史数据保留、数据深度智能分析、数据可视化展示、敏感信息实时捕捉和预定阈值报警等功能。 此外，本章还针对互联网文本大数据管理面临的挑战进行了分析，如无法事先预定义关系模式和值域、关系型数据存储和查询的限制，以及对于可扩展性和实时性的高要求。提出了一系列解决方案，并以时事探针系统为例，展示了如何构建适应性强、实时响应的互联网文本大数据管理系统。 本章从理论到实践深入讲解了大数据管理的核心概念、特征、应用和技术挑战，并通过具体的案例分析，展现了大数据在互联网媒体文本数据管理中的重要作用，以及如何通过技术手段解决实际问题，提高大数据的利用效率和价值。