【重磅】大数据和社交媒体分析

情报分析师

全国警务人员和情报人员都在关注

  前言

“大数据”正在迅速成为包括教育在内的许多领域对企业非常重要的领域。简而言之，它指的是来自各种来源的数据和数据中的理解模式的组合，这些数据可用于各种目的，例如改进市场情报和教育研究。大型和小型企业正在实施（或计划实施）大型数据战略。除了市场情报外，它还应用于保健及其他科学研究、航空和重型机械等复杂制造业、改善公用事业和交通管理、石油和天然气勘探、电信、零售、银行和保险、国防和安全等领域。

本文介绍了大数据及其在教育等领域的一些应用。我们还描述了使用大数据监控社交媒体（例如LinkedIn、Facebook和Twitter）促进市场增长和品牌管理。文章介绍了各高校开设的大数据培训课。

本文提到的教育行业的应用包括综合各种关于学生的信息来源，如考试记录、行为模式和教师观察一段时间，以提供更准确和及时的干预。此外，我们还讨论了新的评估形式，如电子评估和适应性测试，这些评估将提供新的数据流，可用于更详细地研究考生的表现，以及监测和评估测试。

大数据

近年来的技术进步已导致在日常生活中产生了大量数据，如购物、旅游、银行、制造业和贸易、公用事业、国家和治理、体育、娱乐、科学、教育和保健。商业组织、研究机构和政府已经开始认识到利用这些数据促进其增长的重要性。因此，大数据的研究在不同研究领域的学者中越来越突出(Einav&Levin，2013；Mayer-Schbnberger&Cukier，2013)，也引起了非学术世界的兴趣(BBC，2013；Lohr，2012)。

大数据的概念包括数据收集、从各种来源收集的数据的组合、对其进行处理和使用由此获得的结果。具体而言，大数据是用于需要复杂处理和可视化的大数据库的术语，传统数据处理软件无法高效地处理它们(Wikipedia，2014a)。麦肯锡全球研究所(McKinsey Global Institute)称，“大数据是指数据集，其大小超出了典型数据库软件工具捕获、存储、管理和分析的能力”（Manyika etal. ,Gartner Inc. 的著名大数据模型(称为3V模型)将其定义为“大数据是高容量、高速度和/或高多样性的信息资产，需要新的处理形式来增强决策、洞察力发现和过程优化”(Beyer&Laney，此处的“卷”一词表示数据集的复杂性，不一定表示数据集的大小。“多样性”是指不同的结构化或非结构化数据，如文本和数字、视频、音频和日志文件。“速度”是指数据可用于分析的速度。有时候，其他的V，如“真实性”（旨在实现数据的完整性和组织自信地使用数据的能力）或“价值”（新数据是否能使组织获得更多的价值？）还突出强调了(Swoyer，2012年；Villanova大学，2014年)。

近年来，大数据的潜力越来越大，导致政府资助了几项新举措。欧盟最近启动了“大数据公营私人论坛”(Big Data Public Private Forum，简称BIG Project)，与学术界、企业和其他利益攸关方接触，制定研究大数据的明确战略。该项目的成果将被用作"地平线2020"的投入，该举措旨在确保欧洲的全球竞争力，在欧洲创造新的增长和就业机会(BIG，2014；欧洲联盟委员会，美国政府宣布为 2012 年“大数据研究与发展倡议”提供资金 2 亿美元，该倡议旨在从科学与工程、国家安全以及教学和学习等领域的大量复杂数据收集中获得见解（Kalil，2012年)。美国国家安全局正在犹他州建设数据中心，处理他们在互联网上收集的信息。与这项开发有关的隐私可能会引起一些担忧，因为它可能导致收集个人的个人数据，如互联网接入历史、私人通信、信用卡使用和健康记录，等等。

本文始发于微信公众号（情报分析师）：【重磅】大数据和社交媒体分析