Advertisement

如何应对大数据的三大挑战?

阅读量:

当互联网与IT技术正在不断深化对传统产业的改造进程时,在社会整体信息化水平不断提升的情况下,各行各业将会产生丰富的用户数据资源。

大数据已上升至国家战略地位,在推动中国经济发展转型与升级方面发挥着关键作用;不仅在国际经济竞争中占据重要地位,在全球政治格局和文化影响力方面也展现出显著优势。

于2015年举办的第四届中关村大数据论坛中

从概念到应用落地

近年来,在数据科学领域的大数据概念逐渐从理论探讨转向实际应用,并已广泛应用于多个领域

同样地,在工业领域中存在一套完整的主数据体系、数据库以及数据分析平台(如BI),通过这些技术手段能够进一步提升工业化生产的效率。其中一项重要的探索方向包括将模型进行数据化处理以及将收集到的数据转化为可应用的产品。

在民生领域方面,“龙信思源”命名的数据公司开发了丰富的数据产品支持方案,并为政府机构、社会组织以及研究团队提供技术支持服务,在推动整个民生行业的数字化转型进程中发挥了重要作用

中国的大型数据产业距此仅相距1500米,在ahead of it lies a road of immense length.其中蕴含的巨大机遇也颇多。如今,在这个数据密集型的领域里有大量大数据创业公司正在进行当中:从数据交换、到数据建模、再到数据分析;从数据可视化、到数据集成;从数据仓库建设、到行业应用拓展;每一个环节都在积极布局自己的事业空间。值得注意的是:在当前环境下已逐渐成为全球知名风险投资机构重点投资的对象之一;而各阶段企业的融资活动也在加速推进中。

随着大数据产业链和相关行业应用逐步发展成熟之后, 大数据将导致发生根本性转变, 并推动整个社会形态的革新.

宽带资本董事长田溯宁表示,在工业时代 era, 产品的中心地位是关键; 而进入大数据时代 era, 客户运营成为核心关注点. 不仅带来了数据量的显著增长, 还引发了企业的经营模式的根本转变. 此外,在精准识别客户需求的同时, 我们能够实现产品与客户需求的最佳匹配. 同时, 把握住客户关键时刻的需求, 就像是抓住了 golden opportunities.

大数据的3大挑战

大数据通过信息技术的基础层来采集信息化的共性和未来趋势。在数据处理方面的大规模组织与分析能力作为支撑作用的大数据技术被视为一种底层技术。然而,在数据处理能力的强大支撑下,大数据面临着诸多制约。

中国科学院院士、大数据专家徐宗本认为,大数据行业的真正挑战来自三个方面:首先,在分析基础方面需要进行变革,在原有的基础上融入统计学原理、计算理论基础以及逻辑学思维体系。其次,在计算技术层面也需要进行根本性的创新,在存储技术、算法语言体系以及运算方法等多个维度都需要进行全面重构。最后,在验证结论的准确性方面仍面临巨大挑战

在三大挑战领域中, 应用层面临的挑战最为突出. 大数据理论虽美, 但在实际应用中却往往让人感到难以捉摸. 探索如何将抽象数据转化为可操作的具体产品, 这一工作需要各个行业深入研究.

当下大数据的浪潮方刚刚起步,在众多传统行业中已经意识到这一领域的巨大潜力然而鲜有实际收益可言。若想推动发展,则需先打好数字经济的基础;否则就难以产生实质性的创新行为。业内专家普遍认为,在未来的时代中只有与现有产业进行深度结合才能把握住机遇、规避风险。

未来的路要怎么走?

大数据产业既脱离行业而独立发展,又依仗各行业的发展而形成完整的大数据应用的广度和深度。

共享经济一词近年来备受关注,在经历了实物类的 sharing 之后,在数据层面也掀起了一波 new 热潮。例如 Airbnb、滴滴打车和优步等平台都实现了 physical assets 的分享。与此同时,在 IT 领域中云计算的概念逐渐成熟,并通过集中提供所需 calculation resources 来满足更多用户的 needs. 在这种 shared economy 模式下,在线平台无需将 resource 和 calculation 能力直接连接起来即可实现 value 的创造与分配;而个人则可以通过拥有 excess resources 或技能来实现 value 的创造与分配;最终形成了多点之间的互动关系。在这种模式下,在线平台也可通过大数据技术实现 resource 的自由调配与利用。

当下

与会专家普遍认为,目前的数据定价体系尚未完善,导致现有数据仅停留在交换层面,从而使得大规模的数据流通仍然面临障碍。未来的发展趋势将是建立和完善相应的数据交易平台

行业内专家普遍认同

许多从事大数据运营的企业致力于进行大规模的数据交易活动。然而,在这一领域面临的主要挑战包括:首先,在未经处理的情况下直接进行大额数据交易存在困难。大量敏感信息涉及个人隐私范畴,在未经脱敏处理的情况下无法直接用于开发相关产品;此外,在灰色区域获取的信息也需要经过脱敏处理后才能用于开发相关产品,并且涉及国家安全的信息则不能用于开发产品作为参考依据

其二,在于在当今社会经济环境下,企业间的竞争不仅体现在资源获取能力上,更表现在资源利用效率上。从这个角度来看,在当前阶段中,在于企业在获取资源的过程中存在一种不对等性:一方面,企业倾向于对外部资源进行持续补充;另一方面,企业又会对现有资源进行优化升级,以提升自身的竞争力;与此同时,在服务层面希望整合多源资源以构建完整的业务数据库;随着越来越多的企业开始认识到自身data资产的价值;对于data开放与合作的态度仍需进一步提升

三是部分讨论了数据版权的问题。原始的数据由于各种原因难以直接应用于实际场景中,在这种情况下公司与产业界需要的是脱敏感化处理后的数据产品。对于经过深度处理后的数据产品来说,在归属和使用方面存在哪些具体的问题?这些问题仍需进一步研究和解决。

改写说明

行业一致认为,在解决这4大问题时,并非仅靠市场化的企业力量来创新思路即可;还需政府提供主导作用。

作为中关村管委会副主任的宣鸿表示, 中关村管委会将致力于推动大数据产业的快速成长, 在政策引导、人才引进以及资源支持等多个方面, 全心全意推动发展.

根据了解信息

推荐阅读文章

大数据工程师在阿里面试流程是什么?

学习大数据需要具备怎么样基础?

年薪30K的大数据开发工程师的工作经验总结?

全部评论 (0)

还没有任何评论哟~