在大数据时代,超大数据体量和超过80%比例非结构化数据的存在,已超越了传统数据库的管理能力,大数据技术将是IT领域新一代的技术与架构,他将帮助人们从大体量,高复杂的数据中提取价值。而我们从麦肯锡的研究报告了解到,仅美国医疗服务业、欧洲公共管理部门和全球定位数据市场三个领域每年就能产生超过7千亿美元的市场价值。
“大数据”为企业和政府带来了革命性影响,改变着企业传统的管理和运营模式,通过对“大数据”的分析与挖掘,可以实现管理流程的优化,将粗放式、经验式的管理变成精细化、数据驱动的管理。那些做贷款公司的金融公司,如果能收集到足够的中小企业经营管理数据,通过建立模型进行综合分析,可以有效评估风险,从而指导授信和定价,并实现放贷的批量的自动化审批。这可以大大降低金融机构的经营成本。
在智慧城市的建设中,通过对大量交通摄像头采集的数据进行深度分析,可以有效地引导车辆的通行,会对缓解交通压力带来积极影响。在其他方面的应用更加广泛,如在通信领域,通过定位对一个人的位置信息进行分析挖掘,可以与银行、保险、航空公司等形成深度的合作,实现针对性服务,创造新的利润增长点。
随着互联网技术的不断发展,数据将像能源、材料一样,成为战略性资源。如何利用数据资源发掘知识、提升效益、促进创新,使其为国家治理、企业决策乃至个人生活服务,成为了大数据技术的追求目标。
这当中有两点非常有利于中国信息产业跨越式发展。一是大数据技术以开源为主,迄今为止,尚未形成绝对技术垄断。即便是IBM、Oracle等行业巨擘,也同样是集成了开源技术,和本公司原有产品更好的结合而已。开源技术对任何一个国家都是开放的,中国公司同样可以分享开源的蛋糕。与其他高科技行业不同,有业内人士表示,单纯考虑狭义的大数据处理技术(如Hadoop、MapReduce、模式识别、机器学习等),中外差距仅有5年左右。如果考虑数字资产规模以及利用的技术,中外差距更多体现为意识上的差距。
二是中国人口和经济规模,决定中国的数据资产规模,冠于全球。客观上为大数据技术的发展,提供了演练场。这一点亟待政府、学界、产业界、资本市场四方通力合作,确保国家数据安全的前提下,最大程度的开放数据资产,促进数据关联应用,释放大数据的大价值。