在日本,大数据解决方案和服务是一个新兴市场,有研究显示,2011年大数据相关行业的市场规模为1900亿日元,2012年度约为2000亿日元,2013年,日本的大数据市场规模为4亿美元,到2015年度将达到4200亿日元,2017年度达6300亿日元,2020年度约为1兆500亿日元。
大数据市场的增长主要来源于垂直行业间的数据传输,市场潜力巨大。如果能充分利用记录个人购物数据等庞大数据的“大数据”服务,零售业、制造业等4个领域有望通过促进销售和削减成本带来每年7.77万亿日元的经济效益。随着大数据对企业商业表现力的改善,不仅会为企业发展创造了许多新的商机,而且通过大数据的使用,还可改善企业的产品生产经营效率。
政府支持大数据发展,纳入国家发展战略
首先,将大数据纳入国家发展战略。日本的发展战略包括雄心勃勃的建立强有力的基础设施和设备规划,其中包括大数据市场服务和成为全球IT领先者。为此,日本确定的发展目标是成为世界领先的IT国家,政府估计将投资132民日元用于大数据研发,包括开发400Gbps的新的、高速网络基础设施和试验床、高效的数据中心运营系统、数据分析应用项目,以此增加日本工业竞争力、拓展新的行业和实现创新。
其次,政府带头使用大数据。日本政府认识到,建立推动大数据使用的环境是非常必要的,因此,推出了电子政府,对政府管理进行计算机化,。此外,政府还考虑使用匿名技术,对私人部门的数据进行二次利用,建立详细的数据集成。
日本政府推出了data。go。jp网站,这是数据分类网站,目的是提供不同政府部门和机构的数据供使用,向数据提供者和数据使用者开放数据。它鼓励开放数据的使用,帮助收集数据使用的样品,根据反馈意见,对数据分类网站进行建设和完善。数据涉及各类白皮书、地理空间信息、人群运动信息、预算、年终财务和流程数据等。这些都是电子管理开放数据促进路线图确定的,需要优先开放的数据。
企业积极开发大数据业务
日本顶级的ICT业务提供商也在积极开发大数据业务,从数据存储和基础设施处理,到各种数据分析应用。很多ICT服务提供商也宣布了详细的大数据计划。日本Gartner的调查显示,大约60%以上的企业目前正在积极考虑使用大数据。同时,预计到2016年,积极致力于大数据项目的日本大企业的数量将增加一倍,其中70%将有IT部门之外的经营及事业部门参与。
富士通建立了大数据举措中心为用户提供大数据支持。目前,它在寻找大数据尖端技术领域的合作伙伴。
2013年,富士通公司推出了大数据战略,对产品和服务进行重组,通过先进技术和综合数据分析能力,以数据使用支持用户和社会创新。此外,公司还建立了大数据中心(Big Data Initiative Centre),此中心由800人组成,其中核心的用户支持人员有30个,为用户、合作伙伴和新建企业提供一站式服务。用户可接受大数据使用咨询;参与相关的研讨会,使用实际数据进行试验和分析;帮助用户选择适合自己的大数据平台。
2013年,日立公司宣布建立日立全球创新分析中心(Hitachi Global Centre for Innovative Analytics,简称HGC-IA),加速大数据全球商业的扩展。应用端到端的大数据解决方案,为用户提供研究、商业咨询、信息技术和服务。HGC-IA侧重的大数据领域包括:健康医疗面对老龄化社会,开发新的解决方案和服务,改善对病人的关爱、提高组织效率和降低成本;通信和媒体开发相关的解决方案才服务,帮助企业更高效和成本有效的存储、管理、搜索、分析和使用数据、图片和影像;能源开发解决方案,改善能源传输和分配的效率;交通建立相应的解决方案,使用大数据,通过为铁路设备提供积极和高效的维护服务,使运行更安全和可靠;矿业通过对矿业使用设备的数据分析,改善端到端的运营。此外,HGC-IA还使用大数据用于社会创新领域,包括石油、天然气和水等。在企业领域,包括物流、制造、商业智能等。日本希望,通过大数据部署,到2015年大数据相关收入可达到1500亿日元。
2013年,NTT DATA成立了专门的“大数据商务推进室”,将本企业内部各大数据业务关联部门集中在一起。为用户提供一站式服务,包括协助企业挖掘商机并提供相应服务等,NTT DATA计划2015年前,使公司的大数据收入增加到200亿日元。
在日本,使用大数据用于数据分析的时代已近结束。目前大数据在企业中的使用,更多的是用于强化现有服务最近的一项问卷调查显示,使用大数据更多的是为了建立企业的商业战略和改善用户服务。再者还有促进销售和发展新用户、产品开发、加强财务审计、支持决策、加强维护和支持、开展基础研究、对企业性能进行监控和发展非常规问题、加强内部控制。因此,要发展到用于企业的管理战略,还有很长的路要走。但大数据的使用,是提供差异化服务的有力工具,对于多数日本企业,有助于他们竞争力的提升。
大数据发展面临挑战
首先,改革现有个人信息保护法规。传统的日本企业在使用收集的数据时通常非常小心,担心错误使用数据导致企业信誉受损。严格的个人信息保护法规,使得企业很接入非自己收集的数据。政府正在考虑改变,这一现状METI工作组已确定了个人数据编码需求,并参考其它国家的个人消费保护模式。
其次,出台新政鼓励企业创新。2014年5月,政府出台了大数据应用个人数据使用报告,希望这一报告的出台,有助于企业使用大数据进行创新和开发。在大数据发展中,建立商业和用户间的信任,包括用户友好、使用商业可信的数据和培训商业如何使用个人信息、用户可自行选择什么信息可披露。
再者,注重相关专业人才培养。为了创造更大的价值,需要开发集成IT和管理的人力资源能力,使这些人才具备可开发使用大数据的商业模式的能力,但专业技能人才短缺是日本大数据发展面临的挑战之一,未来这方面的人才需求量为25万,目前这方面的专家只有1000名左右。
此外,对于企业来说,IT部门不仅需要建立和维护企业内部系统的人才,而且还能支持战略商业规划和设计企业范围内的数据库基础设施。企业的商业部门,则需要增加对建立大数据商业模式相关IT知识的了解和能力开发。目前ICT行业和机构合作开发了一个项目,意在培养数据、商业咨询技能和具有ICT技能的分析专家。