国内外大数据发展现状和趋势(2018)

国内外大数据发展现状和趋势(2018)
国内外大数据发展现状和趋势(2018)

行业现状

当前,许多国家的政府和国际组织都认识到了大数据的重要作用,纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要抓手,实施大数据战略,对大数据产业发展有着高度的热情。

美国政府将大数据视为强化美国竞争力的关键因素之一,把大数据研究和生产计划提高到国家战略层面。在美国的先进制药行业,药物开发领域的最新前沿技术是机器学习,即算法利用数据和经验教会自己辨别哪种化合物同哪个靶点相结合,并且发现对人眼来说不可见的模式。根据前期计划,美国希望利用大数据技术实现在多个领域的突破,包括科研教学、环境保护、工程技术、国土安全、生物医药等。其中具体的研发计划涉及了美国国家科学基金会、国家卫生研究院、国防部、能源部、国防部高级研究局、地质勘探局等6个联邦部门和机构。

目前,欧盟在大数据方面的活动主要涉及四方面内容:研究数据价值链战略因素;资助“大数据”和“开放数据”领域的研究和创新活动;实施开放数据政策;促进公共资助科研实验成果和数据的使用及再利用。

英国在2017年议会期满前,开放有关交通运输、天气和健康方面的核心公共数据库,并在五年内投资1000万英镑建立世界上首个“开放数据研究所”;政府将与出版行业等共同尽早实现对得到公共资助产生的科研成果的免费访问,英国皇家学会也在考虑如何改进科研数据在研究团体及其他用户间的共享和披露;英国研究理事会将投资200万英镑建立一个公众可通过网络检索的“科研门户”。

法国政府为促进大数据领域的发展,将以培养新兴企业、软件制造商、工程师、信息系统设计师等为目标,开展一系列的投资计划。法国政府在其发布的《数字化路线图》中表示,将大力支持“大数据”在内的战略性高新技术,法国软件编辑联盟曾号召政府部门和私人企业共同合作,投入3亿欧元资金用于推动大数据领域的发展。法国生产振兴部部长ArnaudMontebourg、数字经济部副部长FleurPellerin和投资委员LouisGallois在第二届巴黎大数据大会结束后的第二天共同宣布了将投入1150万欧元用于支持7个未来投资项目。这足以证明法国政府对于大数据领域发展的重视。法国政府投资这些项目的目的在于“通过发展创新性解决方案,并将其用于实践,来促进法国在大数据领域的发展”。众所周知,法国在数学和统计学领域具有独一无二的优势。

日本为了提高信息通信领域的国际竞争力、培育新产业,同时应用信息通信技术应对抗灾救灾和核电站事故等社会性问题。2013年6月,安倍内阁正式公布了新IT战略——“创建最尖端IT国家宣言”。“宣言”全面阐述了2013~2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略,提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”。日本著名的矢野经济研究所预测,2020年度日本大数据市场规模有望超过1兆日元。

在重视发展科技的印度,大数据技术也已成为信息技术行业的“下一个大事件”,目前,不仅印度的小公司纷纷涉足大数据市场淘金,一些外包行业巨头也开始进军大数据市场,试图从中分得一杯羹。2016年,印度全国软件与服务企业协会预计,印度大数据行业规模在3年内将到12亿美元,是当前规模的6倍,同时还是全球大数据行业平均增长速度的两倍。印度毫无疑问是美国亦步亦趋的好学生。在数据开放方面,印度效仿美国政府的做法,制定了一个一站式政府数据门户网站https://www.360docs.net/doc/4f8100304.html,.in,把政府收集的所有非涉密数据集中起来,包括全国的人口、经济和社会信息。

我国大数据行业仍处于快速发展期,未来市场规模将不断扩大

?目前大数据企业所获融资数量不断上涨,二级市场表现优于大盘,我国大数据行业的市

场规模为数百亿元。随着互联网的不断普及与物联网技术的不断发展,未来市场规模将不断扩大,在垂直领域的应用程度将不断深化。

?在通用型数据解决方案提供商中,拥有更丰富准确的数据来源、更多数量的客户、更高的客户忠诚度以及更多成功案例的提供商通常拥有更为强劲的实力。

?垂直领域大数据应用提供商需要有更多垂直行业内的客户积累、行业数据积累、数据产品的易用性与实用性以及行业解决方案的过往成功案例。

大数据行业核心数据

?2015年全球大数据市场规模将近1500亿人名币,同比增长24.2%;我国大数据市场规模为160亿元,仅占全球总市场规模的10.7%,但同比增长率为65.3%,是全球增长率的2.7倍。2016 至2018年中国大数据市场规模增长还将维持在40%左右的高增长。大数据在经过了几年的发展后,已经获得了社会的广泛认可。

?预计2018年全球大数据市场规模将达到超过2500亿元,2015至2018年的复合增长率为21.8%。2018年我国大数据市场规模将超过500亿元,复合增长率为47.0%,是全球复合增长率的2.2倍。

?大数据极为庞大,如今我们每天创造出约2.3万亿GB数据,这意味着数据世界每两年都将增长一倍。

发展趋势

“大数据”是今年达沃斯世界经济论坛的热词之一,与会各界都对云计算、大数据等驱动经济数字化转型因素表达了高度关注。而在年初举办的2018拉斯维加斯消费电子展(CES)上,美国消费技术协会总裁兼首席执行官加里·夏皮罗、英特尔首席执行官布莱恩·克尔扎尼奇等都表示,大数据将对人类生活产生深远影响,大数据是未来科技浪潮发展不容忽视的巨大推动力量,2018年全球大数据产业将得到强劲发展。

据经济参考报记者梳理国内外权威机构最新统计数据,至2022年,全球大数据市场规模达到800亿美元,年均实现15.37%的增长。近两年来,大数据发展浪潮席卷全球。全球各经济社会系统采集、处理、积累的数据增长迅猛,大数据全产业市场规模逐步提升。综合各方观点,2018年大数据产业或呈现开源大数据商业化进一步深入等七大发展趋势。

根据监测统计,2017年全球的数据总量为21.6ZB(1个ZB等于十万亿亿字节),目前全球数据的增长速度在每年40%左右,预计到2020年全球的数据总量将达到40ZB。

综合多家机构的预测,2018年全球大数据市场规模将达到454亿美元,未来五年(2018-2022)年均复合增长率约为15.37%,市场规模达805亿美元。预计2018年我国大数据市场规模将达到280亿元,未来五年(2018-2022)年均复合增长率约为27.29%。

全球发展趋势

随着大数据基础设施的不断完善,数据分析和商业智能工具将逐渐成为大数据的主力军。2018年,全球大数据产业将呈现七大发展趋势,而产业应用将是主旋律。

第一,开源大数据商业化进一步深化。随着闭源软件在数据分析领域的地盘不断缩小,老牌IT厂商正在改变商业模式,向开源靠拢,并加大专业服务和系统集成方面的力度,帮助客户向开源的、面向云的分析产品迁移,主要是Hadoop技术将加速发展。

第二,打包的大数据行业分析应用开拓新市场。随着大数据逐渐走向各个行业,基于行业的大数据分析应用需求也日益增长。未来几年针对特定行业和业务流程的分析应用将会以预打包的形式出现,这将为大数据技术供应商打开新的市场。

第三,大数据细分市场规模进一步增大。大数据相关技术的发展,将会创造出一些新

的细分市场。例如,以数据分析和处理为主的高级数据服务、基于社交网络的社交大数据分析等。

第四,大数据推动公司并购的规模和数量进一步提升。因此,在未来几年中,大型IT 厂商将为了完善自己的大数据产品线进行并购,首先涉及的将是信息管理分析软件厂商、预测分析和数据展现厂商等。

第五,大数据分析的革命性方法出现。今年,大数据分析将出现革命性的新方法,从前的很多算法和基础理论可能会产生理论级别的突破。机器学习继续成为大数据智能分析的核心技术;人工智能和脑科学相结合,成为大数据分析领域的热点。金融、互联网电子商务、健康医疗、城镇化智慧城市领域的应用令人瞩目。

第六,大数据与云计算将深度融合。云计算为大数据提供弹性可扩展的基础设施支撑环境以及数据服务的高效模式,大数据则为云计算提供新的商业价值,大数据技术与云计算技术必有更完美的结合。阿里云计算有限公司总裁胡晓明表示,2018年将是云计算与产业深度结合的元年。人们将看到各国的基础设施越来越紧密地和云计算结合起来,更多的制造企业和金融机构开始用“云”,云计算将促进科技金融提高效益。

第七,大数据一体机将陆续发布。在未来几年里,数据仓库一体机、NoSQL一体机以及其它一些将多种技术结合的一体化设备将进一步快速发展。据记者了解,中国的华为、浪潮等公司今年将在大数据一体机上有更大的动作。华为IT服务器产品线总裁邱隆表示:"华为服务器在自身高质量、创新、高性价比的基础上,致力提供一个开放的计算平台,通过和业界主流大数据厂家合作,面向客户提供最佳性价比的大数据解决方案。”

中国发展趋势

趋势一:行业标准化

标准是经济活动和社会发展的技术支撑。目前,国际ISO、IEC、ITU、NIST及国内的信息技术标准化技术委员会(SAC TC28)等标准组织结合大数据产业现状,已经开展行业标准化制定的相关工作,但就大数据整体技术体系和发展规模而言,仍处于起步阶段,与产业发展水平和需求并不相称。

在《国家标准化体系建设发展规划(2016-2020年)》中,新一代信息技术标准化工程、智能制造和装备升级标准化工程已被列为主要任务,其中就涉及物联网、云计算、大数据、工业云等相关行业标准的制定。

在信标委大数据标准工作组的推动下,未来将进一步制定和完善我国大数据领域标准体系,组织开展大数据相关技术和标准的研究。包含申报国家、行业标准,承担国家、行业标准制修订计划任务,宣传推广标准实施,组织推动国际标准化活动。

在2017年工信部发布的《工业大数据白皮书》中,再次强调了标准化的重要性,指出深入推进工业大数据发展是全球工业企业所面临的共性课题,而工业大数据标准化工作则是支撑工业转型发展,提升我国国际话语权重要的基础。

趋势二:区域化协同共进

随着我国大数据产业的迅速发展,已经会成为推动经济发展的重要引擎。中国信息通信研究院的《中国大数据发展调查报告(2017)》中,2016年中国大数据市场规模达168亿元,预计2017年~2020年仍将保持30%以上的增长。随着产业规模的扩大,国内大数据产业的区域化协同共进的局面愈加清晰。

在协调区域发展方面,京津冀三地共同发布了《京津冀大数据综合试验区建设方案概要》为2017年直至2020年的发展指出了风向;上海、江苏、浙江和安徽三省一市经信委联合印发《长三角区域信息化合作“十三五”规划(2016-2020年)》,旨在加快推进长三角信息化

和信息经济发展合作……截至目前,已有超过30省市专门出台了大数据相关的政策文件,就大数据产业的管理机制、运营模式以及应用服务等不同方向释放政策红利,以促进当地大数据产业的发展。

趋势三:技术融合下的应用时代

据IDC报告显示,全球数据每年的增长速度在40%左右,计算存储和传输数据能力同样以指数型增长,海量数据的产生、获取、挖掘及整合,慢慢展现着背后巨大的商业价值,随着大数据技术在不同场景的成功应用,他不仅为传统企业带来了升级转型,也重构了很多行业的商业思维和商业模式。

但需要注意的是,就像没有汽车与高速公路,人们很难意识到石油的重要,同样,如果不能与互联网、云计算、物联网、人工智能、5G技术等创新技术的结合应用,大数据的价值也无法凸显。在2017年发布的《新一代人工智能发展规划》《关于积极推进供应链创新与应用的指导意见》《高端智能再制造行动计划(2018-2020年)》等文件中,在提出新的发展要求的同时,也强调了大数据技术的不同产业发展推动作用。

新技术的纳入推广一方面为大数据提供了更多维度、更多途径的数据源,另一方面也为大数据应用场景的开发提供了更多空间,智能制造、智慧城市、智慧医疗等不胜枚举。

趋势四:数据安全

随着2017年6月《中华人民共和国网络安全法》正式实施,个人信息安全与隐私保护问题、数据权属及应用的法律问题、人工智能/区块链等新兴产业中的数据等问题成为业内人士关注的热点。

据《中国大数据法治发展报告(2017)》统计,在近年政府推进的大数据政策中,25%均与信息安全相关,大数据领域的安全法治问题已经越来越受到关注。此外,国内已有北京、江苏、贵州等共18个省市已经颁布大数据相关政策法规,同时,成立大数据地方监管部23个。

值得一提的是,12月29发布的由信标委归口的《信息安全技术个人信息安全规范》也将于2018年5月1日正式实施。其主要内容包括:个人信息及其相关术语基本定义,个人信息安全基本原则,个人信息收集、保存、使用以及处理等流转环节以及个人信息安全事件处置和组织管理要求等。

趋势五:数据开发与共享

在2015年国务院发布的《促进大数据发展行动纲要》中提出,未来5到10年我国大数据发展和应用要实现的目标,包括2017年底前形成跨部门数据资源共享共用格局,2018年底前建成国家政府数据统一开放平台,率先在信用、交通、医疗、卫生等重要领域实现公共数据资源合理适度向社会开放。数据共享成为2018的重要趋势之一。

随着数据开发共享程度的由浅及深,在2017年7月及11月发布的《国务院关于印发新一代人工智能发展规划的通知》及《国务院关于深化“互联网+先进制造业”发展工业互联网的指导意见》中,也都再度提及数据的开放和共享。前者提到:倡导开源共享理念,促进产学研用各创新主体共创共享,后者则更为具体:面向关键技术和平台需求,支持建设一批能够融入国际化发展的开源社区,提供良好开发环境,共享开源技术、代码和开发工具。

国内外大数据产业发展现状与趋势研究

龙源期刊网 https://www.360docs.net/doc/4f8100304.html, 国内外大数据产业发展现状与趋势研究 作者:方申国谢楠 来源:《信息化建设》2017年第06期 大数据作为新财富,价值堪比石油。 进入21世纪以来,随着物联网、电子商务、社会化网络的快速发展,数据体量迎来了爆炸式的增长,大数据正在成为世界上最重要的土壤和基础。根据IDC(互联网数据中心)预测,2020年的数据增长量将是2010年的44倍,达到35ZB。世界经济论坛报告称,“大数据为新财富,价值堪比石油”。随着计算机及其存储设备、互联网、云计算等技术的发展,大数据应用领域随之不断丰富。大数据产业将依赖快速聚集的社会资源,在数据和应用驱动的创新下,不断丰富商业模式,构建出多层多样的市场格局,成为引领信息技术产业发展的核心引擎、推动社会进步的重要力量。 大数据产业发展现状 全球大数据产业发展概况 目前,大数据以爆炸式的发展速度迅速蔓延至各行各业。随着各国抢抓战略布局,不断加大扶持力度,全球大数据市场规模保持了高速增长态势。据IDC预测,全球大数据市场规模 年增长率达40%,在2017年将达到530亿美元。美国奥巴马政府于2012年3月宣布投资2亿美元启动“大数据研究和发展计划”,将“大数据研究”上升为国家意志;2015年发布“大数据研究和发展计划”,深入推动大数据技术研发,同时还鼓励产业、大学和研究机构、非盈利机构与政府一起努力,共享大数据提供的机遇。目前,美国大数据产业增长率已超过71%,大数据在美国健康医疗、公共管理、零售业、制造业等领域产生了巨大的经济效益。英国政府自2013年开始就注重对大数据技术的研发投入,2015年投入7300万英镑用于55个政府的大数据应用项目,投资兴办大数据研究中心,通过大数据技术在公开平台上发布了各层级数据资源,直接或间接为英国增加了近490亿至660亿英镑的收入,并预测到2017年,大数据技术可以为英国提供5.8万个新的工作岗位,或将带来2160亿英镑的经济增长。法国2011年推出了公开的数据平台 date.gouv.fr,以便于公民自由查询和下载公共数据;2013年相继发布《数字化路线图》、《法国政府大数据五项支持计划》等,通过为大数据设立原始扶持资金,推动交通、医疗卫生等纵向行业设立大数据旗舰项目,为大数据应用建立良好的生态环境,并积极建设大数据初创企业孵化器。日本在《日本再兴战略》中提出开放数据,将实施数据开放、大数据技术开发与运用作为2013-2020年的重要国家战略之一,积极推动日本政务大数据开放及产业大数据的发展,零售业、道路交通基建、互联网及电信业等行业的大数据应用取得显著效果。韩国政府高度重视大数据发展,科学、通信和未来规划部与国家信息社会局(NIA)共建大数据中心,大力推动全国大数据产业发展。根据《2015韩国数据行业白皮书》统计显示, 数据服务市场规模占韩国总行业市场规模的47%,位列第一;数据库构建服务以41.8%的占有

浅谈大数据发展现状及未来展望

浅谈大数据发展现状及未来展望 中国特色社会主义进入新时代,实现中华民族伟大复兴的中国梦开启新征程。党中央决定实施国家大数据战略,吹响了加快发展数字经济、建设数字中国的号角。国家领导人在十九届中共中央政治局第二次集体学习时的重要讲话中指出:“大数据是信息化发展的新阶段”,并做出了“推动大数据技术产业创新发展、构建以数据为关键要素的数字经济、运用大数据提升国家治理现代化水平、运用大数据促进保障和改善民生、切实保障国家数据安全”的战略部署,为我国构筑大数据时代国家综合竞争新优势指明了方向! 今天,我拟回顾大数据的发端、发展和现状,研判大数据的未来趋势,简述我国大数据发展的态势,并汇报我对信息化新阶段和数字经济的认识,以及对我国发展大数据的若干思考和建议。 一、大数据的发端与发展 从文明之初的“结绳记事”,到文字发明后的“文以载道”,再到近现代科学的“数据建模”,数据一直伴随着人类社会的发展变迁,承载了人类基于数据和信息认识世界的努力和取得的巨大进步。然而,直到以电子计算机为代表的现代信息技术出现后,为数据处理提供了自动的方法和手段,人类掌握数据、处理数据的能力才实现了质的跃升。信息技术及其在经济社会发展方方面面的应用(即信息化),推动数据(信息)成为继物质、能源之后的又一种重要战略资源。 “大数据”作为一种概念和思潮由计算领域发端,之后逐渐延伸到科学和商业领域。大多数学者认为,“大数据”这一概念最早公开出现于1998年,美国高性能计算公司SGI的首席科学家约翰·马西(John Mashey)在一个国际会议报告中指出:随着数据量的快速增长,必将出现数据难理解、难获取、难处理和难组织等四个难题,并用“Big Data(大数据)”来描述这一挑战,在计算领域引发思考。2007年,数据库领域的先驱人物吉姆·格

2019国内外大数据行业现状

当前,许多国家的政府和国际组织都认识到了大数据的重要作用,纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要抓手,实施大数据战略,对大数据产业发展有着高度的热情。 美国政府将大数据视为强化美国竞争力的关键因素之一,把大数据研究和生产计划提高到国家战略层面。在美国的先进制药行业,药物开发领域的最新前沿技术是机器学习,即算法利用数据和经验教会自己辨别哪种化合物同哪个靶点相结合,并且发现对人眼来说不可见的模式。根据前期计划,美国希望利用大数据技术实现在多个领域的突破,包括科研教学、环境保护、工程技术、国土安全、生物医药等。 其中具体的研发计划涉及了美国国家科学基金会、国家卫生研究院、国防部、能源部、国防部高级研究局、地质勘探局等6 个联邦部门和机构。 目前,欧盟在大数据方面的活动主要涉及四方面内容:研究数据价值链战略因素;资助“大数据”和“开放数据”领域的研究和创新活动;实施开放数据政策;促进公共资助科研实验成果和数据的使用及再利用。 英国在2017 年议会期满前,开放有关交通运输、天气和健康方面的核心公共数据库,并在五年内投资1000 万英镑建立世界上首个“开放数据研究所”;政府将与出版行业等共同尽早实现对得到公共资助产生的科研成果的免费访问,英国皇家学会也在考虑如何改进科研数据在研究团体及其他用户间的共享和披露;英国研究理事会将投资200 万英镑建立一个公众可通过网络检索的“科研门户”。 法国政府为促进大数据领域的发展,将以培养新兴企业、软件制造商、工程师、信息系统设计师等为目标,开展一系列的投资计划。法国政府在其发布的《数字化路线图》中表示,将大力支持“大数据”在内的战略性高新技术,法国软件编辑联盟曾号召政府部门和私人企业共同合作,投入3 亿欧元资金用于推动大数据领域的发展。法国生产振兴部部长ArnaudMontebourg、数字经济部副部长FleurPellerin 和投资委员LouisGallois 在第二届巴黎大数据大会结束后的第二天共同宣布了将投入1150 万欧元用于支持7 个未来投资项目。这足以证明法国政府对于大数据领域发展的重视。法国政府投资这些项目的目的在于“通过发展创新性解决方案,并将其用于实践,来促进法国在大数据领域的发展”。众所周知,法国在数学和统计学领域具有独一无二的优势。 日本为了提高信息通信领域的国际竞争力、培育新产业,同时应用信息通信技术应对抗灾救灾和核电站事故等社会性问题。2013 年6 月,安倍内阁正式公布了新IT 战略——“创建

国内外大数据发展现状和趋势(2018)

行业现状 当前,许多国家的政府和国际组织都认识到了大数据的重要作用,纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要抓手,实施大数据战略,对大数据产业发展有着高度的热情。 美国政府将大数据视为强化美国竞争力的关键因素之一,把大数据研究和生产计划提高到国家战略层面。在美国的先进制药行业,药物开发领域的最新前沿技术是机器学习,即算法利用数据和经验教会自己辨别哪种化合物同哪个靶点相结合,并且发现对人眼来说不可见的模式。根据前期计划,美国希望利用大数据技术实现在多个领域的突破,包括科研教学、环境保护、工程技术、国土安全、生物医药等。其中具体的研发计划涉及了美国国家科学基金会、国家卫生研究院、国防部、能源部、国防部高级研究局、地质勘探局等6个联邦部门和机构。 目前,欧盟在大数据方面的活动主要涉及四方面内容:研究数据价值链战略因素;资助“大数据”和“开放数据”领域的研究和创新活动;实施开放数据政策;促进公共资助科研实验成果和数据的使用及再利用。 英国在2017年议会期满前,开放有关交通运输、天气和健康方面的核心公共数据库,并在五年内投资1000万英镑建立世界上首个“开放数据研究所”;政府将与出版行业等共同尽早实现对得到公共资助产生的科研成果的免费访问,英国皇家学会也在考虑如何改进科研数据在研究团体及其他用户间的共享和披露;英国研究理事会将投资200万英镑建立一个公众可通过网络检索的“科研门户”。 法国政府为促进大数据领域的发展,将以培养新兴企业、软件制造商、工程师、信息系统设计师等为目标,开展一系列的投资计划。法国政府在其发布的《数字化路线图》中表示,将大力支持“大数据”在内的战略性高新技术,法国软件编辑联盟曾号召政府部门和私人企业共同合作,投入3亿欧元资金用于推动大数据领域的发展。法国生产振兴部部长ArnaudMontebourg、数字经济部副部长FleurPellerin和投资委员LouisGallois在第二届巴黎大数据大会结束后的第二天共同宣布了将投入1150万欧元用于支持7个未来投资项目。这足以证明法国政府对于大数据领域发展的重视。法国政府投资这些项目的目的在于“通过发展创新性解决方案,并将其用于实践,来促进法国在大数据领域的发展”。众所周知,法国在数学和统计学领域具有独一无二的优势。 日本为了提高信息通信领域的国际竞争力、培育新产业,同时应用信息通信技术应对抗灾救灾和核电站事故等社会性问题。2013年6月,安倍内阁正式公布了新IT战略——“创建最尖端IT国家宣言”。“宣言”全面阐述了2013~2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略,提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”。日本著名的矢野经济研究所预测,2020年度日本大数据市场规模有望超过1兆日元。 在重视发展科技的印度,大数据技术也已成为信息技术行业的“下一个大事件”,目前,不仅印度的小公司纷纷涉足大数据市场淘金,一些外包行业巨头也开始进军大数据市场,试图从中分得一杯羹。2016年,印度全国软件与服务企业协会预计,印度大数据行业规模在3年内将到12亿美元,是当前规模的6倍,同时还是全球大数据行业平均增长速度的两倍。印度毫无疑问是美国亦步亦趋的好学生。在数据开放方面,印度效仿美国政府的做法,制定了一个一站式政府数据门户网站https://www.360docs.net/doc/4f8100304.html,.in,把政府收集的所有非涉密数据集中起来,包括全国的人口、经济和社会信息。 我国大数据行业仍处于快速发展期,未来市场规模将不断扩大 ?目前大数据企业所获融资数量不断上涨,二级市场表现优于大盘,我国大数据行业的市

2019年第二届“全国大学生大数据技能竞赛方案”定稿版(190218)

2019年第二届“全国大学生大数据技能竞赛” 方案 一、竞赛相关单位 赛项名称:2019年第二届“全国大学生大数据技能竞赛” 面向群体:全国本科院校、高职院校在校生 主办单位:中国大数据技术与应用联盟 承办单位:中国农业大学 北京邮电大学 联通高新大数据人工智能科技(成都)有限公司 浪潮软件集团 中交星宇科技有限公司 慧聪网 技术平台:北京红亚华宇科技有限公司 大数据精英网 二、竞赛背景 信息互联网的发展使人类进入了大数据智能时代,大数据技术的应用深刻影响着人们的生活,影响着时代发展的进程。我国政府和社会各界也做出了相应的理论研究和实践研究。2015年国务院印发《促进大数据发展行动纲要》(以下简称《纲要》),系统指导我国大数据发展的国家顶层设计和总体部署大数据发展工作。《纲要》中明确指出,要加强专业人才培养、创新人才培养模式、建立健全的多层次多类型的大数据人才培养体系,现各高校相继启动大数据专业建设,大数据人才培养迈进了一个全新时代。

目前,在我国约有800多所本科及高职院校开设了大数据相关专业,大数据技术除了需要掌握较强的理论基础之外,更重要的是需要拥有较强的动手实践能力。全国院校领导专家也在积极探索、研究,并总结出大数据技能竞赛是培养和发现人才最有效的途径之一。2018年12月在中国农业大学举办第一届“全国大学生大数据技能竞赛”报名学校达400所,通过选拔参加决赛的学校达160多所,竞赛的举办受到了广大院校师生代表的认可,为更进一步巩固“以赛促学,以赛促教”的教学成果,举办2019年第二届“全国大学生大数据技能竞赛”是非常有必要的。 三、赛项目的 举办赛项的主旨在于有效促进高等院校大数据相关专业教学模式的探索性改良,推进相关专业课程体系、教学内容和教学方法等教学资源的质量提升和丰富完善,推动校企合作,加强校企共建,提升我国大数据专业人才的实践能力。通过大数据技能竞赛,能够激发学生的自主学习热情,树立正确积极的职业价值观和人生观。通过大赛,可以提高实践教学课时量,学生可在“大数据竞赛平台”中以实际大数据项目案例开展训练相关技能并在平台搭建、数据采集、数据分析与挖掘等方面得到有效锻炼,提高学生的专业技能并逐步实践“理实一体化”、“做学教一体化”的教学模式。 以2019年第二届“全国大学生大数据技能竞赛”为纽带,搭建校企合作的平台,提升高等院校大数据技术与应用及其他信息技术类专业学生的技能及职业素养,满足企业用人需求,实现行业资源、企业资源与教学资源的有机融合,使高等院校在专业建设、课程建设、人才培养方案和人才培养模式等方面紧跟行业及社会发展的需求,缩小学生能力与行业需求之间的差距,促进专业教学建设和教学改革。

大数据发展现状与未来发展趋势研究

大数据发展现状与未来发展趋势研究 朱孔村 (江苏省科学技术情报研究所,江苏南京210042) 【摘要】数据是信息化时代的“新石油”资源,如何利用好这种“新石油”资源需要大数据技术的支持。文章介绍了大数据技术及其发展历程,概括了当前国内外大数据的发展现状并展望了大数据技术和产业方面的未来发展趋势。 【关键词】大数据;现状;趋势 【中图分类号】TP391【文献标识码】A【文章编号】1008-1151(2019)01-0115-04 Research on the Current Situation and Future Development Trend of Big Data Abstract: Data is the “new petroleum” resource of the information age and how to make good use of this “new petroleum” resource needs the support of big data technology. This paper first introduces the big data technology and its development process and summarizes the current development of big data at home and abroad. Finally, the future development trend of big data technology and industry is prospected. Key words: big data; current situation; trend 1 大数据技术概述 1.1大数据技术 随着物联网、云计算、移动互联网等技术的成熟,以及智能移动终端的普及,全社会的数据量呈指数型增长,全球已经进入以数据为核心的大数据时代。大数据并不是一个新的概念,信息技术发展的每一个阶段都会遇到数据处理的问题,人类需要不停的面对来自数据的挑战。为满足商业结构化数据存储的需求而产生了关系型数据库,为满足互联网时代非结构化数据存储需求而产生了NoSQL技术,而大数据技术的产生是为了解决大型数据集分析的问题。 大数据技术目前还没有一个确切的定义,各行各业有着自己的见解,但总体而言,其关键在于从数量庞大、种类繁多的数据中提取出有用的信息。维基百科从数据处理的角度将大数据定义为一个超大的、难以用现有常规的数据库管理技术和工具处理的数据集。国际数据公司(IDC)给出的报告指出,大数据技术描述了一种新一代技术和构架,以很经济的方式、以高速的捕获、发现和分析技术,从各种超大规模的数据中提取价值[1]。 少量的数据看似杂乱无章,但是当数据累积到一定程度时,就会呈现出一种规律和秩序。大数据的价值就在于数据分析,利用大数据分析技术,从海量数据中总结经验、发现规律、预测趋势,最终为辅助决策服务。《大数据时代》的作者克托·迈尔-舍恩伯格认为:“大数据开启了一次重大的时代转型”,他指出大数据将带来巨大的变革,改变人们的生活、工作和思维方式,改变人们的商业模式,影响人们的经济、政治、科技和社会等各个层面。 1.2大数据发展历程 1.2.1萌芽阶段 20世纪90年代,“大数据”这个术语开始出现。1998年SGI首席科学家John Masey在USENIX大会上提出大数据的概念,他当时发表了一篇名为Big Data and the Next Wave of Infrastress的论文,使用了大数据来描述数据爆炸的现象。但是那时的大数据只表示“大量的数据或数据集”这样的字面含义,还没有涵盖到相关的采集、存储、分析挖掘、应用等技术方法与特征内涵 1.2.2发展阶段 从20世纪末到21世纪初期是大数据的发展期,在这一阶段中大数据逐渐为学术界的研究者所关注,相关的定义、内涵、特性也得到了进一步的丰富。2003至2006年,Google 发布的GFS、MapReduce和BigTable三篇论文对大数据的发展起到重要作用。2006至2009年,大数据技术形成并行运算与分布式系统。2009年,Jeff Dean在BigTable基础上开发了Spanner数据库。随着数据挖掘理论和数据库技术的逐步成熟,一批商业智能工具和知识管理技术如数据仓库、专家系统、知识管理系统等开始被应用。 1.2.3成熟阶段 2011年至今,是大数据发展的成熟阶段,越来越多的研究者对大数据的认识从技术概念丰富到了信息资产与思维变革等多个维度,一些国家、社会组织、企业开始将大数据上升为 总第21卷233期大众科技Vol.21 No.1 2019年1月Popular Science & Technology January 2019 【收稿日期】2018-11-06 【作者简介】朱孔村(1985-),男,山东临沂人,江苏省科学技术情报研究所实习研究员,从事电子政务相关工作。 - 115 -

大数据发展背景与研究现状

大数据发展背景与研究现状 (一)大数据时代的背景 随着计算机存储能力的提升和复杂算法的发展,近年来的数据量成指数型增长,这些趋势使科学技术发展也日新月异,商业模式发生了颠覆式变化。《分 MGI)发 “赢 技术使得在线购物的完成率提升了10%到15%。我国信息数据资源80%以上掌握在各级政府部门手里,但很多数据却与世隔绝“深藏闺中”,成为极大的浪费。2015年,国务院印发《促进大数据发展行动纲要》,明确要求“2018年底前建成国家政府数据统一开放平台”;今年5月,国务院办公厅又印发《政务信息系

统整合共享实施方案》,进一步推动政府数据向社会开放。1 大数据可以把人们从旧的价值观和发展观中解放出来,从全新的视角和角度理解世界的科技进步和复杂技术的涌现,变革人们关于工作、生活和思维的看法。大数据的应用十分广泛,通过对大规模数据的分析,利用数据整体性与涌现性、相关性与不确定性、多样性与非线性及并行性与实时性研究大数据在 。2012年Gartner认为,不到两年时间大数据将成为新技术发展的热点,海量和多样化的信息资产使得大数据需要新的处理模式,才能为数据信息使用者提供有效的信息,使得企业洞察危险的能力增强,流程得以优化,决策更加准确。Victor 在其最新着作《大数据时代——生活、工作与思维的大变革》中指出,大数据 1人民网 26个好用大数据的秘诀

时代要想得到有价值的信息,要从总体而不是少量的数据样本分析与实务相关的所有数据。更加注重数据之间的相关关系,乐于加收纷繁复杂的数据,而不再探求难以捉摸的因果关系和追求数据的精确性。欧盟在其公布的《数字议程》中指出公共数据的市场价值约有320亿欧元,公共数据的开放和再利用可以产生新的商业和工作机会。开放行、公共数据,增加政府的开放和透明度可以给 年9 展的进程。2017年8月30日,国家旅游局、银联商务股份有限公司和中国电信集团联合成立“旅游消费但是数据联合实验室”,并发布了首份研究成果《2017年上半年中国旅游消费大数据报告》。三方在各自的领域有深耕多年的技术、大数据能力、市场资源和经验,通过签署站多合作,可以实现资源共享,优势互 3国家十三五规划纲要

2018-2019年中国大数据行业现状分析与发展趋势研究报告

2018-2019年中国大数据行业现状分析与发展趋势研究报告

行业市场研究属于企业战略研究范畴,作为当前应用最为广泛的咨询服务,其研究成果以报告形式呈现,通常包含以下内容: 一份专业的行业研究报告,注重指导企业或投资者了解该行业整体发展态势及经济运行状况,旨在为企业或投资者提供方向性的思路和参考。 一份有价值的行业研究报告,可以完成对行业系统、完整的调研分析工作,使决策者在阅读完行业研究报告后,能够清楚地了解该行业市场现状和发展前景趋势,确保了决策方向的正确性和科学性。

中国产业调研网https://www.360docs.net/doc/4f8100304.html,基于多年来对客户需求的深入了解,全面系统地研究了该行业市场现状及发展前景,注重信息的时效性,从而更好地把握市场变化和行业发展趋势。

一、基本信息 二、内容介绍 中国的大数据应用处在起步阶段,但随着电信和银行领域开始对大数据技术和服务产生浓厚的兴趣,未来三年我国大数据市场将突破百亿元。2012年市场规模达到4.7亿元,2013年增至11.2亿元,增长率高达138%,2014年,保持了与2013年基本持平的增速,增长率为114.38%,市场规模达到24.1亿元,未来三年内有望突破150亿元,2016年有望达到180亿规模,其中增长率最高的是存储市场,将达到60.8%,服务器市场的增长率则是38.3%,远远高于其他非大数据产品相关的市场,由此来看整个行业发展空间巨大。进入2014年以来,大数据受到各界广泛关注,已渗透到金融、医疗、消费、电力、制造以及几乎各个行业,大数据的新产品、新技术、新服务也正在不断地涌现。 我国大数据产业集聚发展效应开始显现,出现京津冀区域、长三角地区、珠三角地区和中西部4个集聚发展区,各具发展特色。北京依托中关村在信息产业的领先优势,快速集聚和培养了一批大数据企业,继而迅速将集聚势能扩散到津冀地区,形成京津冀大数据走廊格局。长三角地区城市将大数据与当地智慧城市、云计算发展紧密结合,使大数据既有支撑又有的放矢,吸引了大批大数据企业。珠三角地区在产业管理和应用发展等方面率先垂范,对企业扶持力度大,集聚效应明显。大数据产业链上下游企业合作意愿强烈,各集聚区间的合作步伐加快,产学研协同创新发展初见成效。

2019-2025年中国大数据行业市场规模预测及发展痛点分析

2019-2025年中国大数据行业市场规模预测及发 展痛点分析 大数据是信息化发展的新阶段,随着全球数据储量的不断提高,大数据正进入发展加速时期。近年来,随着5G、AI、云计算、区块链等新一代信息技术的蓬勃发展,大数据技术走向融合发展的关键阶段。同时,我国大数据产业保持良好发展势头,“大数据+行业”渗透融合全面展开,融合生态加速构建,新技术、新业态、新模式不断涌现,政策支持、战略引领、标准规范、产业创新的良性互动局面正在形成。 一、大数据行业市场规模预测 近年来,全球数据产生量迅猛增长。预计2020年,全球数据产生量将达到50.5ZB,同比增长23%。在数据储量不断增长的推动下,大数据产业也将构建出多层多样的市场格局,具有广阔发展空间。在2018-2020年期内,预测大数据市场整体的收入规模将保持每年约70亿美元的增长,预计全球大数据市场收入规模2020年将达到560亿美元。未来两年里,大数据市场将呈现稳步发展的态势,增速保持在14%左右。另外,随着大数据市场成熟度的不断提高,在2025-2027年间,市场规模的增长将有所放缓,维持约7%的增速。 2016-2020年全球每年产生数据量估算(ZB)

全球大数据储量地区分布(%)

2016-2027年全球大数据市场收入规模及预测(亿美元) 随着大数据、移动互联网、物联网等产业的深入发展,我国数据产生量将出现爆发式增长,数据交易将迎来战略机遇。我国产生的数据量将从2018年的7.6ZB增至2025年的48.6ZB,CAGR达30.35%,超过美国同期的数据产生量约18ZB。另外,随着相关技术的不断突破和大数据产品的相继落地,我国大数据市场产值不断提升,2020年将超万亿元,大数据正迎来发展黄金时期。 中国数据圈规模(单位:ZB)

大数据的国内外研究现状与发展动态分析报告

大数据的国内外研究现状及发展动态分析大数据的概念 产生的背景与意义 上世纪60年代到80年代早期,企业在大型机上部署财务、银行等关键应用系统,存储介质包括磁盘、磁带、光盘等。尽管当时人们称其为大数据,但以今日的数据量来看,这些数据无疑是非常有限的。随着PC的出现和应用增多,企业内部出现了很多以公文档为主要形式的数据,包括Word、Excel文档,以及后来出现的图片、图像、影像和音频等。此时企业内部生产数据的已不仅是企业的财务人员,还包括大量的办公人员,这极大地促进了数据量的增长。互联网的兴起则促成了数据量的第三次大规模增长,在互联网的时代,几乎全民都在制造数据。而与此同时,数据的形式也极其丰富,既有社交网络、多媒体等应用所主动产生的数据,也有搜索引擎、网页浏览等被动行为过程中被记录、搜集的数据。时至今日,随着移动互联网、物联网、云计算应用的进一步丰富,数据已呈指数级的增长,企业所处理的数据已经达到PB级,而全球每年所产生的数据量更是到了惊人的ZB级。在数据的这种爆炸式增长的背景下,“大数据”的概念逐渐在科技界、学术界、产业界引起热议。在大数据时代,我们分析的数据因为“大”,摆脱了传统对随机采样的依赖,而是面对全体数据;因为所有信息都是“数”,可以不再纠结具体数据的精确度,而是坦然面对信息的混杂;信息之“大”之“杂”,让我们分析的“据”也由传统的因果关系变为相关关系。 大数据热潮的掀起让中国期待“弯道超越”的机会,创造中国IT企业从在红海领域苦苦挣扎转向在蓝海领域奋起直追的战略机遇。传统IT行业对于底层设备、基础技术的要求非常高,企业在起点落后的情况下始终疲于追赶。每当企业在耗费大量人力、物力、财力取得技术突破时,IT革命早已将核心设备或元件推进至下一阶段。这种一步落后、处处受制于人的状态在大数据时代有望得到改变。大数据对于硬件基础设施的要求相对较低,不会受困于基础设备核心元件的相对落后。与在传统数据库操作层面的技术差距相比,大数据分析应用的中外技术差距要小得多。而且,美国等传统IT强国的大数据战略也都处于摸着石头过河的试错阶段。中国市场的规模之大也为这一产业发展提供了大空间、大平台。大数据对于中国企业不仅仅是信息技术的更新,更是企业发展战略的变革。随着对大数据的获取、处理、管理等各个角度研究的开展,企业逐渐认识数据已经逐渐演变成“数据资产”。任何硬件、软件及服务都会随着技术发展和需求变化逐渐被淘汰,只有数据才具有长期可用性,值得积累。数据是企业的核心资产,可以是也应该是独立于软硬件系统及应用需求而存在的。大数据是信息技术演化的最新产物,确立了数据这一信息技术元素的独立地位。正因为数据不再是软硬件及应用的附属产物,才有了今天爆炸式的数据增长,从而奠定了大数据的基础。

大数据处理技术发展现状及其应用展望

. ,.. 大数据处理技术发展现状及其应用展望 一、定义 著名的管理咨询公司麦肯锡曾预测到:“数据,已经渗透到当今每一个行业和业务职能领域, 成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者 盈余浪潮的到来。”这是大数据的最早定义。业界(于2012年,高德纳修改了对大数据的定义)将大数据的特征归纳为4个“V”(量Volume,多样Variety,价值Value,速Velocity),或者说特点有四个层面:第一,海量数据量。大数据计量单位至少是PB级别;第二,数据 类型繁多。比如,网络日志、视频、图片、地理位置信息等等都是囊括进来。第三,商业价 值高。第四,处理速度快。 在大数据时代,三分技术,七分数据,得数据者得天下。在大数据时代已经到来的时候要用 大数据思维去发掘大数据的潜在价值。Google利用人们的搜索记录挖掘数据二次利用价值, 比如预测某地流感爆发的趋势;Amazon利用用户的购买和浏览历史数据进行有针对性的书 籍购买推荐,以此有效提升销售量;Farecast利用过去十年所有的航线机票价格打折数据, 来预测用户购买机票的时机是否合适。 大数据分析相比于传统的数据仓库应用,具有数据量大、查询分析复杂等特点。对于“大数据”(Big data)研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具 有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 二、大数据的技术 技术是大数据价值体现的手段和前进的基石。我将分别从云计算、分布式处理技术、存储技术和感知技术的发展来说明大数据从采集、处理、存储到形成结果的整个过程。 2.1、云技术 大数据常和云计算联系到一起,因为实时的大型数据集分析需要分布式处理框架来向数十、 数百或甚至数万的电脑分配工作。可以说,云计算充当了工业革命时期的发动机的角色,而大数据则是电。 云计算思想的起源是麦卡锡在上世纪60年代提出的:把计算能力作为一种像水和电一样的 公用事业提供给用户。如今,在Google、Amazon、Facebook等一批互联网企业引领下,一 种行之有效的模式出现了:云计算提供基础架构平台,大数据应用运行在这个平台上。 业内是这么形容两者的关系:没有大数据的信息积淀,则云计算的计算能力再强大,也难以找到用武之地;没有云计算的处理能力,则大数据的信息积淀再丰富,也终究只是镜花水月。 那么大数据到底需要哪些云计算技术呢?这里暂且列举一些,比如虚拟化技术,分布式处理技术,海量数据的存储和管理技术,NoSQL、实时流数据处理、智能分析技术(类似模式识

2018年中国大数据产业发展形势展望报告

2018年中国大数据产业发展形势展望 【内容提要】 2017年,我国大数据产业保持健康快速发展,不断向制造业等传统产业渗透融合,催生出一大批新产品、新服务、新模式和新业态,成为数字经济的重要组成部分,为实现两个强国建设提供了重要动能。展望2018年,我国大数据产业将继续保持快速增长态势,对其他行业领域的融合渗透效应将向更深层次延伸,制造业数字转型的核心引擎作用将日益凸显,产业发展主基调依然是技术创新驱动,产业集聚特色化发展态势将逐步显现,产业生态体系也将迈入成熟完善阶段。但同时,我国大数据产业发展也面临着数据开放共享水平有待提高、技术创新对产业发展的引领作用仍然不强、助推数字转型程度亟待提升、产业统计和标准体系急需构建、数据安全和数据主权面临新问题等挑战。在此形势下,赛迪智库建议我国应从推进数据开放共享、强化核心技术创新、深化融合渗透效应、持续完善产业生态、加强行业监管管理五个方面着手,不断提升要素支撑能力、积蓄创新发展动能、促进实体经济发展、拓展市场发展空间并保障发展后续动力。 【关键词】 大数据产业 发展形势 展望 2017年,随着《促进大数据发展行动纲要》深入实施和《大数据产业发展规划(2016-2020年)》的发布,我国大数据产业呈现健康快速发展态势,包括大数据硬件、大数据软件、大数据服务等在内的大数据核心产业环节产业规模预计达到4200亿元。2018年,我国大数据产业发展虽然依然面临着宏观经济下行和结构调整的挑战,但也面临着国家和地方政策重点推动、各领域应用需求不断增长以及生态体系不断完善等重大机遇,预计2018年我国大数据产业将继续保持快速发展态势。

2018年中国大数据产业发展形势展望 一、对2018年形势的基本判断 (一)产业将继续保持快速增长态势 2017年是《促进大数据发展行动纲要》深入推进关键之年,也是《大数据产业发展规划(2016-2020年)》发布并落地实施的第一年,我国大数据产业呈现加速发展态势,产业规模不断扩大,产业链条加速完善,企业实力不断增强。包括大数据硬件、大数据软件、大数据服务等在内的大数据核心产业环节产业规模预计可达到4200亿元,大数据关联产业规模预计超过7万亿元,大数据融合产业规模预计达到5.5万亿元。产业链条日益完善,国内大数据公司已涵盖了数据采集、数据存储、数据分析、数据可视化以及数据安全等领域。企业实力不断增强,华为、阿里、百度、腾讯等企业的大数据技术和平台处理能力跻身世界

大数据发展背景及研究现状

(一)大数据时代的背景 随着计算机存储能力的提升和复杂算法的发展,近年来的数据量成指数型增长,这些趋势使科学技术发展也日新月异,商业模式发生了颠覆式变化。《分析的时代:在大数据的世界竞争》是2016年12月麦肯锡全球研究院(MGI)发表的一份报告。五年前MGI就指出大数据分析在基于定位的服务、美国零售业、制造业、欧盟公共部门及美国健康医疗领域有很大的增长潜力。数据正在被商业化,来自网络、智能手机、传感器、相机、支付系统以及其他途径的数据形成了一项资产,产生了巨大的商业价值。苹果、亚马逊、Facebook、谷歌、通用微软以及阿里巴巴集团利用大数据分析及自己的优势改变了竞争的基础,建立了全新的商业模式。稀缺数据的所有者利用数字化网络平台在一些市场近乎垄断,只需用独特方式将数据整合分析,提供有价值的数据分析,几乎可以“赢家通吃”。2011年全球的数据储量就达到,与2011年相比2015年大数据增长了近4倍,未来十年,全球数据存储量还将增长十倍,大数据成为提升产业竞争力和创新商业模式的新途径。大数据在企业中得到了充分的应用并实现了巨大的商业价值。梅西百货的SAS系统可以根据7300种货品的需求和库存实现实时定价。零售业寡头摩尔玛通过最新的搜索引擎Polaris,利用语义数据技术使得在线购物的完成率提升了10%到15%。我国信息数据资源80%以上掌握在各级政府部门手里,

但很多数据却与世隔绝“深藏闺中”,成为极大的浪费。2015年,国务院印发《促进大数据发展行动纲要》,明确要求“2018年底前建成国家政府数据统一开放平台”;今年5月,国务院办公厅又印发《政务信息系统整合共享实施方案》,进一步推动政府数据向社会开放。1 大数据可以把人们从旧的价值观和发展观中解放出来,从全新的视角和角度理解世界的科技进步和复杂技术的涌现,变革人们关于工作、生活和思维的看法。大数据的应用十分广泛,通过对大规模数据的分析,利用数据整体性与涌现性、相关性与不确定性、多样性与非线性及并行性与实时性研究大数据在公共交通、公共安全、社会管理等领域的应用。大数据与云计算、物联网一起使得很多事情成为可能,将会是新的经济增长点。大数据随着以数据科学为核心的计算机技术的迅猛发展,推动了社会科学与自然科学等跨科学研究的发展。因此对内蒙古乃至全国的大数据研究具有深刻而广泛的意义。 (二)国内外相关研究现状 大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。2大数据充斥着人类经济社会的角角落1人民网 2 6个好用大数据的秘诀

大数据学科发展现状与趋势调研报告

大数据学科发展现状与趋势调研报 告

目录 1 大数据学科发展现状与趋势 (1) 1.1 大数据学科发展现状 (1) 1.2 大数据学科发展趋势 (2) 2大数据热点问题与技术发展趋势 (4) 2.1 大数据热点问题 (4) 2.2 大数据技术发展趋势 (5) 3中国大数据发展战略与建议 (9) 3.1 大数据基础研究的发展战略与建议 (9) 3.2 大数据产业的发展战略与建议 (13)

1大数据学科发展现状与趋势 1.1大数据学科发展现状 大数据研究还处于积累数据、分析现象为主的前科学阶段 不少学者认为,目前的“大数据”主要表现为“研究对象”,是一种需要探索的“现象”。随着采集数据成本的大幅度降低,各行各业都涌现大量非结构化的数据,正在探索存储、处理、分析大数据的新方法,尚未形成反映大数据共性规律的科学理论。观察现象,积累科学数据,从现象中发现规律,是形成物理、化学等科学理论走过的路。牛顿力学就是建立在大量天文学观察的基础上。研究人类社会活动规律的社会科学、以复杂网络为研究对象的网络科学等还处在牛顿力学诞生前的积累数据、分析现象阶段。 现有的大数据理论与模型高度依赖于其他学科,如统计分析、机器学习、分布式系统等,还没有建立起独立于其他学科的理论体系与研究方法论。但大数据基础研究可能不是传统科学的复制和延续,大数据有别于传统数据处理的本质是数据之间的相互关联,相互关联的数据跨越了物理空间、信息空间和人类社会,形成了三元空间交织融合的“数据界”(Data Nature)。数据界的存在仅仅一个现象还是在现象之下的隐藏着一套全新的“数据科学”理论与“数据哲学”理论,目前尚不清晰。 大数据研究将促使科研第四范式逐渐形成,但第四范式的建立也是一个过程,需要发展与已有的三种范式不同的科研方法。科研范式的改变和大数据共性规律的发现可能会交织在一起。估计还需要一段时间的努力大数据才能形成独立的学科。 大数据的科学研究与产业应用脱节 当前经济形势下,纯粹依靠物质资源发展经济的老路已难以为继,而数据是贯彻国家“创新驱动发展”战略的最重要资源。过去几年来,以“BAT”为代表的大型互联网企业已具有与国际大公司竞争的经济实力和技术基础,他们依托自身拥有的巨量数据和现实的应用需求,已经发展出一些初步满足各自底层次需求的大数据解决方案,但在新技术引领未来的竞争优势方面存在诸多不足。我国在

电子商务大数据的发展现状与应用

电子商务大数据的发展现状与应用 随着互联网、云计算和物联网的迅速发展,无所不在的移动设备、RFID、无线传感器每分每秒都在产生数据,数以亿计的用户的互联网服务时时刻刻都在产生巨量的交互数据信息。而基于这些,电子商务产业所产生的大量结构化和半结构化的可视化数据,通过数据挖掘和数据分析等手段,经过过程性和综合性的考量,从而帮助电商企业做全局性、系统性的决策,寻找最优化的解决方案和运营决策,这被称为电商大数据。而与电子商务相关的大数据应用均归属于此概念范畴。 电商产业一般可按照交易方式分为:商业机构对商业机构的电子商务B2B(businesstobusiness),商业机构对消费者的电子商务B2C(businesstocustomer),商业机构对政府管理部门的电子商务B2G(BusinesstoGovernment),消费者对政府管理部门的电子商务C2G(customertoGovernment),消费者对消费者的电子商务C2C(customertocustomer)。也可按照其主要细分领域分为B2B电子商务、网络购物、在线旅游、O2O。而目前为电商大数据带来庞大的数据来源主要是B2B电子商务和网络购物,如2014年年底电子商务的交易规模达万亿元,电子商务的数据量与日俱增的同时,电商大数据产业从最初的阶段逐渐进入高速发展期。 1.产业政策及发展现状 (1)产业政策 中国大数据发展的宏观政策环境不断完善。2012年以来,科技部、发改委、工信部等部委在科技和产业化专项陆续支持了一批大数据相关项目,在推进技术研发方面取得了积极效果。《电子商务“十二五”发展规划》、《工业和信息化部关于推进物流信息化工作的指导意见》等相关政策无不在鼓励电商大数据的快速发展,国务院总理李克强在十二届全国人大二次会议上作政府工作报告时,提出要促进互联网金融健康发展、扩大跨境电商试点、加快4G发展等,推进城市百兆光纤工程和宽带乡村工程,大幅提高互联网网速,在全国推行“三网融合”,鼓励电子商务创新发展。 ①国务院日前印发《关于大力发展电子商务加快培育经济新动力的意见》部署进一步促

国内外大数据经典案例研究

国内外大数据经典案例研究

大数据时代的来临使得产生的数据量呈爆炸式增长,各行各业均面临着海量数据的分析、处理问题。如何运用大数据技术从海量数据中挖掘出有价值的信息,将是今后企业发展的一个巨大挑战。点评收集研究了国内外大数据应用的经典案例,希望可以对读者有所启示。 1、塔吉特百货孕妇营销分析 最早关于大数据的故事发生在美国第二大超市塔吉特百货。孕妇对零售商来说是个含金量很高的顾客群体,但是她们一般会去专门的孕妇商店。人们一提起塔吉特,往往想到的都是日常生活用品,却忽视了塔吉特有孕妇需要的一切。在美国,出生记录是公开的,等孩子出生了,新生儿母亲就会被铺天盖地的产品优惠广告包围,那时候再行动就晚了,因此必须赶在孕妇怀孕前期就行动起来。 塔吉特的顾客数据分析部门发现,怀孕的妇女一般在怀孕第三个月的时候会购买很多无香乳液。几个月后,她们会购买镁、钙、锌等营养补充剂。根据数据分析部门提供的模型,塔吉特制订了全新的广告营销方案,在孕期的每个阶段给客户寄送相应的优惠券。结果,孕期用品销售呈现了爆炸性的增长。2002年到2010年间,塔吉特的销售额从440亿美元增长到了670亿美元。大数据的巨大威力轰动了全美。 点评:这个案例说明大数据在企业营销上的成功,利用大数据技术分析客户消费习惯,判断其消费需求,从而进行精确营销。这种营销方式的关键在于其时机的把握上,要正好在客户有相关需求时才进行营销活动,这样才能保证较高的成功率。 2、沃尔玛“啤酒加尿布”经典案例 总部位于美国阿肯色州的世界著名商业零售连锁企业沃尔玛拥有世界上最

大的数据仓库系统,为了能够准确了解顾客在其门店的购买习惯,沃尔玛对其顾客的购物行为进行购物篮分析。沃尔玛数据仓库里集中了其各门店的详细原始交易数据,在这些原始交易数据的基础上,沃尔玛利用NCR数据挖掘工具对这些数据进行分析和挖掘,可以很轻松地知道顾客经常一起购买的商品有哪些。一个意外的发现是:“跟尿布一起购买最多的商品竟是啤酒!” 这是数据挖掘技术对历史数据进行分析的结果,反映数据内在的规律。沃尔玛派出市场调查人员和分析师对这一数据挖掘结果进行调查分析,经过大量实际调查和分析,揭示了隐藏在“尿布与啤酒”背后的美国人的一种行为模式:在美国,一些年轻的父亲下班后经常要到超市去买婴儿尿布,而他们中有30%~40%的人同时也为自己买一些啤酒。产生这一现象的原因是:美国的太太们常叮嘱她们的丈夫下班后为小孩买尿布,而丈夫们在买尿布后又随手带回了他们喜欢的啤酒。 既然尿布与啤酒一起被购买的机会很多,于是沃尔玛就在其一个个门店将尿布与啤酒摆放在一起,结果是尿布与啤酒的销售量双双增长。 点评:无论“啤酒加尿布”仅仅是一个传说,还是一个真的发生过,它都已经成为大数据技术应用的一个经典案例。这个故事的意义在于将看似不相关的商品数据放在一起进行分析,找到他们之间的相关性,从而进行交叉营销,促进商品的销量。这种思维方式才是成功的关键。 3、试衣间的大数据应用 传统奢侈品牌PRADA正在向大数据时代迈进。她在纽约及一些旗舰店里开始了大数据时代行动。在纽约旗舰店里,每件衣服上都有RFID码,每当顾客拿起衣服进试衣间时,这件衣服上的RFID会被自动识别,试衣间里的屏幕会自动

相关文档
最新文档