大数据技术应用及发展趋势_大数据技术应用及发展趋势

更新时间:2017-07-02 来源:大课堂 点击:

【www.yscs9s.com--大课堂】

  摘要:伴随着信息领域的飞速发展,大数据的全面覆盖已然成为了这个信息时代一种不可或缺的宝贵财富。本文主要阐述了大数据的定义、概念特点、重要的技术和应用域以及未来的发展趋势与总结。
  Abstract: With the rapid development of the field of information, the comprehensive coverage of big data has become an indispensable valuable wealth of the information age. This paper mainly expounds the definition, the concept characteristics, the important technology, application domain and the future development trend and summary of big data.
  关键词:大数据;技术应用;发展趋势
  Key words: big data;technology application;development trend
  中图分类号:TP391 文献标识码:A 文章编号:1006-4311(2016)33-0166-03
  0 引言
  大数据技术指的是人与事物通过计算机这个第三方媒介将人和事物之间的数据进行交互上传,而计算机把上传到互联网上的数据进行归类、融合与协调的新型信息处理技术。大数据技术的忽然兴起很大地冲击了现有的IT架构,也给计算机互联网技术的发展创新带来重大机缘。为了充分发挥大数据在网络信息中的作用与价值,网络技术人员应当积极探索大数据技术的运行规律,研究其基础理论与基本方法,在掌握其发展现状的基础上积极展望未来发展趋势。
  1 大数据的定义
  1.1 大数据的概念
  大数据不只是代表大量的数据信息,它是一种全新的思维模式也可以把它看作是一个拥有着浩瀚的数据量和数据众多种类的庞大数据集,同时与旧式的数据有本质的区别。它不仅可以对数据进行掌握,重要的是它可以对这些巨量的数据信息进行细致化的区分处理,然后来获取到更多有重要价值的信息。大数据的意义在于通过对大量数据进行分析从而对核心价值进行预测。
  1.2 大数据的特点
  大数据有几个主要特点:①数据容量大(Volume)并且规模十分庞大,从以前的GB和TB已经升级至PB级别,乃至有一些的大公司用到了EB、ZB计量级别。“根据一则新闻报道,到2014年,全世界的存储数据量已经能达到2.0ZB字节”可想而知,数据的扩充速度飞快增加。②数据类型的多样性(Variety),就包括了一些结构化数据、半结构化数据和非结构化数据等。而如今结构化数据只占大数据总体的15%,其他的大多数都是非结构化数据。③数据的快速处理(Velocity),是指数据访问的速度,它与以前的数据挖掘技术在本质上有明显的不一样。在现今世界上,有许多的数据获取和数据存储设备,他们毫不停歇的获取大量的数据,进行快速的处理来达到高效准确性。④价值密度低(Value)。根据相对传统的思想和信息技术,但是在实际中经常会有信息丰富但是知识单调的情况。就拿视频为例,在持续的监拍过程当中,也许数据的价值只有一两秒钟。这四大特点也就是业内常说的4V,而以前相对传统的数据分析法几乎被大数据技术彻底覆盖。
  1.3 大数据的弱点
  大数据在社会经济科学技术的领域所取得的巨大影响,并不能取代对所有社会需要解决问题的思维方式,而大多数人都关注结果无益累积,例如个人隐私安全的侵犯。“人肉搜索”的威力,估计大多数人都清楚。只要被盯上,无论自己是多么低调,自己的信息早晚都会广而告之,没准有些信息连自己都不清楚。换句话说,在当今的社会隐藏自己,几乎是一件不可能的事情。当然,这一切的目的都是为了能够更加方便地生活,但其副作用就是,一部分的自由及隐私就要放弃掉。
  2 大数据关键技术与应用
  2.1 大数据关键技术
  大数据最重要的技术主要是数据的采集、数据分析处理、和数据解析管理这三个范畴。上文介绍过大数据的其中一个特点就是它的多样性,而这种庞杂种类繁多的环境下就需要数据采集与处理,一般分为智能感知层:通过数据传感器、网络通信体系和其他的测试设备等一些软硬件资源接入系统,才能够实现对结构化和非结构化的大量数据信息来进行智能化的识别和管理等。分析技术是大数据能够便捷利用的一个核心流程,在传统的数据挖掘与机器学习基础上,研发了网络挖掘技术、图挖掘等新型挖掘和分析技术,通过数据分析出的结论能够用于推荐系统、智能网络系统等。对于普通的终端用户和分析专家来说,需要的是最为直观的解释结果。从解析管理角度着重突破:可以引用tag cloud等可视化的技术支持,人机交互技术在交互的过程当中,逐渐带人终端用户进行分析流程来达到最佳的解释时效性。通过建立相应的数据库,来重点解决结构化、非结构化和半结构化的海量数据,开发可靠的分布式文件系统(DFS)、能效优化的存储、计算融入存储、大数据的去冗余及高效低成本的大数据存储技术;提供索引查询技术、引擎服务更加大对大数据技术的运用。
  2.2 汽车行业大数据的应用
  伴随着时代的推进信息的飞跃,一些相对传统的企业和国家事业单位都要对大量的数据进行管理,所以开始专研大数据技术。汽车行业即将进入大数据时代。而现在在日本的汽车行业当中,科研专家们将驾车人的一些行为习惯挖掘出来并进行数据化,从而实现自动调整座椅的使用习惯,还有根据汽车中心的数据化,保养汽车、地理位置等,零用部件来产生其特定的价值。大数据对汽车等行业的应用已经充分体现了大数据时代的兴起。   2.3 中国移动互联网大数据的应用
  “大数据”这个高大上的概念一出现,就像病毒一样蔓延下来,截止2015年手机上网用户已经达到约9亿左右,而随着移动网络设施的不断发展必定会把这一行业推向更高点。中国移动宁波的分公司在金融领域与当地的银行进行了数据共享的工作,可以做到通过各种信息渠道对用户做到非常准确充分的服务,从互联网领域又能够通过大数据进行及时的修改查询网络环境,例如当我们正在坐路途较远的高铁,手机网络较差时候。它们会通过大数据来进行及时优化网络,从而使网速更加流畅。2016年移动互联网流量发展情况如图1所示。
  2.4 大数据是互联网产品经理的必备资源
  最早的网站访客数据分析工具比如google analytics多数时间是作为SEO工具,主要用来发现客户在网络的使用习惯,点击从哪里过来又从哪里出去,对于那些有兴趣的客户等内容,而今天的互联网产品非常丰富,数据采集和分析工具还远远不够,而访客信息背后的数据越来越庞大,分离出一些特征性极强的客户,有利于针对产品的推出,比如视频网站的广告植入分析等等。
  3 大数据的发展趋势
  由于大数据是一个新的产业,它还处于迅速发展时期,它的利用范围十分宽广,基本笼盖了我们所认知的各个行业,并且它还在不断的让我们发现未发掘的地方。《2015年中国大数据发展调查报告》显示,国内超过百分之五十五的企业在进行大数据的应用,2015年我国大数据市场达到了310亿,增长速度高达38%。从总体发展角度预测,大数据将来的发展趋势将呈现如下几个主旨:
  3.1 大数据分析领域快速发展
  数据是非常有价值的,但数据的价值体现需要用它来进行技术探索,才能发现数据的积累是无法代表大数据量的多少。慢慢大数据应用技术达到黄金时期,人们就会深刻挖掘怎样来理解数据中的核心,所以大数据的分析技术也会得到非常充分的进步。因此,人们未来比较重视的领域即是大数据不同的挖掘方法,挖掘技术,因为,这个领域直接关系到数据价值的最终体现方式。
  3.2 大数据与云计算的关系越来越密切
  自从2013年开始,大数据和云计算技术就尝试了一些比较有效果的结合使用,而随着时间的推进,慢慢的这种结合变的更加密切,在未来的日子里云计算和大数据的关系会越来越密切。可以说大数据是商业智能的一种运用工具。而大数据要分析大量的数据,这对于系统的计算能力和处理能力要求是非常高的,传统的方式是需要一个超级计算机来进行处理,但这样就导致了计算能力空的时候闲着、忙的时候又不够的问题,而云计算的弹性扩展和水平扩展的模式很适合计算能力按需调用,因此,云计算为大数据提供了计算能力和资源等物质基础。简单说云计算和大数据可以说是相辅相成,云计算就是可以用来整合大数据,大数据就是云计算里的一盘散沙,而云计算通过检索、整合等技术来进行分配处理的。两者其实是相互独立存在的,但是从某种角度看也是可以相互依存的。
  3.3 安全和隐私问题越来越受到重视
  都说科技是一个“双刃剑”,作为计算机技术中的一个组成部分,大数据它本身也不能免俗。人们在从中得到利益的同时,也需要警惕。就如同上文说的,现如今数据量的庞大全面,而用户和企业的各类信息行为、照片存储都会被置入数据集中,这样我们就能够轻轻松松进行操作,确实具有非常便捷的作用。但随着它飞速发展的同时,个人隐私也会越来越容易被外泄,所以将来就需要考虑出解决处理的办法,和制定的法律条例来进行约束完善。
  3.4 科学理论的突破带动社会的进步
  有人把数据形容成蕴藏能量的煤矿,煤矿的价值绝对是一个巨大的财富。由国家的大力支持与大数据技术本身的价值体现,大数据在未来几年的信息行业必定会成为新的一股洪流,提高劳动生产率的同时促成了国民经济水平的大幅度上升。而它的带动将会促成一大批数据领域的人才,这门科学也会成为必修的学科,进而培养大数据技术人员。随着数据技术的不断提高,将来也会开发资源共享的领域。然后,数据信息共享将会扩张到企业层面,并会成为将来工作发展的主要一点。
  4 总结
  大数据对各个领域的不断蔓延,并推动着计算机领域的发展,人们越来越离不开它带来的便捷,在旧计算机时代是由信息技术推动着数据的发展,而现如今几乎是由大数据带动整个社会的信息,大数据算不上一个技术概念,更像是用来锦上添花,传统的技术永远不会被替代。准确来说应该算是一种思考问题模式的转变。对于任何一种创新的思维,都是需要改变我们固有的思维方式,从而才能达到预估的效果。
  参考文献:
  [1]孟小峰,慈祥.大数据管理:概念,技术与挑战.计算机研究与发展,2013,50(1):146-169.
  [2]袁冰.大数据行业应用现状与发展趋势分析[J].中国新通信,2014(24):75-76.
  [3]祝兴平.大数据与经济新闻生产方式的颠覆与重构[J].中国出版,2014(04):3-6.
  [4]梁巧琴.大数据应用的现状与展望[J].信息通信,2015(01):133.
  [5]赵淑芳,单桂娟.浅谈大数据应用现状及发展趋势[J].商,2015(36):223.

本文来源:http://www.yscs9s.com/jiaoyu/83476/

为您推荐

观看灯塔大课堂心得体会精选四篇

“灯塔大课堂”,是中国共产党特别推出的《榜样讲党课》,主要是邀请部分“抗疫榜样”讲述精彩抗疫故事。以下是小编收集整理的观看灯塔大课堂心得体会精选四篇,仅供参考,希望能够帮助到大家。

2024-01-04 01:23:05   观看灯塔大课堂心得体会范文   观看灯塔大课堂心得体会怎么写  

幼儿园思政大课堂教案汇编3篇

教案是教师为顺利而有效地开展教学活动,根据课程标准,教学大纲和教科书要求及学生的实际情况,以课时或课题为单位,对教学内容、教学步骤、教学方法等进行的具体设计和安排的一种实用性教学文书。以下是小编收集整理的幼儿园思政大课堂教案汇编3篇,仅供参考,希望能够帮助到大家。

2024-01-04 01:22:44   幼儿园思政大课堂教案6篇   幼儿园思政大课堂教案设计  

灯塔大课堂心得体会感悟范文五篇

心得体会是指一种读书、实践后所写的感受性文字。语言类读书心得同数学札记相近;体会是指将学习的东西运用到实践中去,通过实践反思学习内容并记录下来的文字,近似于经验总结。以下是小编整理的灯塔大课堂心得体会感悟范文五篇,仅供参考,希望能够帮助到大家。

2023-11-16 22:08:16   灯塔大课堂45课心得体会感悟与收获   灯塔大课堂45课心得体会感悟怎么写  

观看灯塔大课堂第十三课心得作文【汇编十四篇】

以下是小编收集整理的观看灯塔大课堂第十三课心得作文【汇编十四篇】,仅供参考,希望能够帮助到大家。

2023-11-16 22:08:13  

灯塔大课堂45课心得体会汇编4篇

以下是小编整理的灯塔大课堂45课心得体会汇编4篇,仅供参考,大家一起来看看吧。

2023-11-03 10:36:10   灯塔大课堂45课心得体会怎么写   灯塔大课堂45课心得体会感悟与收获