大数据技术进展与发展趋势

大数据技术进展与发展趋势

陈柏宏陆丽

桂林长海发展有限责任公司广西壮族自治区桂林市541001

摘要：互联网+时代，大数据技术得到快速发展，在大数据时代，大数据技术在各个领域中的应用，为其它领域的发展提供了技术支持。本论文主要从大数据技术的概念、大数据技术进展、大数据的发展趋势进行研究。

关键词：大数据技术；进展；发展趋势

引言

所谓的“大数据技术”，主要是通过传感器、网络交易、电子邮件、视频、点击流，以及当前和未来可获得的其他数字资源产生的海量、多样化、复杂化、纵向或分布式数据集，其最为突出的特征就是数据集是通过各种数据源而不断被收集起来的，并在云计算模型下对海量的数据进行存储、快速计算及分析。大数据技术由于掌握了海量的数据信息，它在处理高度复杂的事件，为人们提供更好的产品及服务，以及从众多解决方案中寻找最优解等方面，都具有极大的意义。

1大数据的概念

大数据是一种新型产物，在互联网+背景下产生的，利用一种新的思维模式进行数据运用，在互联网+时代，数据的总量和数据的种类繁多，如何利用大数据技术解决实际问题，是为其它行业发展提供了技术支持。互联网+背景下，现在工作中涉及的数据很多，如何提升数据的利用效率，保障数据的应用效果，大数据没有明确定义，就是根据互联网+技术的发展需要，对产生的数据如何科学处理。

2大数据技术重要性

社会科学技术的不断发展，带动了计算机信息技术和互联网技术的应用，在计算机和互联网有机结合应用之后，产生了大量的数据信息，大数据概念也随之出现。大数据处于一种抽象的名词，跟传统的数据不同，大数据依存于互联网信息技术，同时规模大、类型多、价值较高。作为一门新兴的技术，大数据技术的出现为社会不同领域的发展提供了新的发展方向。例如说可以利用社会中产生的大数据来分析民生，进行舆情监控等工作，能够提升政府部门工作质量，加强政府部门跟人民群众的沟通和交流。

3大数据应用现状

（1）在工业领域，通过运用大数据技术对工业企业产生的海量数据进行分析挖掘，得到有价值的分析结果，实现工业与信息技术的融合创新发展不断深入。例如东方国信打造BIOP工业大数据平台，具备数据实时采集、数据整合处理等功能，可以实现从设备端到服务端的无缝衔接，通过整合现有生产端的MES、ERP、CPS等实时数据，统一汇总分析，提供实时监控、生产管理等多种生产运行管理的服务。

（2）在新闻领域，大数据技术的应用能够帮助模拟显示真实环境，发掘出新的市场需求，同时也能够帮助促进单位部门之间的练习，提升工作效率。在新闻生产行业应用大数据技术，能够进一步帮助提升社会受众的反馈价值。新闻行业应用大数据技术，可以详细的根据受众需求调整发展方向，例如趋势预测性新闻还有数据驱动型深度报道等，能够提升新闻的数据呈现和分析能力，帮助促进新闻事业的发展。

（3）在金融领域，我国积极推动大数据等信息技术在金融行业的广泛应用，培育发展了一批以网商银行为代表的新业态、新模式，推动金融产业不断转型升级，引领我国金融产业快速发展。例如百度开放大数据风控平台“般若”，实现信贷业务流程全覆盖，利用央行征信数据和百度数据将客户群的风险区分度提升13%，并大幅提升识别骗贷团伙的成功率。

（4）在公共交通行业，在交通运输行业应用大数据技术，能够促进交通行业的智能化和发展。首先是在系统当中输入收集到的交通数据，针对交通数据进行有效的提取，然后数据中心会在数据交换中心针对已经提取的数据进行处理和交换，利用计算机进行云储存、云计算，把大数据集成起来进行存储，最终利用控制中心把集成起来的大数据利用不同的色彩呈现出数据地图，能够更加明确的看出数据变化。

4大数据的主要发展趋势

4.1可视化推动大数据发展平民化

大数据的可视化技术基于大数据挖掘技术，将这些信息形象化，从而方便人们更直观地获取深层次的重要信息。通过数据的挖掘提炼有效的信息，在信息的实际应用过程中，完善其实际的应用效果，提升大数据发展的平民化的应用过程。大数据可视化技术从存储空间中将这些关键信息进行提取，通过图像、图形的形式将这些信息更直观地表达出来，并运用多种不同的分析手段来提取位置信息，将这些潜在信息通过图形图像等直观方式展示出来，从而帮助人们更好地理解、挖掘大数据下隐藏的信息，降低对数据检索的时间，提高对数据处理的能力。数据挖掘技术是大数据整理的常用技术，利用大数据技术在具体案例中的应用，能有效提高其数据的处理能力，完善大数据技术的应用职能。

4.2融合渗透效应向更深层次延伸

大数据的融合渗透效应将进一步凸显，在全球生产、流通、分配、消费以及经济运行机制、社会生活方式和国家治理能力等各个方面的应用将向更深层次拓展。大数据与集成电路、基础软件、核心元器件、新一代人工智能等领域的融合应用和集成创新不断加快。基于大数据的数字化生产、数字化制造、数字化服务等新业态不断涌现，成为推动数字经济发展的主动能。同时，大数据的技术与人工智能、区块链、边缘计算等技术的联系将更加紧密，融合创新业态不断涌现。

4.3产业生态体系加快完善

大数据相关政策将加快落地实施，更多创新性政策将加快出台，大数据产业发展环境将进一步优化。国家大数据综合试验区建设不断深入，我国大数据产业特色化发展态势将日益凸显，进一步优化资源配置、形成集聚效应、发挥辐射带动作用。随着大数据公共服务机构以及大数据专业服务机构不断发展，面向大数据领域的软服务能力将不断提升。此外，随着投入力度的不断加大，标准体系建设、创新型组织建设、大数据人才培养也将取得较大进展，大数据产业生态体系将逐步迈入成熟完善阶段。

4.4大数据与物联网

大数据与物联网的结合是机遇与挑战并存，首先，产生数据的平台多样化。从原来的个人电脑扩展为传感器、智能手机、各种业务系统、平板电脑、监控录像等，这使得感知层需要感知的数据呈现多样化。目前主流的感知技术有视频文字采集技术、红外线技术、传感器技术和蓝牙技术等，传感器链接的距离范围是100米到1000米，不适合长距离的通信；当外部的环境发生变化，传感器的稳定性能大幅度下降，对具有高性能计算存储系统的安全带来风险；物联网的标准是建立在广电网、通信网和互联网等异构网的基础之上，还没有统一完善的标准体系。

4.5大数据与云计算的关系越来越密切

云计算是现在互联网+时代的主要计算形式，符合现代按需计算的需要，对大数据技术的发展起到促进作用。在大数据时代利用云计算是符合现代网络发展的需要，在网络时代，加强互联网时代发展需要，利用云计算，提高了计算的效率，云计算是一种按需计算，有效提升云计算的实际应用效果，对其实际的应用起到重要作用，云的存储能力很强，现在大数据时代，在大数据技术的应用过程中产生大量数据，占用一定的存储空间，云的存储空间无限大，并且具有较强的数据处理能力，因此大数据与云计算的关系越来越密切。

结语

总之，大数据技术的发展是社会发展的需要，大数据技术需要根据应用的过程中不断完善与更新，提高大数据技术的实际应用效果，是提高大数据智能的基本职能。在互联网+背景下，大数据技术需要与物联网技术相结合，互联网到物联网的转变，是社会的发展需要，大数据的未来发展形式好，对其它行业的发展起到促进作用，必须有效提升大数据的应用职能，提高大数据的利用效率，不断完善大数据的职能，提高大数据的应用效果。

参考文献

[1]苏玉娟.大数据知识实现的维度分析[J].理论探索,2017,（2）:64-68.

[2]唐凯麟.大数据隐私伦理问题研究[J].伦理学研究，2016（6）：102-106.

[3]杨彬.试谈大数据技术[J].电脑编程技巧与维护,2017(21):63-65.