探析大数据时代政府统计工作的机遇与挑战

发布时间 : 星期三 文章探析大数据时代政府统计工作的机遇与挑战更新完毕开始阅读

如今我国政府统计工作的方式主要以填报统计表为主,形式上较之从前并无太大变化,类似互联网统计的与大数据统计相关的手段鲜有使用。大数据时代的来临,政府统计的方方面面在互联网行政信息记录空间上有着更大的扩展领域,同时又为引入金融交易等层面数据统计提供可能。此外,互联网数据库中有很多隐藏数据,例如我们可以根据采集互联网用户搜索历史记录数据来判断相关于用

[4]

户的健康状况数据。信用状况数据、财产状况数据、消费品偏好数据等。可以

说只要能获取海量的数据,应用统计学便可以此为基础进行展开的数据处理与分析。大数据时代的到来,为政府统计工作提供了较大的数据拓展空间。

三、政府统计工作在大数据时代下面临的机遇与挑战

(一)大数据时代下政府统计工作的机遇

互联网加技术、云计算技术的迅猛发展,使线上交易成为可能,实时电子监控为其提供保障。全球数据量空前巨大,变化方式多样莫测。如我们在前一章所讨论的,随着大数据时代的到来,为政府工作创造了可以利用的、诱人的潜在优势,也为统计工作带来了各种机遇:

1、政府统计工作的效率得到大幅提升

对比传统的经常出现低频率、滞后性等问题的政府统计方法,如今的大数据依靠它实时性数据处理方式、高价值数据等为统计工作带来的优势,在消除传统政府统计方法出现的低效率、滞后问题的同时,可以极大提高政府统计工作的效率,并促进政府统计工作中统计数据更加精准、具备时效性。例如:在政府经济统计部门对消费者物价指数(CPI)的统计时,由于发布CPI的频率要按月发布,通常会导致滞后情况。我国一般选择在每月的9号发布上月的CPI统计数据,与此同时,我国政府统计网站根据对市场价格的动态收集与整理,可以提供实时在线价格指数,以便大众了解最新鲜的数据。同时实时数据的整理还在一定程度上促进发布频率,旨在实现有效分析市场的通货膨胀规律[5]。

2、政府统计信息化建设得到大力促进

随着大数据时代的到来,云计算成为一种流行的软数据处理技术。先进的数据处理尖端技术可以实现高效的数据分析。因此,政府统计信息化建设在大数据时代下的要求极高。如今的政府统计工作开始全面更新数据理念,不断改革创新信息化建设环节。不仅促进了政府统计工作中的信息化建设,还促使政府在数据采集工作的软、硬件技术及手段的水平都得到了全面的发展与提升。

3、政府统计工作设计趋于标准化

现如今在大数据时代背景下,行政记录越来越趋于电子多元化,政府工作网站种类、数据的收集越来越繁多,电子化企业(如电商)关于其自身经营记录信息保持激增。当政府统计部门工作时,为确保有效的整合利用大数据,在面对海

4

量的信息化数据时促使统计部门不得不开始制定关于互联网数据信息的更合理、规划的标准。

(二)大数据时代下政府统计工作的挑战

大数据的这场巨大变革中,带给政府统计工作部门优势与机遇,这使表面看来政府统计工作者似乎拥有扮演先驱者的有利的条件。然而确切的说,伴随着无限优势的机遇,大数据时代下政府统计工作的挑战也随着而来,也就是说政府统计工作者要开始思考并应对传统统计工作的方法制度与当下盛行的大数据并不接轨并行的问题。

1、弱化的政府统计部门工作职能

现如今的政府统计部门俨然不再同过去传统的统计部门一样是仅有的大量数据拥有者。由于互联网技术的迅猛发展,凡是经由物联网传递的数据,如居民日常消费信息、企业工厂生产销售信息等,都被网络数据库所记忆。同时这些被存储于网络服务器内的海量数据再经过云计算数据分析技术对各项数据潜在价

[6]

值展开挖掘,这已经成为一种必然的趋势。海量数据在为政府工作部门工作提

供便捷的同时,对传统的政府统计工作权威地位造成很大冲击,也是目前政府统计部门工作职能将要面临的巨大挑战。

2、冲击了政府统计部门的传统工作制度

随着大数据对数据分析挖掘技术的不断完善,各类的数据信息咨询产业也渐渐崛起,为了使现阶段政府统计机制可以满足新时代发展需求,从而使巨大的转变出现政府统计部门的工作制度上。不同于传统的政府统计工作的对象、途径及内容,现今政府统计工作部门通过流媒体数字化以及网络行政商业记录等方法扩大了统计工作中数据信息采集的范围,使政府统计部门工作制度面临着巨大的挑战。

3、尚待提升的政府统计部门处理数据能力

大数据时代下对海量数据信息的处理技术有严格要求,传统政府统计工作部门所拥有的数据分析技术水平仍无法达到大数据要求的数据挖掘分析技术。鉴于此,我国政府统计部门工作时的数据分析水平要不断发展与完善,以达到专业精确的政府统计;同时政府相关统计部门内部要开展统计分析工作人员专业数据分析能力的培训,加强培训力度,提升工作人员自身数据分析挖掘能力,旨在培训能完成数据分析的高水平专业统计分析人员。换言之,我国政府统计部门工作者面临的数据挖掘分析,是对于部门内部专业统计分析人员的分析数据能力巨大的挑战。同时团队协作在大数据背景下也显得尤为重要,由于数据分析优化量很大,对不同专业人才的能力要求也不尽相同,这便要求政府统计部门在工作中不仅要培养专业的数据分析人员还要打造优化的具有专业分析数据能力的人才团队[7]。

5

4、对数据质量要求更高的政府统计工作

大数据在促进全社会的海量数据同步共享的发展过程中,过去政府官方统计将不再是公共统计数据信息仅有的途径,社会大众对于数据信息的需求质量、层次及细化等程度急剧升高。政府统计的数据质量高低很大程度上由政府统计数据的全面、效率、规模以及公信力等决定。大数据并非就是对数据信息展开盲目的收集,即便收集了再多的数据,倘若这些数据并非是政府统计所需要的,如此便

[8]

会导致前期收集来的数据信息,变成一堆“数据垃圾”。鉴于此,为了避免这

一情况发生,务必要充分分析政府统计工作需求,再对自身存在价值的数据展开收集、归纳,如此方可实现大数据的有效收集应用。

总而言之,在大数据时代下,就政府统计发展来说,即面临着挑战,又存在着机遇,挑战指的是当前政府统计各类方法难以有效适用大数据,机遇指的是基于统计学,大数据展开数据处理、分析,实现大数据具备可视化特性。为了实现政府统计工作的有效开展,务必要不断专研研究、总结经验,全面分析大数据时代政府统计的优势,充分认识大数据给政府统计带来的机遇、大数据给政府统计带来的挑战,积极促进政府统计工作的有序规范开展。基于此,本文对大数据时代下政府统计工作提出一些改革性建议。

四、借力“大数据”对政府统计工作的改革建议

统计应当借助于“大数据”所带来的优势机遇,主动顺应数据社会化的趋势,加快推进政府统计的改革。根据“大数据”时代下政府统计工作的可能会遇到的挑战,当前可以从优化统计机构设置、推进统计业务数据化,提高数据挖掘分析能力、完善统计数据发布等方面着力。

(一)优化统计机构设置

大数据背景要求统计机构的各项工作要必须走专业化道路,制度设计部门要研究数据获取来源、可信度、成本等项目,按照用户的需求设置指标;数据采集部门的任务是开拓更多可用的数据来源,并对数据流进行实时监测,保证数据流的通畅和清洁;数据分析部门则通过专业化的分析手段进行科学分析,而后由专业化的营销部门将数据产品传递给社会用户。只有按照统计数据生产流程设定机构,并进行网络化管理才能保证数据生产的科学性。目前按专业、部门条块分割的方式会造成大量数据的交叉重叠,方法制度不统一,数据质量良莠不齐,这一机构设置模式亟待优化。此外,根据“联网直报”等四大工程的显示,网络技术对人工的替代导致地方统计机构职能做出调整,由以前的催报、加工汇总、审核等职能转化为质量控制,而其他职能均可由技术实现。可见在“大数据”背景下,国家与地方统计机构关系及设置也面临调整。

(二)扎实推进统计业务数据化

6

对于目前的统计来说,与“大数据”时代的最大差距在于“数据化”,具体讲包括调查对象行为的数据化以及调查业务的数据化。调查对象的数据化运作是采集获取数据的基础。在数据化管理时代,企业更重视自身的业务模式的数据化,不少企业已经建成了从原材料到销售品一体化的数据跟踪体系,每一项业务流程都有数据记录可查。我们要加快推进互联网进程,帮助社会形成生产、物流、交易等环节的数据化,并将这些数据通过互联网系统搜集、存储起来。比如在超市收银机上加装统计采集装置,以保证每一笔交易的数据及时传送到统计数据平台,以提供给社会消费、价格调查等指标使用,加快行政数据的共享。投资、房地产、服务业统计等数据可从税务、工商、银行等部门的行政记录中获取,可以实现多部门数据的交叉验证,保证数据的准确与真实。住户调查方面,改变依赖调查对象记账的采集方式,比如可以使用住户的银行卡交易数据替代记账中的收入和支出,一些居民用电、水、气等消费记录也可以帮助我们更好地控制数据质量。调查业务的数据化主要是针对统计调查的质量控制。

目前“联网直报”采取 IP 定位控制、修改痕迹保留等方式就是这一理念的现实应用。比如为了保证每个采价员按照“三定原则”进行采价,可以对每台采价器进行数字化定位,其采价的时间、地点、数据情况可以即时传到服务器,即可进行监测。未来的统计数据采集可能就是联网的测量仪来进行,统计业务的数据化管理显得尤为重要。

(三)提高数据挖掘分析能力

“大数据”的概念来源于互联网,其要求的数据分析已经远非目前的统计数据处理技术能够实现。我们可以举个形象的比喻:在大数据时代到来之时,传统的社会学、统计学从业者,面对半道杀出来的计算机背景的互联网数据挖掘者,就好比波兰骑兵面对德国坦克一样脆弱。[9]对于统计来说,“大数据”还处于概念和社会趋势意义上,我们所要面对的大量、复杂的行政记录、商业交易数据实际上是结构化的海量数据,我们要能从这些海量数据中提取隐含的关系、模式和趋势等信息和知识供统计使用。

目前,结构化的海量数据挖掘已有比较完善的方法论和挖掘工具及算法,在一些商业调查领域已经开始发挥作用

(四)完善统计数据发布

统计最终是为用户服务的,发布对用户有价值的统计数据才是统计存在的意义所在。数据的多少并不是关键,即使海量的“大数据”对不需要的用户也是信息负担[10]。因此,我们需要提高数据发布的针对性,发挥数据的最大信息价值。

目前我们发布的数据主要是为满足党政领导的需求为主,以社会需求为辅。

[10]

。为了在未来的数据竞争中站稳脚跟,我

们必须在数据挖掘等现代分析能力上下工夫。

7

这种需求模式对于统计而言是有局限性的,容易自我封闭。未来,我们需要通过更为详细的数据挖掘技术,从抽象的“社会公众”里分辨出具体的数据用户,将要明确哪些人想了解哪些数据,将他们最需要的数据信息传递给他们。因此,在大数据的生产模式下,生产哪些数据、调查发布哪些数据不是由“上级部门”指派或依照传统惯例,而是根据用户的真实需求来决定[11]。在发布数据的形式上,数据可视化、人机交互、机器智能等先进的技术已经逐步应用到统计、计算机及商业领域,包括“智慧城市”等应用已经逐步成为现实。以文字、表格的方式发布统计数据已经跟不上用户的数据需求,也落后于商业调查的步伐。我们在数据发布方面还需要进一步加大创新力度,完善各种发布渠道,充分发挥数据的价值。“大数据”的本质实际上是数据生产的社会化,其对统计尤其是政府统计的冲击是重大的,不仅涉及整个统计流程,更加对当前的政府统计管理体制、机构设置、数据价值等方面形成了挑战。可以大胆预测,未来政府统计的政府角色会被统计专业性取代,经济分析的职能会被更为专业的经济分析部门取代,宏观数据的重要性会让位于更有信息价值的微观数据。统计部门需要正视这种变革,顺应这种潮流,并借助于“大数据”变革的有利形势,加快提高统计能力,使得统计在大变革中处于优势地位[12]。

参考文献:

[1]陆彬彬.大数据时代政府统计变革与发展的探索研究[J].统计科学与实践,2014 (11): 25-27. [2] Swartzn. Gartner warns firms of‘dirty data’[J].InformationManagement Journal,2007(3). [3]张瑜.浅议大数据时代政府统计面临的机遇与挑战[J].管理观察2014(18):49-50.

[4]文鹭,余颖怡.大数据时代政府统计面临的机遇和挑战[J].内蒙古统计,2014 (18):46-47. [5]王国钧.试论政府统计如何应对大数据时代的到来[J].中国统计,2013 (09). [6]李翔.浅议大数据技术对统计工作的影响[J].辽宁经济统计,2013 (5):21-24. [7]杨美沂,林勇.浅析大数据背景下的政府统计[J].统计与信息论坛,2014 (11). [8]何强.政府统计视阈中的大数据核心思想刍议[J].调研世界,2015 (02). [9]维克托·迈尔·伯舍恩伯格.大数据时代[M].周涛译.杭州.浙江人民出版社,2012. [10]杨少浪.对政府部门统计工作的再认识[J].中国统计,2010 (08).

[11]PanGang.Trace a-nalysis and mining for smart cities:Issues,methods,and applications[J].IEEE Communications Magezine,2013,(6).

[12]许小乐.“大数据”与政府统计改革[J].调研世界,2013(05).

8

联系合同范文客服:xxxxx#qq.com(#替换为@)