欢迎您访问科普小知识本站旨在为大家提供日常生活中常见的科普小知识,以及科普文章!
您现在的位置是:首页  > 科普文章

许宪春:大数据,*统计的机遇与挑战

科普小知识2022-07-27 10:04:37
...

许宪春:大数据,*统计的机遇与挑战

10月8日,复旦大学大数据研究所正式成立,复旦大学大数据研究所也成立了。学院将以计算机科学、数学和统计学为基础,深入开展与经济金融、生命科学、医疗保健和社会管理等多学科的交叉研究,有效促进相关学科的发展,建立直接面向产业需求的跨学科、跨学科研发团队,聚集产业创新人才,努力创造具有巨大市场应用价值的科技成果。

据报道,该学院的准备期长达10个月。早在2015年,复旦大学就开始计划建立大数据研究所和研究院。如何在全社会关注“大数据”概念的热潮中独树一帜并发挥主导作用,许多大学和研究机构都引入了大数据研究?如何促进大数据研究更有根据,避免“从概念到概念”和“从计算到计算”?大数据研究如何推动人才培养,打破“从学者到学者”的封闭内部循环?如何让大数据落地并成为一流的学科?复旦大数据研究所和研究院的成立,力求为上述问题提供“复旦计划”。

■许宪春

对于*统计机构来说,没有什么比数据更重要。我们研究统计分类标准、统计调查方法、统计数据收集方法、统计数据处理方法和统计数据评估技术,以获得真实、准确、完整、及时、有代表性、科学分类和经济适用的统计数据。

大数据时代的到来给*统计带来了巨大的发展机遇和严峻的挑战。

一、大数据在*统计中的应用

国家统计局非常重视大数据在*统计中的应用。迄今为止,已与17家大数据企业签署了战略合作协议。当然,目前大数据在中国*统计中的应用还处于起步阶段,主要表现在两个方面:一是大数据已经成为*统计数据来源的一部分;其次,大数据已经成为评估*统计数据质量的基础的一部分。

(一)大数据成为*统计数据的一部分

目前,大数据已经成为中国*统计数据来源的一部分。以下是一些有代表性的方面:

1.使用关键在线零售交易平台数据计算在线零售销售额

为了掌握网上零售交易平台的交易规模和结构,全面测算网上零售数据,从今年1月开始,国家统计局开展了月度网上零售交易平台调查,覆盖京东商城、亚马逊、当当、淘宝、天猫商城、酒仙、美团、中粮一购、国美在线、电平在线等42个重点网上零售交易平台。据上述42个重点网上零售交易平台统计,今年8月,全国网上零售总额达到2240.9亿元,同比增长36.5%。其中,实物商品网上零售总额达到1865.3亿元,增长35.6%,占网上零售总额的83.3%。非实物商品网上零售总额3747.5亿元,增长41.1%,占网上零售总额的16.7%。这是宏观管理部门和公众了解网上零售情况的重要参考。

2.利用房屋交易网络数据计算全国70个大中城市新建房屋的价格指数

房屋交易网签数据是指买卖双方签订购房合同后,房地产开发企业在房管部门备案,并在房地产信息网上公布的相关信息,包括地址、楼层、价格、面积、金额等详细信息,基本涵盖当月新建房屋的所有交易。从2011年1月开始,国家统计局开始利用住房交易网络的数据计算全国70个大中城市新建住房的价格指数。这对提高70个大中城市新住宅价格指数的数据质量起到了重要作用。

3.利用卓创信息公司提供的价格信息,对流通领域的重要生产资料进行市场价格监测

国家统计局与卓创信息公司合作,利用企业提供的价格信息,对流通领域的重要生产资料进行市场价格监测。从2014年1月开始,流通领域9大类50种重要生产资料的市场价格将在10天内联合向社会公布。该行业涵盖黑色金属、有色金属、化工产品、煤炭、石油和天然气、非金属建材、农产品、农业生产资料、林产品等领域。监测区域覆盖北京、天津、河北、山西、内蒙古、辽宁、吉林和上海等24个省市。这对宏观管理部门和公众了解流通领域重要生产资料的市场价格信息起到了重要作用。

(二)大数据成为*统计数据质量评估依据的一部分

除了使用大数据作为*统计数据来源的一部分,国家统计局还非常重视使用大数据来评估*统计数据的质量。目前具有代表性的有两个方面:一是利用中国银联跨行银行卡消费数据评价社会消费品零售总额的数据质量;二是利用大型机械设备企业的物联网数据来评价固定资产投资数据的质量。

二。大数据给*统计带来的机遇和挑战

对于*统计来说,大数据不仅带来了巨大的发展机遇,也带来了严峻的挑战。

(一)大数据给*统计带来重大发展机遇

首先,大数据将不断提高*统计服务的宏观管理和公众的能力。随着大数据的不断发展和完善,*统计机构开发和应用大数据的能力不断提高,*统计产品的种类将不断丰富,*统计数据的质量和及时性将不断提高,*统计服务宏观管理和公众的能力将不断提高。

其次,大数据将推动*统计的革命性变化。随着大数据的发展和完善,以及*统计机构对大数据技术开发和应用的逐步成熟,*统计将发生革命性的变化。一是以定期调查为基础,以抽样调查为主体,综合运用综合调查、重点调查等方法,充分利用行政记录等数据的现有统计调查方法体系可能发生重大变化。长期以来,抽样调查法,即从总体中选择样本,用样本计算总体的方法;普查和综合调查方法,即逐个调查所有单位的方法,在我国*统计中发挥了重要作用。在未来很长一段时间内,这些方法仍将被*统计部门广泛使用。然而,随着大数据的不断发展和完善,大数据在某些领域和方面可能会取代抽样调查、普查和综合调查等方法成为获取统计数据的重要方法,而这种获取统计数据的方法将变得越来越重要。其次,*统计数据的收集方式可能会发生重大变化。长期以来,*统计机构主要通过企业报告、家庭簿记和调查人员入户来收集原始数据。随着大数据的不断发展和完善,一些原始数据将通过挖掘大数据来获取,这种新的数据获取方法将变得越来越重要。第三,*统计数据处理模式可能发生重大变化。随着大数据的不断发展和完善,目前直接审查、汇总、处理和外推调查数据的数据处理模式可能会发生重大变化。

(二)大数据给*统计带来严峻挑战

首先,大数据给*的统计能力带来挑战。从大数据本身的产生到它的发展和完善,从*统计的最初应用到它的成熟应用,都需要很长的时间。在这一过程中,一方面,*统计中传统的统计调查方法、数据收集方法和数据处理模式将继续运作,否则无法满足宏观管理和公众的需求。另一方面,*统计系统必须投入大量的人力和物力来挖掘、处理和应用大数据,否则就不能满足大数据时代宏观管理和公众的需求。这种双轨运行模式将对*的统计能力构成巨大挑战。

其次,大数据给传统的*统计概念带来挑战。传统的*统计有一个既定的概念:抽样调查方法可以降低调查成本,提高效率和数据质量。由于抽样调查只调查从人口中抽取的部分样本,而不是人口中的每一个单位,因此调查单位的数量明显减少,可以降低成本,节省时间,提高效率。同时,由于调查单位数量少,*统计机构有能力为基层统计调查人员提供更扎实的培训和指导,有精力对统计调查数据进行更严格的检查和审查,从而提高统计调查数据的质量。随着大数据的不断发展和完善,*统计机构将越来越多地通过大数据企业间接获取统计数据。不需要对整个人口中的特定单位进行直接调查,不需要调查人员,因此不需要对调查人员进行培训。抽样调查的优势,如调查成本低和提高统计调查数据的质量,已经不复存在。(作者是国家统计局副局长)

《中国科学日报》(专题,第8版,2015年10月8日)