首页 理论教育 数据获取的途径及方法

数据获取的途径及方法

时间:2023-06-23 理论教育 版权反馈
【摘要】:这种相当独特的形式,为解决大数据环境下面临的数据获取途径、获取成本难题提供了一条出路。

数据获取的途径及方法

7.4.3.1 公开获取

交通数据的社会公开获取途径,主要包括交通主管部门公开和通过社会交通数据企业服务两个主要渠道。公开获取的交通数据资源大多仅提供简单加工过的数据,如data.gov网站、数据堂公司、聚合数据公司等。这些平台一般不提供复杂的数据挖掘和计算功能。随着对政府资源开放的呼声越来越强烈,除了专业主管部门的专业数据公开外,一些地方政府逐渐利用政府综合性网站公开各类数据资源,如上海市政府在2012年6月在国内率先创立了“上海市政府数据服务网”,截至2015年7月底,该网已累计开放数据集逾500项,开放数据集总量有望达到1 000项,涵盖经济建设、资源环境教育科技、道路交通等11个重点领域

7.4.3.2 数据服务

为了实现交通数据资源的汇聚、交互、增值,社会第三方交通企业或交通专业服务机构提供的交通数据服务模式一般可归纳为三类,分类提供、按需处理和多边交换。

分类提供是指按统一标准、流程和算法,分类、分级提供数据和信息。包括原始数据提供,主要面向数据实验室、研究机构、大学等;加工数据,主要面向交通信息服务企业等细分加工;应用信息,主要面政府部门提供交通综合信息等。

按需处理是指按需求委托或自行处理。包括委托加工。需方自编程序,数据方提供数据和运行环境,需方获取结果数据信息;有限定制。数据方在有限时段内,开放有限数据和运算空间,需方通过网络在数据方环境中自行处理、运算,获取结果数据信息。

多边交换即“小众共享”。在有限范围内,及符合各方需求、满足各方共同利益前提下,交换共享各自数据。如交通、规划、气象、环境、汽车等行业范围内的数据多边交换。(www.xing528.com)

7.4.3.3 数据交易

数据交易是将数据看成一般商品,以价值交换的方式在买方和卖方之间建立桥梁,完成数据服务和增值的过程。2016年4月,贵州成立贵阳大数据交易所,被业内誉为“中国大数据交易领域先锋”,以增值式交易服务模式,为数据价值链和产业链上下游用户提供服务平台,交易额超过7 000万,可交易数据50 PB,数据品种包括政府、医疗金融、企业、电商能源、交通、商品、消费、教育、社交、社会这十二类大数据。

交通数据资源作为社会公共资源的重要组成部分,也是数据交易所数据内容的重要内容之一。数据交易所经营的范围包括数据资产交易、数据衍生数据的设计及相关服务;数据清洗及建模等技术开发;数据相关的数据设计及服务;经数据交易相关的监督管理机构及有关部门批准的其他业务。数据交易所将为数据商开展数据期货、数据融资、数据抵押等业务,建立交易双方数据的信用评估体系,增加数据交易的流量,加快数据的流转速度。

7.4.3.4 数据众包

交通数据具有大数据特征,在数据获取的时候,经常需要对原始数据采集和清洗,需要大量的人力参与。数据众筹或众包是指一个公司或机构把过去由员工执行的交通数据采集任务,以自由自愿的形式,外包给非特定的大众网络的做法。数据众筹或众包可以为需求者提供一个发起数据志愿者的平台,通过数据共享、无偿赠送等方式,发动有相同需求的志愿者共同采集与处理数据。这种相当独特的形式,为解决大数据环境下面临的数据获取途径、获取成本难题提供了一条出路。好的数据众筹或众包经营方式,通常会比较注重价值性建设和保护用户的智力资本和权益不受侵犯,明确成功参与众包活动给用户带来的收益,以此激励用户的持续参与。常见的交通数据众包有交通广播爆料、交通信息网络爬虫、交通BBS、专业交流群等。

免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。

我要反馈