GPS轨迹数据集免费下载资源整理_大西洋飓风数据下载-程序员宅基地

技术标签: bigData  大数据学习  gps  

本文主要是整理了GPS轨迹数据集免费资源库,从这些库中能够免费下载到GPS数据,同时还整理出了这些数据的格式,数据集的简单描述等等。如果你发现更好的相关数据资源,欢迎共享

注意: 部分数据集在“翻-墙”之后才可以下载,比如微软的T-drive数据集,它被保存在OneDrive上面。各位自备“梯-子”吧

1. GeoLife GPS Trajectories

该GPS轨迹数据集出自微软研究GeoLift项目。从2007年四月到2012年八月收集了182个用户的轨迹数据。这些数据包含了一系列以时间为序的点,每一个点包含经纬度、海拔等信息。包含了17621个轨迹,总距离120多万公里,总时间48000多小时。这些数据不仅仅记录了用户在家和在工作地点的位置轨迹,还记录了大范围的户外活动轨迹,比如购物、旅游、远足、骑自行车。

这个数据集可以用来进行用户活动相似度估算,移动模型挖掘,用户活动推荐,基于位置的社交网络,位置隐私,位置推荐。

时间:2007年4月~2012年8月
数据大小:大概300M.
下载地址:https://www.microsoft.com/en-us/download/details.aspx?id=52367
数据格式:

一个文件夹存储一个用户的GPS日志,这些日志文件都被转换成了plt格式。为了避免时间区间问题,统一使用了GMT格式的时间表示。其他具体格式为:

Line 1…6 are useless in this dataset, andcan be ignored. Points are described in following lines, one for each line.
Field 1: Latitude in decimal degrees.
Field 2: Longitude in decimal degrees.
Field 3: All set to 0 for this dataset.
Field 4: Altitude in feet (-777 if notvalid).
Field 5: Date - number of days (withfractional part) that have passed since 12/30/1899.
Field 6: Date as a string.
Field 7: Time as a string.
Note that field 5 and field 6&7represent the same date/time in this dataset. You may use either of them.

Example:
39.906631,116.385564,0,492,40097.5864583333,2009-10-11,14:04:30
39.906554,116.385625,0,492,40097.5865162037,2009-10-11,14:04:35

交通方式数据集格式:

可能的交通方式有:walk,bike, bus, car, subway, train, airplane, boat, run and motorcycle,再次强调,虽然大多数数据是在中国产生的,但是,还是把时间或者日期都统一以GMT的时间形式表示。

例如:

Start Time End Time Transportation Mode

2008/04/02 11:24:21 2008/04/02 11:50:45bus

具体说明在下载的文件压缩包中!

  • 使用到该数据的论文有:

Q. Li, Y. Zheng, X. Xie, Y. Chen, W. Liu, and M. Ma. 2008.Mining user similarity based on location history. In Proceedings of the 16thAnnual ACM International Conference on Advances in Geographic InformationSystems. ACM, 34.

Z. Chen, H. T. Shen, X. Zhou, Y. Zheng, and X. Xie. 2010.Searching trajectories by locations—An efficient study. In Proceedings of the29th ACM SIGMOD International Conference on Management of Data. ACM,255–266.

[1] Yu Zheng, Lizhu Zhang, Xing Xie, Wei-Ying Ma. Mininginteresting locations and travel sequences from GPS trajectories. InProceedings of International conference on World Wild Web (WWW 2009), MadridSpain. ACM Press: 791-800.

[2] Yu Zheng, Quannan Li, Yukun Chen, Xing Xie, Wei-Ying Ma.Understanding Mobility Based on GPS Data. In Proceedings of ACM conference onUbiquitous Computing (UbiComp 2008), Seoul, Korea. ACM Press: 312-321.

[3] Yu Zheng, Xing Xie, Wei-Ying Ma, GeoLife: ACollaborative Social Networking Service among User, location and trajectory.Invited paper, in IEEE Data Engineering Bulletin. 33, 2, 2010, pp. 32-40.

2.T-Drive Taxi Trajectories

这个数据来自微软T-Drive项目,包含在2008年北京一万多俩出租车一周的轨迹数据。这个数据集包含了1500万个坐标点,轨迹的总距离达到900多万公里。

  • 时间:2008年

  •    数据大小:80M左右。
    
  •    数据集下载地址:
    

https://www.microsoft.com/en-us/research/publication/t-drive-trajectory-data-sample/

  • 数据详细说明:

https://www.microsoft.com/en-us/research/wp-content/uploads/2016/02/User_guide_T-drive.pdf

另外为各位备份到百度云下面了: https://pan.baidu.com/s/1mTxei4K8hHVGREhwwKl85g

  • 数据格式:

Here is a piece ofsample in a file:

1,2008-02-0215:36:08,116.51172,39.92123
1,2008-02-0215:46:08,116.51135,39.93883
1,2008-02-0215:46:08,116.51135,39.93883
1,2008-02-0215:56:08,116.51627,39.91034
1,2008-02-0216:06:08,116.47186,39.91248
1,2008-02-0216:16:08,116.47217,39.92498
1,2008-02-02 16:26:08,116.47179,39.90718
1,2008-02-0216:36:08,116.45617,39.90531
1,2008-02-0217:00:24,116.47191,39.90577
1,2008-02-0217:10:24,116.50661,39.9145
1,2008-02-0220:30:34,116.49625,39.9146

每一个字段的所代表的意思是:

taxi id, date time,longitude, latitude

  • 使用到该数据集的论文有:

J. Yuan, Y. Zheng, and X. Xie. 2012. Discovering regions ofdifferent functions in a city using human mobility and POIs. In Proceedings ofthe 18th ACM SIGKDD International Conference on Knowledge Discovery and DataMining. ACM, 186–194.

J. Yuan, Y. Zheng, C. Zhang, W. Xie, X. Xie, G. Sun, and Y.Huang. 2010a. T-Drive: Driving directions based on taxi trajectories. InProceedings of the 18th Annual ACM International Conference on Advances inGeographic Information Systems. ACM, 99–108.

J. Yuan, Y. Zheng, X. Xie, and G. Sun. 2011a. Driving withknowledge from the physical world. In Proceedings of the 17th ACM SIGKDDInternational Conference on Knowledge Discovery and Data Mining. ACM, 316–324.

J. Yuan, Y. Zheng, X. Xie, and G. Sun. 2013a. T-Drive:Enhancing driving directions with taxi drivers’

intelligence. IEEE Transaction on Knowledge and DataEngineering 25, 1 (2013), 220–232.

N. J. Yuan, Y. Zheng, L. Zhang, and X. Xie. 2013b. T-Finder:A recommender system for finding passengers and vacant taxis. IEEE Transactionon Knowledge and Data Engineering 25, 10 (2013), 2390–2403.

N. J. Yuan, Y. Zheng, X. Xie, Y. Wang, K. Zheng, and H.Xiong. 2015. Discovering urban functional zones using latent activitytrajectories. IEEE Transactions on Knowledge and Data Engineering 27, 3 (2015),1041–4347.

S. Ma, Y. Zheng, and O. Wolfson. 2013. T-Share: Alarge-scale dynamic taxi ridesharing service. In Proceedings of the 29th IEEEInternational Conference on Data Engineering. IEEE, 410–421.

S. Ma, Y. Zheng, and O. Wolfson. 2015. Real-time city-scaletaxi ridesharing. IEEE Transactions on Knowledge and Data Engineering 99.DOI:http://doi.ieeecomputersociety.org/10.1109/TKDE.2014.2334313

Jing Yuan, Yu Zheng, Xing Xie, and Guangzhong Sun. Drivingwith knowledge from the physical world. In The 17th ACM SIGKDD internationalconference on Knowledge Discovery and Data mining, KDD’11, New York, NY, USA,2011. ACM.

Jing Yuan, Yu Zheng, Chengyang Zhang, Wenlei Xie, Xing Xie, Guangzhong Sun, and
Yan Huang. T-drive: driving directions based on taxi trajectories. In
Proceedings of the 18th SIGSPATIAL International Conference on Advances in
Geographic Information Systems, GIS ’10, pages 99-108, New York, NY, USA,2010.
ACM.

3. GPS Trajectories with transportationmode labels

这个数据集是微软亚洲研究院Geolift项目用到的GPS轨迹数据集的一部分。这个数据集代表按时间顺序排序的点集,每一个点所包含的信息有经纬度、高度、速度和当前朝向等等。这些轨迹数据是由不同的GPS设备收集的,这些设备的数据收集频率是不一样的。95%的轨迹是密集的,比如每2~5秒或者每5~10米一个点。

轨迹数据文件被转换成了.plt格式,每一个轨迹还有一个单独文件存储的交通方式标签文件,比如开车、坐公交车、骑自行车、步行。

  • 时间:2008年
  • 数据集大小:大概80M。
  • 下载地址:

https://www.microsoft.com/en-us/research/publication/gps-trajectories-with-transportation-mode-labels/

  • 数据格式:

交通方式数据格式:

Date    Start Time       End Time        Transportationmodes
2008/3/1          11:07:00          11:40:00          walk
2008/3/1          11:44:00          12:07:00          bus
2008/3/1          12:07:00          13:30:00          walk
2008/3/1          13:30:00          13:55:00          car
2008/3/1          13:55:00          14:16:00          walk

Plt格式文件数据的格式:

39.977685,116.3276249,1,0,39539.1428935185,2008/04/01,03:25:46
39.9777233,116.3276216,0,0,39539.1429050926,2008/04/01,03:25:47
39.9778499,116.3276266,0,0,39539.1429398148,2008/04/01,03:25:50
39.9779866,116.3276249,0,0,39539.142974537,2008/04/01,03:25:53
39.97812,116.3276133,0,0,39539.1430092593,2008/04/01,03:25:56
第一个字段:纬度(十进制)
第二个字段:纬度(十进制)
第三个字段:0表示正常,1表示在轨迹中断
第四个字段:海拔高度(英尺),-777表示无效
第五个字段:日期—注意下面的日期格式,如果是空白的,就会使用一个预设的日期。
第六个字段:日期字符串
第七个字段:时间字符串

需要注意的是:
这里写图片描述

具体请查看官方说明:

https://www.microsoft.com/en-us/research/wp-content/uploads/2016/02/User20Guide-with20labels.pdf

  • 使用到该数据集的论文:

Y. Zheng, Q. Li, Y. Chen, and X. Xie. 2008a. Understandingmobility based on GPS data. In Proceedings of the 11th International Conferenceon Ubiquitous Computing. ACM, 312–321.

Y. Zheng, L. Liu, L. Wang, and X. Xie. 2008b. Learningtransportation mode from raw GPS data for geographic application on the Web. InProceedings of the 17th International Conference on World Wide Web.ACM,247–256.

[1] Yu Zheng, Like Liu, Longhao Wang, Xing Xie. LearningTransportation Modes from Raw GPS Data for Geographic Application on the Web,In Proceedings of International conference on World Wild Web (WWW 2008), Beijing,China. ACM Press: 247-256

[2] Yu Zheng, Quannan Li, Yukun Chen, Xing Xie. Understanding Mobility Based on
GPS Data. In Proceedings of ACM conference on Ubiquitous Computing (UbiComp
2008), Seoul, Korea. ACM Press: 312–321.

[3] Yu Zheng, Yukun Chen, Quannan Li, Xing Xie, Wei-Ying Ma.Understanding transportation modes based on GPS data for Web applications. ACMTransaction on the Web. Volume 4, Issue 1, January, 2010. pp. 1-36.

4. 社交网络签到数据集:

这是一个基于社交网络的网站的用户签到的数据集,来自斯坦福大学网站。好友网络不是直接相连接的,这些数据是通过网站的公共接口获取的,包含了196591个节点和950327个边。从2009年2月到2010年10月总共收集了6442890个签到记录。

  • 数据集大小:用户签到的时间和位置的文件有101M, 好友网络数据:6.1M.
  • 数据格式:
user latitude [location id] 
196514 2010-07-24T13:45:06Z 53.3648119 -2.2723465833 145064 
196514 2010-07-24T13:44:58Z 53.360511233 -2.2763690171275991 
196514 2010-07-24T13:44:46Z 53.3653895945 -2.2754087046376497 
196514 2010-07-24T13:44:38Z 53.3663709833 -2.270076433398503 
196514 2010-07-24T13:44:26Z 53.3674087524 -2.27838134771043431 
196514 2010-07-24T13:44:08Z 53.3675663377 -2.278631763881734 

这个也是上面同一家网站所产生的数据,也是基于社交网络数据,大约300M, 详情和下载网址为;http://www.yongliu.org/datasets

  • 使用到该数据集的论文有:

E. Cho, S. A. Myers, J. Leskovec. Friendship and Mobility: Friendship and Mobility: User Movement in Location-BasedSocial Networks ACM SIGKDD International Conference on KnowledgeDiscovery and Data Mining (KDD), 2011.

  • 使用了check-in类型数据集的论文有:

L. Wei, Y. Zheng, and W. Peng. 2012. Constructing popularroutes from uncertain trajectories. In Proceedings of the 18th ACM SIGKDD InternationalConference on Knowledge Discovery and Data Mining. ACM, 195–203.

J. Bao, Y. Zheng, and M. F. Mokbel. 2012. Location-based andpreference-aware recommendation using sparse geo-social networking data. InProceedings of the 20th ACM SIGSPATIAL International Conference on Advances inGeographic Information Systems. ACM, 199–208.

2013年Foursquare的数据集(150M):

5. 这个是国家飓风中心的数据

(1)大西洋飓风数据库,时间为1851到2015年之间,这个数据集在2016年7月6日提供,包含了1956年到1960年修订之后的。这个数据集叫HURDAT2, 之前那个HURDAT被替换了。

这个数据集用逗号分隔的文本,六小时信息的位置,最大的风,中央的压力,和(从2004开始)所有已知的热带气旋和热带气旋的大小。

这里写图片描述

(2)1949-2015年东北部和北部太平洋中心飓风数据库,大概3.2兆。

6. 其他数据

时空数据,网络数据, 数据流, 神经图像数据,生物信息学(基因表达)数据集http://dm.uestc.edu.cn/resource/

Natural Earth :http://www.naturalearthdata.com/

Machine Learning Repository: http://archive.ics.uci.edu/ml/

Google Trends Datastore: http://googletrends.github.io/data/

Open Data Network: https://www.opendatanetwork.com/

2017-02-27

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/liangyihuai/article/details/58335510

智能推荐

使用nginx解决浏览器跨域问题_nginx不停的xhr-程序员宅基地

文章浏览阅读1k次。通过使用ajax方法跨域请求是浏览器所不允许的,浏览器出于安全考虑是禁止的。警告信息如下:不过jQuery对跨域问题也有解决方案,使用jsonp的方式解决,方法如下:$.ajax({ async:false, url: 'http://www.mysite.com/demo.do', // 跨域URL ty..._nginx不停的xhr

在 Oracle 中配置 extproc 以访问 ST_Geometry-程序员宅基地

文章浏览阅读2k次。关于在 Oracle 中配置 extproc 以访问 ST_Geometry,也就是我们所说的 使用空间SQL 的方法,官方文档链接如下。http://desktop.arcgis.com/zh-cn/arcmap/latest/manage-data/gdbs-in-oracle/configure-oracle-extproc.htm其实简单总结一下,主要就分为以下几个步骤。..._extproc

Linux C++ gbk转为utf-8_linux c++ gbk->utf8-程序员宅基地

文章浏览阅读1.5w次。linux下没有上面的两个函数,需要使用函数 mbstowcs和wcstombsmbstowcs将多字节编码转换为宽字节编码wcstombs将宽字节编码转换为多字节编码这两个函数,转换过程中受到系统编码类型的影响,需要通过设置来设定转换前和转换后的编码类型。通过函数setlocale进行系统编码的设置。linux下输入命名locale -a查看系统支持的编码_linux c++ gbk->utf8

IMP-00009: 导出文件异常结束-程序员宅基地

文章浏览阅读750次。今天准备从生产库向测试库进行数据导入,结果在imp导入的时候遇到“ IMP-00009:导出文件异常结束” 错误,google一下,发现可能有如下原因导致imp的数据太大,没有写buffer和commit两个数据库字符集不同从低版本exp的dmp文件,向高版本imp导出的dmp文件出错传输dmp文件时,文件损坏解决办法:imp时指定..._imp-00009导出文件异常结束

python程序员需要深入掌握的技能_Python用数据说明程序员需要掌握的技能-程序员宅基地

文章浏览阅读143次。当下是一个大数据的时代,各个行业都离不开数据的支持。因此,网络爬虫就应运而生。网络爬虫当下最为火热的是Python,Python开发爬虫相对简单,而且功能库相当完善,力压众多开发语言。本次教程我们爬取前程无忧的招聘信息来分析Python程序员需要掌握那些编程技术。首先在谷歌浏览器打开前程无忧的首页,按F12打开浏览器的开发者工具。浏览器开发者工具是用于捕捉网站的请求信息,通过分析请求信息可以了解请..._初级python程序员能力要求

Spring @Service生成bean名称的规则(当类的名字是以两个或以上的大写字母开头的话,bean的名字会与类名保持一致)_@service beanname-程序员宅基地

文章浏览阅读7.6k次,点赞2次,收藏6次。@Service标注的bean,类名:ABDemoService查看源码后发现,原来是经过一个特殊处理:当类的名字是以两个或以上的大写字母开头的话,bean的名字会与类名保持一致public class AnnotationBeanNameGenerator implements BeanNameGenerator { private static final String C..._@service beanname

随便推点

二叉树的各种创建方法_二叉树的建立-程序员宅基地

文章浏览阅读6.9w次,点赞73次,收藏463次。1.前序创建#include<stdio.h>#include<string.h>#include<stdlib.h>#include<malloc.h>#include<iostream>#include<stack>#include<queue>using namespace std;typed_二叉树的建立

解决asp.net导出excel时中文文件名乱码_asp.net utf8 导出中文字符乱码-程序员宅基地

文章浏览阅读7.1k次。在Asp.net上使用Excel导出功能,如果文件名出现中文,便会以乱码视之。 解决方法: fileName = HttpUtility.UrlEncode(fileName, System.Text.Encoding.UTF8);_asp.net utf8 导出中文字符乱码

笔记-编译原理-实验一-词法分析器设计_对pl/0作以下修改扩充。增加单词-程序员宅基地

文章浏览阅读2.1k次,点赞4次,收藏23次。第一次实验 词法分析实验报告设计思想词法分析的主要任务是根据文法的词汇表以及对应约定的编码进行一定的识别,找出文件中所有的合法的单词,并给出一定的信息作为最后的结果,用于后续语法分析程序的使用;本实验针对 PL/0 语言 的文法、词汇表编写一个词法分析程序,对于每个单词根据词汇表输出: (单词种类, 单词的值) 二元对。词汇表:种别编码单词符号助记符0beginb..._对pl/0作以下修改扩充。增加单词

android adb shell 权限,android adb shell权限被拒绝-程序员宅基地

文章浏览阅读773次。我在使用adb.exe时遇到了麻烦.我想使用与bash相同的adb.exe shell提示符,所以我决定更改默认的bash二进制文件(当然二进制文件是交叉编译的,一切都很完美)更改bash二进制文件遵循以下顺序> adb remount> adb push bash / system / bin /> adb shell> cd / system / bin> chm..._adb shell mv 权限

投影仪-相机标定_相机-投影仪标定-程序员宅基地

文章浏览阅读6.8k次,点赞12次,收藏125次。1. 单目相机标定引言相机标定已经研究多年,标定的算法可以分为基于摄影测量的标定和自标定。其中,应用最为广泛的还是张正友标定法。这是一种简单灵活、高鲁棒性、低成本的相机标定算法。仅需要一台相机和一块平面标定板构建相机标定系统,在标定过程中,相机拍摄多个角度下(至少两个角度,推荐10~20个角度)的标定板图像(相机和标定板都可以移动),即可对相机的内外参数进行标定。下面介绍张氏标定法(以下也这么称呼)的原理。原理相机模型和单应矩阵相机标定,就是对相机的内外参数进行计算的过程,从而得到物体到图像的投影_相机-投影仪标定

Wayland架构、渲染、硬件支持-程序员宅基地

文章浏览阅读2.2k次。文章目录Wayland 架构Wayland 渲染Wayland的 硬件支持简 述: 翻译一篇关于和 wayland 有关的技术文章, 其英文标题为Wayland Architecture .Wayland 架构若是想要更好的理解 Wayland 架构及其与 X (X11 or X Window System) 结构;一种很好的方法是将事件从输入设备就开始跟踪, 查看期间所有的屏幕上出现的变化。这就是我们现在对 X 的理解。 内核是从一个输入设备中获取一个事件,并通过 evdev 输入_wayland

推荐文章

热门文章

相关标签