大数据与城市规划

2016年秋,清华大学研究生课程

课程结题汇报

课程作业、媒体报道等后续将陆续更新到这里。

第十五讲:大模型:新数据环境下的城市研究新方法

课件

Download
大数据与城市规划 第十五讲.pdf
Adobe Acrobat Document 6.2 MB

课外阅读

Download
龙瀛等 2014 城市规划学刊_大模型.pdf
Adobe Acrobat Document 9.6 MB
Download
龙瀛和朗嵬 2016 城市与区域规划研究_中国量化.pdf
Adobe Acrobat Document 3.3 MB

第十四讲:参与式规划中的大数据应用

课件

Download
大数据与城市规划 第十四讲.pdf
Adobe Acrobat Document 3.7 MB
Download
街道·品质·方法.pdf
Adobe Acrobat Document 3.6 MB

课外阅读

Download
龙瀛和刘伦 2016 国际城市规划_四个变革.pdf
Adobe Acrobat Document 994.9 KB
Download
唐婧娴等 2016 新建筑_街道空间品质.pdf
Adobe Acrobat Document 5.8 MB

参考资料

Download
武汉东湖绿道系统规划.pdf
Adobe Acrobat Document 32.3 MB

第四次课外沙龙:茅明睿,云平台、众规划与规划转型

Download
云平台大数据与规划转型.pdf
Adobe Acrobat Document 17.2 MB

第十三讲:城市设计中的大数据应用

课件

Download
大数据与城市规划 第十三讲.pdf
Adobe Acrobat Document 6.2 MB
Download
曹哲静的30min.pdf
Adobe Acrobat Document 20.7 MB

课外阅读

Download
龙瀛和叶宇 2016 南方建筑_人本尺度城市形态.pdf
Adobe Acrobat Document 4.1 MB
Download
龙瀛和沈尧 2016 城市建筑_城市设计TSP模型.pdf
Adobe Acrobat Document 2.8 MB

参考资料

Download
龙瀛和周垠 2016 新建筑_街道活力.pdf
Adobe Acrobat Document 2.7 MB

第十二讲:控制性详细规划中的大数据应用

课件

Download
大数据与城市规划 第十二讲.pdf
Adobe Acrobat Document 4.1 MB
Download
甘心悦的30min.pdf
Adobe Acrobat Document 2.5 MB

课外阅读

Download
Liu and Long 2016 EPB_AICP.pdf
Adobe Acrobat Document 1.1 MB

参考资料

Download
张永平和龙瀛 2016 城市规划_规划师主体.pdf
Adobe Acrobat Document 5.2 MB

第十一讲:战略及总体规划中的大数据应用

课件

Download
大数据与城市规划 第十一讲.pdf
Adobe Acrobat Document 8.9 MB

课外阅读

Download
李刚_城市厚数据建设手册.pdf
Adobe Acrobat Document 22.4 MB
Download
崔真真_新数据在城乡规划中的应用体系建设思考.pdf
Adobe Acrobat Document 1.1 MB

参考资料

Download
《上海城市规划》数据增强设计DAD专刊.pdf
Adobe Acrobat Document 5.6 MB

第十讲:数据增强设计

课件

Download
大数据与城市规划 第十周.pdf
Adobe Acrobat Document 5.5 MB

课外阅读

Download
《上海城市规划》数据增强设计DAD专刊.pdf
Adobe Acrobat Document 5.6 MB
Download
The Elusiveness of Data-driven urbanism
Adobe Acrobat Document 1.3 MB

参考资料

Download
龙瀛和沈尧 2015 上海城市规划_数据增强设计.pdf
Adobe Acrobat Document 7.2 MB
Download
沈尧和龙瀛 2015 景观设计学_城市秩序.pdf
Adobe Acrobat Document 7.9 MB

如何回复审稿人的信

Download
最终发表的论文
Long and Shen 2013 CEUS_Agenter.pdf
Adobe Acrobat Document 2.6 MB
Download
四次回复审稿人的信
被CEUS折磨的经历.pdf
Adobe Acrobat Document 413.1 KB

第九周:中期汇报

第三次课外沙龙:王江浩,城市时空大数据分析与可视化

内容简介:

随着移动互联网和信息通信技术的发展,产生了大量具有时空标记的空间大数据(如手机定位系统、移动位置服务数据、社交网络签到数据、智能公交卡数据等)。这些以动态、异构、多源为特征的时空大数据已成为我们观察人类自然社会行为的“显微镜”和监测城市资源环境的“仪表盘”, 并且应用到资源环境监测、城市规划与管理、社会计算等各个领域。本次沙龙将介绍城市时空大数据分析的研究进展,并结合具体案例进行上机实践,交流大数据分析与可视化技术,帮助学生尽快掌握城市时空大数据分析的相关基本知识与技能。

 

沙龙嘉宾介绍:

王江浩博士现为中国科学院地理科学与资源研究所,资源与环境信息系统国家重点实验室,助理研究员。2007年于河海大学获得本科学位,后在中科院地理资源所攻读硕士和博士学位,2015年初留所参加工作。研究方向主要为时空数据挖掘、空间统计、资源环境遥感与应用,已在IJGIS、IEEE TGRS、Annual of AAG等国际学术期刊上发表SCI/SSCI论文20余篇。主持国家自然科学基金、科技部支撑课题、中科院前沿研究等多项科研项目。目前现任中国资源学会资源制图专业委员会副秘书长,也是国内首个定量城市研究网络“北京城市实验室(Beijing City Lab, BCL)”的共同发起人之一。

 

Download
城市时空大数据分析与可视化.pdf
Adobe Acrobat Document 7.7 MB

第八讲 图片城市主义:城市规划设计与研究的新思路

课件

Download
大数据与城市规划 第八讲.pdf
Adobe Acrobat Document 9.2 MB

课外阅读

Download
龙瀛和周垠 2016 规划师_图片城市主义.pdf
Adobe Acrobat Document 3.6 MB
Download
唐婧娴等 2016 新建筑_街道空间品质.pdf
Adobe Acrobat Document 5.8 MB

参考资料

Download
刘伦的文章1608.03396v1.pdf
Adobe Acrobat Document 2.3 MB

其他:

刘伦:城市“颜值”:基于机器学习的北京街道建筑形象大规模测评  (搜狗搜索 微信公众号文章)  

第七讲 基于大数据的城市网络分析

上课时间:2016年10月28日(周五)上午8点

 

介绍城市网络分析的基本方法和指标,并介绍文献计量、兴趣点网络和公交卡研究应用实例。

(微博轨迹、火车/飞机班次、地名共现、交通出行调查、公共交通刷卡、GaWC、社区识别、总部分支) 

 

课件

Download
大数据与城市规划 第七讲.pdf
Adobe Acrobat Document 4.9 MB

课外阅读

Download
龙瀛和周垠 2016 工作论文_知识产出与消费.pdf
Adobe Acrobat Document 1.9 MB

第六讲 大数据时代的空间句法

上课时间:2016年10月21日(周五)上午8点

 

介绍了空间句法的发展背景,讨论了空间句法与城市大数据的关系,以及空间句法软件Depthmap的具体操作等。

 

课件

Download
大数据与城市规划 第六讲.pdf
Adobe Acrobat Document 12.1 MB
Download
Depthmap软件操作的ppt,曹哲静提供
空间句法简单操作.pdf
Adobe Acrobat Document 1.5 MB

软件下载

Download
Depthmap空间句法软件
Depthmap.rar
compressed file archive 55.1 MB
Download
Depthmap的中文版本
Depthmap CN Beta 0.40.exe
exe File 1.6 MB
Download
北京五环及以内地区的Depthmap格式的数据文件
5h.graph
exe File 17.8 MB
Download
样例文件1
TJ2.dxf
Text Document 374.0 KB
Download
样例文件2 视域分析
VGA.dxf
Text Document 45.7 KB

课外阅读

Download
郝新华等 2016 上海城市规划_北京街道活力.pdf
Adobe Acrobat Document 4.3 MB
Download
叶宇等 2016 国际城市规划_活力营造.pdf
Adobe Acrobat Document 3.6 MB

参考资料

Download
空间句法简明教程-20140903-01.pdf
Adobe Acrobat Document 14.2 MB
Download
空间是机器-建筑组构理论【Hillier】.pdf
Adobe Acrobat Document 44.4 MB

课后调查:大数据与空间句法的关系

Download
大数据与空间句法关系的讨论 copy.docx
Microsoft Word Document 23.2 KB

第二次课外沙龙:李栋,零代码抓数据

时间:2016年10月20日(周四)下午7-9点

  • 中英文题目:零代码抓数据 / data crawling with fun
  • 概要:互联网是当前信息传播的主要途径之一,其中也蕴含了大量城市规划研究中可利用的数据资源。如何快速有效的获取到这些数据、开展针对性的研究和分析,对每一位非计算机背景同学来说都是一个不大不小的挑战。本次讲座针对上述问题,以零代码为切入点,组合既有的软件工具,介绍了数据资源探查与定位、自动化抓取和清洗等常规方法,并辅以案例介绍和上机实践,帮助同学们尽快掌握互联网数据抓取的相关基本知识和技能。
  • 简介:李栋,博士,现任北京清华同衡规划设计研究院技术创新中心常务副主任。2003年于清华大学环境系获环境工程本科学位,2008年于中国科学院生态环境研究中心获生态学博士学位。毕业后在中规院、清规院等国内一流规划设计单位长期从事城乡规划研究与实践工作,曾参与或负责多项重大规划咨询项目、国际合作研究课题等任务,数次获得省部级以上奖励。个人研究兴趣为城市可持续发展模型与空间数据分析,主要涉及数据、工具和方法研发与应用,学术成果多次在国内外重要会议和同行评议期刊中发表,并担任JEMA、CEUS、IJGIS、GeoJournal等期刊的审稿人。近年来致力于在城市研究和规划中利用多源数据开展精细化研究,也是国内首个定量城市研究网络“北京城市实验室(Beijing City Lab,BCL)”的共同发起人之一。
  • 照片:两个附件任选
讲座实操的软件预装要求
  1. 安装 火车抓取器(注意版本为8.6):http://file.locoy.com/v8/LocoySpider_V8.6_Build20150323.rar
  2. 安装 chrome,安装文件的下载链接(大约55M):http://sw.bos.baidu.com/sw-search-sp/software/29cd900ea7d/ChromeStandalone_50.0.2661.102_Setup.exe
  3. 安装 postman,下载链接:链接: http://pan.baidu.com/s/1nvMygI1 密码: 5ueh,安装方法:http://jingyan.baidu.com/article/90808022ff18defd91c80f9a.html
  4. 学员提前注册好以下网站的用户名:
  5. 百度地图API(http://lbsyun.baidu.com/)

第一次课外沙龙:龙瀛,数据操作与大作业答疑

时间2016年10月14日(周五)下午6:30-8:30

 

补充数据操作介绍

数据操作答疑

大作业答疑

 

第五讲 城市大数据的可视化

上课时间:2016年10月14日(周五)上午8点

 

讲授城市大数据可视化的基本思路,以及利用ArcMap和ArcScene在本机进行数据可视化的方法和操作,以及利用GeoHey在线进行数据可视化的方法和操作。

 

BCL的GeoHey可视化门户

https://legacy.geohey.com/gallery/bcl

 

课件

Download
大数据与城市规划 第五讲.pdf
Adobe Acrobat Document 7.4 MB

课外阅读

Download
公交卡数据可视化
龙瀛等 2012 地理学报_BUSCAPES.pdf
Adobe Acrobat Document 5.9 MB
Download
CartoGram可视化
Long and Wu 2016 EPA_Shrinking.pdf
Adobe Acrobat Document 303.8 KB

参考资料

Download
ArcScene与SketchUp互操作
ARCSCENE-模型转为SU.docx
Microsoft Word Document 442.9 KB

一个更为全面介绍如何实现ArcGIS与SketchUp互操作的文档和例子,这里下载:链接: https://pan.baidu.com/s/1dE4N2Bf 密码: exzv

Download
公交卡可视化的简单案例
基于公交卡大数据的城市空间结构分析.pdf
Adobe Acrobat Document 3.1 MB

第四讲 城市大数据的统计与分析

上课时间:2016年10月9日(周日)上午8点

 

主要介绍基于ArcGIS和SPSS的统计分析,默认大家掌握Excel和Access的主要针对属性数据(不考虑空间位置)的统计分析技术,并会结合一个做的案例工作介绍所采用的统计分析技术(基于街景数据的街道绿化评价)。

课件

Download
大数据与城市规划 第四讲.pdf
Adobe Acrobat Document 3.4 MB

课外阅读

Download
以街道为单元的研究
龙瀛和周垠 2016 新建筑_街道活力.pdf
Adobe Acrobat Document 2.7 MB
Download
以地块为单元的研究
Liu and Long 2016 EPB_AICP.pdf
Adobe Acrobat Document 1.1 MB

参考资料

Download
利用Python语言进行ArcGIS编程的一个ppt(空间分析与统计进阶)
Programming.ArcGIS.10.1.with.Python.Cook
Adobe Acrobat Document 5.8 MB
Download
更为详细的利用Python进行ArcGIS编程的教程
Python_ArcGIS.zip
Compressed Archive in ZIP Format 18.1 MB

第三讲 城市大数据的获取

上课时间:2016年9月30日(周五)上午8点

 

介绍了大数据获取的方法,数据抓取介绍了结构化网页和API两种数据抓取方法,并对所提供给同学的数据进行了详细介绍。

课件

Download
因为有的页面有动画,有叠合,建议看ppt格式的课件
大数据与城市规划 第三讲.ppt
Microsoft Power Point Presentation 25.4 MB
Download
大数据与城市规划 第三讲.pdf
Adobe Acrobat Document 24.3 MB

数据

第一个版本的数据将发在微信群里(建筑物数据还有点位置偏差,我会后续纠正,更新到第二个版本的数据中;我会继续找有微博内容的位置微博数据,目前的只有经纬度)

 

OldBJ.mdb是主要的空间数据库,包括边界和单元、形态、功能、活动等;

旧城影像.rar是2000、2005和2010的影像图(可以与空间数据坐标匹配,在ArcGIS中打开)

 

数据请联系课代表获得:许宁婧,15620093320,tranquility1017@163.com

 

Download
字段说明.docx
Microsoft Word Document 16.3 KB

课外阅读

Download
本科生城乡社会综合调研课的作业的报告(4个人一组)
东四历史街区街道界面及商业化发展调研REPORT.pdf
Adobe Acrobat Document 4.7 MB
Download
本科生城乡社会综合调研课的作业的幻灯片(4个人一组)
东四历史街区街道界面及商业化发展调研PPT.pdf
Adobe Acrobat Document 3.9 MB
Download
西安建筑科技大学郑晓伟老师的课件(结构化网页抓取,以点评数据抓取、预处理和分析为例)
城市规划与研究中的开放数据(大数据)获取方法及应用分析技术.pptx
Microsoft Power Point Presentation 9.8 MB
Download
西安建筑科技大学郑晓伟老师的课件(利用API抓取)
API与LBS类型数据的获取方法以及城市规划与研究中的应用.pptx
Microsoft Power Point Presentation 7.7 MB

参考资料

Download
关于利用自然语言处理NLP的API计算微博情感的一个ppt
心情地图.pptx
Microsoft Power Point Presentation 382.1 KB

关于火车头采集器的教程:

 

在线视频教程:http://www.seowhy.com/course/31

官方论坛:http://bbs.locoy.com/plugin.php?id=comeing_guide

 

第一/二讲 大数据与城市规划概论、大数据在城市规划中应用的研究进展

上课时间:2016年9月23日(周五)上午8点

 

第一二讲因为中秋节放掉了一次,整合为一次课。

 

除了课件,我放了三个课外阅读材料,第一个是关于城市模型及其受到大数据的影响的介绍,第二个是我对大数据用于城市规划的看法,最后一个是关于大数据对城市研究影响的四个变革。

 

课件

Download
大数据与城市规划 第一、二讲.pdf
Adobe Acrobat Document 11.3 MB

课外阅读

Download
城市模型的一个综述,也介绍了大数据时代对城市模型发展的影响
刘伦等 2014 城市规划_城市模型综述.pdf
Adobe Acrobat Document 4.0 MB
Download
对大数据的初步认识
龙瀛 2015 城市规划学刊_大数据与城市规划笔谈会.pdf
Adobe Acrobat Document 275.4 KB
Download
大数据时代城市研究受到的四方面变革,包括空间、时间、粒度和方法。
龙瀛和刘伦 2015 国际城市规划_四个变革.pdf
Adobe Acrobat Document 2.7 MB

致各位同学

各位同学,新的学期开始了。欢迎各位选我的研究生课程《大数据与城市规划》,这是我来高校后上的第一门系统的理论课(春季和夏季学期的都是设计课),我也很期待在这个学期将我在这一领域的近年来的探索和了解到的这个领域的进展与各位分享。

 

期待这一学期能够与大家共同探索新数据环境下特别是基于大数据和开放数据的量化城市研究。本次课程不会完全侧重规划设计领域,我们会更加强调利用科学的研究方法来认识城市和改变城市。也不会完全关注具体的技术问题,同时还会关注如何理解我们的城市,如城市的开发、形态、功能/密度、活动和活力,以及我们目前最前沿的一些探索,如人本尺度城市形态、街道城市主义、图片城市主义等。我的观点是,想法总是最重要的,另一个观点是,有规划设计背景的同学,在量化城市研究方向相对更有优势。

 

第一周因为中秋节放假,所以我们的第一次课安排在9月23日周五上午八点在建馆南115。如果之前有时间,欢迎关注北京城市实验室的公众号(beijingcitylab)、访问北京城市实验室的网站(www.beijingcitylab.com)。我的个人详细信息在:http://www.beijingcitylab.com/longy,欢迎了解,我也欢迎各位有问题及时与我联系,邮箱 ylong@tsinghua.edu.cn,手机13661386623(也是个人微信号)。

 

我预计,各位能够在这个学期的《大数据与城市规划》的课程学习中得到如下收获:

(1)我提供的案例城市的完整数据

(2)基本的数据抓取、分析挖掘和可视化的方法

(3)利用数据和先锋技术手段来认识城市和规划设计城市的思维方式

(4)通过小组合作提高团队协作能力,并期待你们的课程作业最后都能够发表(我在组织若干个期刊的专刊special issue,会优先考虑优秀的课程作业)

(5)通过与我建立联系,提供你们关注的博士/硕士研究论文的指导(我随时都是欢迎各位有问题积极和我讨论,也希望我的一些想法能够帮助你们)

 

最后,祝你们这个学期有一个好的开始!

 

龙瀛,即日

课程总体安排

城市大数据对物质空间和社会空间进行了深入的刻画,为客观认识城市系统并总结其发展规律提供了重要机遇,也是城市规划和城市研究的重要支撑。本课程将结合中国城市规划特点以及技术发展特点进行讲授,秉承技术方法与规划设计并重的原则,既侧重大数据技术方法的讲解,又重视规划设计领域的应用。主要涵盖大数据概述、数据获取、数据统计和分析、数据可视化、各个规划类型的大数据应用,以及最新前沿介绍等内容。

•选课对象:城乡规划、建筑学、风景园林、人文地理、地理信息系统、城市经济、城市社会、计算机、公共管理等专业的研究生

•考察方式:中期作业(30分)+出勤(30分)+大作业(40分),大作业3~4人一组

 

答疑时间:每节课后,上午10-12点,建筑学院新楼501办公室。

 

授课计划

1.大数据与城市规划概论(整合进9月23日)

2.大数据在城市规划中应用的研究进展(9月23日)

3.城市大数据的获取(9月30日)

4.城市大数据的统计与分析

5.城市大数据的可视化

6.城市大数据挖掘:空间句法

7.城市大数据挖掘:城市网络分析

8.学生作业中期汇报与点评

9.大数据与城市规划的结合

10. 数据增强设计

11. 战略及总体规划中的大数据应用

12. 控制性详细规划中的大数据应用

13. 城市设计中的大数据应用

14. 参与式规划中的大数据应用

15. 大模型:新数据环境下的城市研究新方法

16. 学生作业终期汇报与点评