1. 项目缘起一份地铁数据能做什么最近在做一个城市通勤效率分析的小项目需要用到全国主要城市的地铁站点坐标和线路信息。我本以为这是个简单的需求上网一搜“地铁数据”结果发现情况远比想象中复杂。要么是数据陈旧停留在2020年甚至更早要么是格式混乱一个城市一个样有的用CSV有的用JSON经纬度坐标系还不统一更头疼的是很多所谓“开源”的数据集实际上是从某些地图服务商的API里爬取的不仅存在法律风险数据的完整性和准确性也存疑。折腾了好几天项目进度卡在数据准备阶段这让我下定决心自己动手整理一份靠谱的、更新及时的全国地铁数据。这份“全国各大城市地铁站数据更新至2023-05”就是这次折腾的成果。它不仅仅是一个简单的站点列表而是包含了城市、线路名称、站点名称、经纬度坐标GCJ-02坐标系、站点序号等关键字段的结构化数据。对于数据分析师、城市规划爱好者、交通研究者或者是想开发一款通勤类App的开发者来说这样一份干净、统一、可追溯的数据能省去大量数据清洗和校验的时间让你直接进入核心的分析或开发环节。接下来我就详细拆解这份数据的来龙去脉、处理过程中的关键决策以及如何在实际项目中应用它。2. 数据采集源头、方法与合法性边界数据质量的核心在于源头。为了保证数据的权威性和准确性我放弃了从商业地图API或第三方聚合网站抓取的想法而是将目光投向了各城市地铁运营公司的官方发布渠道。2.1 官方数据源的识别与抓取策略我主要依赖两类官方数据源一是各城市轨道交通集团官方网站的“线路查询”或“车站信息”页面二是政府数据开放平台例如“北京市政务数据资源网”、“上海市公共数据开放平台”等。这些平台通常会以标准格式如JSON、XML提供包括站点坐标、线路走向在内的静态数据更新相对及时且具有官方背书。采集工具上我选择了Python的requests库配合BeautifulSoup进行网页解析。对于结构清晰的HTML页面编写定向的解析脚本即可。例如某个城市地铁官网的站点列表页其HTML结构通常是规整的ul和li标签嵌套很容易定位到站点名称。关键挑战在于获取经纬度坐标。很多官网并不直接显示坐标但会嵌入一个在线地图如高德、百度地图来展示站点位置。这里就用到了一个技巧通过浏览器的开发者工具F12监控网络请求。当地图加载或点击站点时浏览器会向地图服务商的接口发送请求这个请求的URL参数或返回的JSON数据中往往就包含了精确的经纬度坐标。我的脚本就是模拟这一过程通过解析这些网络请求来提取坐标。必须强调的是这个过程仅用于获取公开显示的数据且严格控制请求频率避免对目标服务器造成压力这是数据采集者的基本素养。2.2 坐标系的选择与统一为什么是GCJ-02从不同渠道获取的坐标可能基于不同的坐标系最常见的有WGS-84GPS标准、GCJ-02中国官方加密坐标系、BD-09百度坐标系。如果混用会导致地图上的点位漂移几百米甚至上千米。我最终选择将所有坐标统一转换为GCJ-02坐标系。这是基于以下考虑应用场景适配在国内主流的地图应用开发中高德地图、腾讯地图的底层坐标均为GCJ-02。使用这个坐标系数据可以无缝对接到这些平台进行可视化或路径规划。数据源倾向许多官方数据源或基于其的地图服务输出的坐标本身就是GCJ-02。统一至此可以减少不必要的转换次数降低误差累积。转换可行性从WGS-84到GCJ-02的加密算法是公开的虽然逆向解密不鼓励有成熟的开源库如Python的coordtransform可以完成批量转换。而从GCJ-02到BD-09的转换也是确定的。注意坐标转换会引入微小误差但对于地铁站点定位通常精度在10-50米级别而言这个误差在可接受范围内。关键在于整个数据集保持坐标系一致。2.3 数据清洗与结构化从原始信息到可用字段原始抓取下来的数据是杂乱无章的文本。清洗和结构化是赋予数据价值的关键一步。我使用pandas库在Python中完成了主要工作。核心清洗步骤包括去重与纠错合并因不同名称如“火车站”与“XX站”指向同一站点的记录。对照官方线路图人工校验站点顺序和名称的正确性特别是对于新开通的线路和站点。字段标准化建立统一的数据结构。最终确定的字段如下city_name城市中文名如“北京市”。line_name地铁线路名称如“1号线”、“大兴机场线”。station_name站点名称如“西单”、“虹桥2号航站楼”。longitude经度GCJ-02坐标系。latitude纬度GCJ-02坐标系。sequence该站点在线路上的序号从1开始计数用于判断方向和相邻关系。异常值处理检查经纬度坐标是否存在明显异常如超出城市边界、落在水域中央。对于个别无法通过脚本获取或明显错误的数据采用交叉验证法对比多个官方或权威地图服务上的位置取最集中的点位必要时进行手工修正。这个过程耗时最长需要极大的耐心和细心。一个城市的线路图可能要反复核对好几遍。但正是这份笨功夫保证了最终数据集的可靠性。3. 数据集详解内容、边界与文件格式截至2023年5月这份数据集覆盖了国内所有已开通地铁运营的40余座城市包括北京、上海、广州、深圳等一线城市以及成都、杭州、武汉、南京等新一线城市也涵盖了徐州、绍兴、洛阳等二三线城市的地铁系统。3.1 数据内容与统计概览数据集以城市为单位组织。每个城市一个独立的CSV文件文件名即为城市名如beijing.csv。打开任意一个文件你会看到类似下面的数据片段以北京地铁部分数据为例city_nameline_namestation_namelongitudelatitudesequence北京市1号线苹果园116.17752839.9261791北京市1号线古城116.18414939.9145742北京市1号线八角游乐园116.20980539.9072453..................北京市大兴机场线草桥116.35208939.8517891北京市大兴机场线大兴新城116.41081239.6853712北京市大兴机场线大兴机场116.41022939.5115173数据统计全部数据合并后总计包含超过5000个地铁站点涉及超过200条地铁线路。数据量足以支撑宏观的城市群分析也能满足对单一城市的深度挖掘。3.2 数据边界与局限性说明没有任何数据集是完美的明确边界能帮助你更好地使用它。时间边界“更新至2023-05”意味着数据集包含了截至2023年5月已开通运营的线路和站点。2023年5月之后新开通的线路例如北京地铁17号线北段、上海地铁18号线二期等不在本次数据范围内。空间边界仅包含地铁系统含地铁、轻轨、有轨电车等城市轨道交通制式。市域铁路、城际铁路如未纳入地铁运营体系如上海的“金山铁路”则未包含在内。属性边界数据集聚焦于空间位置和拓扑关系站点、线路、顺序。不包含以下信息站点出入口位置、换乘通道距离。首末班车时间、发车间隔。站点周边POI商业、住宅。线路建设年份、造价等非空间属性。提示这些附加信息可以通过其他开放数据源如POI数据、公交时刻表与本数据集进行关联分析从而衍生出更丰富的应用。3.3 文件格式与使用建议选择CSV格式是出于最大程度的兼容性。几乎任何数据分析工具Excel, Python pandas, R, SQL数据库都能轻松读取CSV文件。使用建议编码文件使用UTF-8编码保存避免中文乱码问题。读取在Python中使用pandas.read_csv(‘city_name.csv’)即可加载。合并如果需要全国数据可以遍历所有城市文件用pandas.concat()进行合并。可视化将longitude和latitude字段直接作为x, y坐标即可在地图库如Python的folium,kepler.gl或JavaScript的Leaflet中绘制出地铁网络图。4. 实战应用从数据到洞察的四个场景有了干净的数据我们就可以玩出很多花样了。下面分享几个我实际尝试过的应用场景并附上关键代码思路。4.1 场景一城市地铁网络拓扑结构分析地铁网络本质是一个图Graph站点是节点Node相邻站点间的连接是边Edge。利用networkx这样的图分析库我们可以计算许多有价值的指标。核心分析指标与实现度中心性Degree Centrality一个站点的连接数即经过的线路数。换乘站的度中心性最高。这能帮你快速识别城市的核心枢纽。import networkx as nx import pandas as pd # 假设df是某个城市的数据 G nx.Graph() # 添加节点站点 for station in df[‘station_name’].unique(): G.add_node(station) # 添加边同一线路上相邻站点 for line in df[‘line_name’].unique(): line_df df[df[‘line_name’] line].sort_values(‘sequence’) for i in range(len(line_df)-1): G.add_edge(line_df.iloc[i][‘station_name’], line_df.iloc[i1][‘station_name’]) # 计算度中心性 degree_centrality nx.degree_centrality(G) # 找出度最高的前5个站点通常是换乘站 top_hubs sorted(degree_centrality.items(), keylambda x: x[1], reverseTrue)[:5]平均路径长度与聚类系数衡量网络的“紧密”程度。平均路径长度短说明从任意一站到另一站平均需要经过的站点数少网络效率高。聚类系数高说明站点之间容易形成小团体比如某片区域站点密集连接。对比不同城市这些指标能看出其地铁网络规划风格的差异是放射状、网格状还是环状混合。4.2 场景二基于空间距离的站点服务范围模拟一个站点的服务能力并非局限于其出入口而是覆盖周边一定步行距离如800米的区域。我们可以用缓冲区分析来模拟这个服务范围。使用GeoPandas进行空间分析import geopandas as gpd from shapely.geometry import Point import matplotlib.pyplot as plt # 将DataFrame转换为GeoDataFrame geometry [Point(xy) for xy in zip(df[‘longitude’], df[‘latitude’])] gdf gpd.GeoDataFrame(df, geometrygeometry, crs‘EPSG:4326’) # WGS84 # 转换为投影坐标系如UTM以便进行米制距离计算 gdf_projected gdf.to_crs(‘EPSG:32650’) # 以北京所在的UTM 50N为例 # 创建800米缓冲区 gdf_projected[‘buffer’] gdf_projected.geometry.buffer(800) # 800米 # 可视化 fig, ax plt.subplots(figsize(10, 10)) gdf_projected.buffer.plot(axax, alpha0.3, color‘blue’) # 服务范围 gdf_projected.plot(axax, color‘red’, markersize5) # 站点通过叠加城市行政区划或人口热力图可以进一步分析地铁服务对人口、就业的覆盖情况识别轨道交通的“盲区”。4.3 场景三地铁房价值分析的简单模型虽然房价受多重因素影响但距地铁站的距离无疑是一个强相关因子。我们可以用这份数据快速计算房产或小区到最近地铁站的距离。计算最近地铁站距离from scipy.spatial import cKDTree import numpy as np # 假设property_df是包含房产经纬度的DataFrame # 提取地铁站坐标数组 station_coords np.array(list(zip(df[‘longitude’], df[‘latitude’]))) # 构建地铁站坐标的KD-Tree快速最近邻查询 tree cKDTree(station_coords) # 房产坐标 property_coords np.array(list(zip(property_df[‘lng’], property_df[‘lat’]))) # 查询每个房产到最近地铁站的距离返回距离和索引 distances, indices tree.query(property_coords, k1) # k1找最近的一个 # distances即为直线距离度可近似转换为米1度约111公里 property_df[‘distance_to_nearest_subway_km’] distances * 111将这个距离字段加入房价回归模型你会发现它通常是一个显著的负向预测因子。当然更精细的模型还需要考虑步行路径距离、换乘便利性等。4.4 场景四城市间地铁网络发展对比可视化将多个城市的数据放在同一张地图上可以直观对比不同城市地铁网络的密度、形态和规模。使用Folium制作交互式对比地图import folium # 创建底图中心点设在中国中部 m folium.Map(location[35, 105], zoom_start4) # 为不同城市定义不同颜色 city_colors {‘北京市’: ‘red’, ‘上海市’: ‘blue’, ‘广州市’: ‘green’, ‘深圳市’: ‘purple’} for city, color in city_colors.items(): city_df df[df[‘city_name’] city] # 为每条线路添加PolyLine for line in city_df[‘line_name’].unique(): line_df city_df[city_df[‘line_name’] line].sort_values(‘sequence’) locations line_df[[‘latitude’, ‘longitude’]].values.tolist() folium.PolyLine(locations, colorcolor, weight2.5, opacity0.7, popupf‘{city} - {line}’).add_to(m) # 保存为HTML文件 m.save(‘subway_network_comparison.html’)生成的HTML文件可以在浏览器中打开你可以缩放、点击查看线路信息非常直观地看到北上广深地铁网络在形态上的差异北京环形放射、上海密集网格、广州十字骨架等。5. 数据维护、扩展与协作建议静态数据会过时而城市地铁每天都在生长。如何让这份数据保持活力5.1 数据更新机制我建立了一个半自动化的更新流程监控源订阅各城市地铁官方公众号、新闻关注“开通试运营”等关键词。同时定期如每季度扫描一次政府数据开放平台。增量更新当发现新线路开通信息后手动执行一次针对该城市的采集脚本。脚本被设计为“增量模式”即只抓取和合并新数据不会覆盖已验证的旧数据。版本管理使用Git进行版本控制。每次更新提交一个新的版本标签如v2023-11并在README.md中清晰记录更新日志更新日期、新增城市、新增线路。这样使用者可以根据需要获取特定时间点的数据快照。5.2 数据质量校验清单在每次更新或使用前建议运行一个简单的校验脚本检查以下常见问题坐标漂移随机抽样部分站点将其坐标在高德/腾讯地图开放平台提供坐标转换和展示API上显示肉眼核对位置是否准确。拓扑错误检查每条线路的站点sequence是否连续是否有重复或缺失。命名一致性检查同一站点在不同线路中名称是否一致特别是换乘站。字段完整性检查是否有任何一条记录的必填字段城市、线路、站点、坐标为空。5.3 向社区开放与协作我将这份数据集托管在了GitHub上并采用了CC BY 4.0知识共享署名协议。这意味着任何人都可以自由地使用、分享甚至基于它进行创作只需注明原始来源。我期待的协作方式Issue反馈如果你在使用中发现任何错误站点缺失、坐标不准、线路错误欢迎在GitHub仓库提交Issue附上官方来源链接我会尽快核实并修复。Pull Request如果你自己补充了某个城市的新线路数据或者增加了新的字段如车站编号、站台形式非常鼓励你发起Pull Request。这是让数据集共同进化的最佳途径。应用案例分享如果你用这份数据做出了有趣的分析或应用也欢迎在讨论区分享。你的用例可能会启发其他人甚至推动数据集增加新的维度。整理数据的过程就像是在绘制一幅动态的城市脉络图。最初只是为了解决自己的问题但看到这份数据能被用于学术研究、商业分析甚至公益项目时觉得所有的繁琐工作都是值得的。数据本身是冰冷的坐标点但当它与人的活动、城市的生长结合在一起时就产生了温度和价值。希望这份持续更新的地铁数据能成为你探索城市、构建应用的一块可靠基石。如果在使用中遇到任何问题或者有好的想法随时可以交流。