OpenStreetMap案例研究

区域

中国北京
地图数据文件下载链接
选择原因：北京是中国首都，地图编辑者多，地图数据信息较为详细。

审查数据发现问题

• 部分道路（highway）的英文名（name:en）不规范。
  例如：
  jie（街）、Str 应改为 Street
  lu（路）、Rd. 应改为 Road
  Hutong（胡同） 应改为 Alley等。
  注：只修改英文名（name:en），不修改国际名（int_name），因为数据文件中国际名普遍为jie（街），lu（路）的形式。

修正道路（highway）的英文名(name:en)

用Python构造一个修正函数：
def update_name(name, mapping): wrong_name_list = mapping.keys() for wrong_name in wrong_name_list: if name.endswith(wrong_name): name = name.replace(wrong_name,mapping[wrong_name]) return name
mapping = {"jie":"Street","Jie":"Street",'JIE':"Street","St": "Street", "St.": "Street", "Str":"Street",'Hwy':'Highway', "Ave": "Avenue", "lu":"Road","Lu":"Road","Rd.": "Road","road":"Road", "hutong":"Alley","Hutong":"Alley","xiang":"Alley","Xiang":"Alley"}
完整代码见文件clean_shape_convert.py

数据集概述

注：数据库软件为MySQL而非sqlite.

文件大小

beijing_china.osm ......... 182 MB
beijing_db.sql .......... 122 MB
nodes.csv ............. 68.9 MB
nodes_tags.csv ........ 3.06 MB
ways.csv .............. 7.36 MB
ways_tags.csv ......... 8.5 MB
ways_nodes.cv ......... 24.6 MB

nodes数量

SELECT count(*)
FROM nodes;

863664

ways数量

SELECT count(*)
FROM ways;

128218

unique users数量

SELECT count(distinct subq.uid)
FROM (SELECT uid FROM nodes UNION ALL SELECT uid FROM ways) as subq;

1846

有highway标签的ways数量

SELECT count(*)
FROM ways_tags
WHERE key = 'highway';

64186

有highway标签且有英文名（name:en）的ways数量

SELECT count(distinct subq.id)
FROM ways_tags JOIN (
SELECT id
FROM ways_tags
WHERE key = 'highway') as subq
ON ways_tags.id = subq.id
WHERE ways_tags.key = 'en' and ways_tags.type = 'name';

4152

关于数据集的其他探索和想法

道路（highway）的各种别名的数量

SELECT ways_tags.key, count(distinct subq.id) as count
FROM ways_tags JOIN (
SELECT id
FROM ways_tags
WHERE key = 'highway') as subq
ON ways_tags.id = subq.id
WHERE ways_tags.type = 'name'
GROUP BY ways_tags.key
ORDER BY count DESC
LIMIT 5;

查询结果：

en, 4152
zh, 949
zh_pinyin, 896
fr, 353
de, 71

可以看到，在道路的各种别名中：
道路的英文名（en）数量最多，但也仅占总数的6.5%，有些道路有英文名甚至汉语拼音、法文名等，但有些道路完全没有别名，道路别名设计比较混乱。

额外的想法

在探索数据集的过程中，发现的一个问题是道路或节点的属性值命名比较混乱，缺乏统一的标准，有一些数据未严格按道路命名的中文标准（链接：Zh-hans:Map Features）进行命名，以至于出现很多诸如expressway等不规范的命名，建议在地图编辑器中添加一个功能，时刻提醒编辑者或贡献者们在编辑地图时注意命名标准，这样在之后别人进行数据分析时会方便很多。