Данные OpenStreetMap в форматах XML и PBF

2014-02-05T14:06:20Z

Agsh: /* Детали */

{{Статья|Опубликована|../projects/osm_dump/index}}
{{Аннотация|В рамках этого проекта генерируется автоматически обновляемые выгрузки данных OpenStreetMap на территорию бывшего СССР в форматах XML и PBF.}}

Ежедневно обновляемые выгрузки в формат ESRI Shape можно найти [http://gis-lab.info/qa/osmshp.html здесь].

== Покрытие ==
На данный момент покрытие включает следующие страны: Армения, Азербайджан, Беларусь, Грузия, Киргизия, Казахстан, Литва, Латвия, Молдавия, Россия, Таджикистан, Туркмения, Украина, Узбекистан, Эстония.

Все страны в виде одного файла доступны в файлах с именем local.

Альтернативные источники дампов стран: [http://download.geofabrik.de/osm/ GeoFabrik], [http://downloads.cloudmade.com/ CloudMade]. Отличаются от представленных здесь более редким (еженедельным) обновлением, отсутствием режима completeWays=yes, а также не всегда подходящими poly-файлами.

== Детали ==
Обрезка стран и регионов осуществляется с опцией completeWays=yes.

В качестве промежуточного формата используется [http://wiki.openstreetmap.org/wiki/Pbf osm.pbf], что, по предварительным оценкам, позволяет ускорить процесс генерации дампов более чем в два раза. Файлы в формате [http://wiki.openstreetmap.org/wiki/XML osm.bz2], получаются конвертацией из osm.pbf.

Для каждого файла дампа доступен файл, в котором содержится информация о версии данных, вида [имя_файла].meta. Это позволяет понять, какую версию данных содержит тот или иной файл. Например: чтобы понять какую версию данных содержит файл [http://data.gis-lab.info/osm_dump/dump/latest/local.osm.pbf dump/latest/local.osm.pbf] достаточно посмотреть файл [http://data.gis-lab.info/osm_dump/dump/latest/local.osm.pbf.meta dump/latest/local.osm.pbf.meta].

== Лицензия ==
До 12 сентября 2012 года данные OpenStreetMap распространялись по лицензии [http://creativecommons.org/licenses/by-sa/2.0/legalcode CC-BY-SA версии 2.0], это лицензия так же применима к данным опубликованным здесь, если версия данных меньше или равна 2012-09-12 00:00:00 UTC. После 12 сентября 2012 года, данные публикуются под лицензией [http://www.opendatacommons.org/licenses/odbl ODBL]. Подробнее о ваших правах и обязанностях можно почитать в [http://wiki.openstreetmap.org/wiki/Legal_FAQ Legal FAQ].

== Обновление ==
Данные обновляются ежедневно. Обновление начинается в 06:30 по Москве. К 07:00-07:15 появляется свежий local.osm.pbf и соответствующий файл обновления к нему. К 07:45-08:00 появляются свежие версии стран и регионов формате osm.pbf и файлы обновления к ним. Затем начинается конвертация дампов из формата osm.pbf в osm.bz2, которая занимает несколько часов. Текущее состояние и результат последнего обновления можно посмотреть [http://data.gis-lab.info/osm_dump/state/daily-state.txt тут].

== Данные ==
{{#widget:Iframe
|url=http://be.gis-lab.info/project/osm_dump/iframe.php
|width=100%
|height=400
|border=0
}}

Все свежие версии: http://data.gis-lab.info/osm_dump/dump/latest/ <br/>
Все обновления: http://data.gis-lab.info/osm_dump/diff/ <br/>
Poly-файлы: http://data.gis-lab.info/osm_dump/poly/

== Процесс ==
Ниже приведено приблизительное описание того, как это работает на примере стран. Описание несколько упрощенное, однако в таком виде несколько проще понять суть происходящего:

Первоначально:
# Из дампа planet вырезается все необходимое покрытие (local).
# Из local вырезаются все необходимые страны.

Ежедневно:
# Дамп local обновляется ежедневными diff-файлами, затем повторно обрезаeтся.
# Из предыдущей и текущей версии local создается отдельный diff-файл.
# Страны, для которых существует предыдущая версия, обновляются diff-файлом, полученным в п.2, и обрезаются в соответствии с poly-файлом страны/региона.
# Страны, для которых не существует предыдущей версии, вырезаются из local при помощи соответствующего poly-файла.

В качестве промежуточного формата используется osm.pbf, который затем конвертируется в osm.bz2.

GIS-Lab - Вклад [ru]

Данные OpenStreetMap в форматах XML и PBF