Выгрузки на Рамблере

Ezhick · 2011-09-01T08:51:02.000Z

В тестовом режиме на Рамблере выгружается нарезка данных осм по всему миру. Да-да, вы не ослышались, весь мир

Нарезка ведется по границам стран, для тех стран, где нет замкнутой границы, берется ббокс, охватывающий имеющуюся часть границы+запас в 0.2 градуса по широте и долготе. Надеюсь .обрезанных стран не получится.

Все это безобразие доступно вот тут:
http://routing.osm.rambler.ru/extracts/world.php

Пока там не все выгрузилось, так что ждем. России в этой выгрузке не будет, она будет делаться отдельно.

Актуальность данных - 30-08-2011 12-00 UTC. Данные планируется обновлять по запросу, отработана (надеюсь…) технология отдельного обновления любой страны или целого региона - выгружать постоянно все не справится даже рамблеровский сервер. Процедуру запроса планирую автоматизировать, правда пока не знаю как защититься от фейковых запросов.

Делать конвертацию в иные форматы пока не планирую - опять же на это просто мощностей не хватит. Разве что в osm-xml выгружать, если это кому-то надо.

Одним словом - вэлкам тестировать

Fortress · 2011-09-01T09:19:28.000Z

Ezhick:

Процедуру запроса планирую автоматизировать, правда пока не знаю как защититься от фейковых запросов

По email с выдачей кода и ввода его на сайте.

Ezhick · 2011-09-01T09:58:13.000Z

Fortress:

Ezhick:

Процедуру запроса планирую автоматизировать, правда пока не знаю как защититься от фейковых запросов

По email с выдачей кода и ввода его на сайте.

Кстати да, можно так.

vozd · 2011-09-16T04:38:07.000Z

ребят, я поставил себе карту испании (нужен был тенериф) все работает. но нету номеров домов, это так и должно быть? и еще где бы взять пои на этот остров?

tefal · 2011-09-16T05:43:05.000Z

vozd:

ребят, я поставил себе карту испании (нужен был тенериф) все работает. но нету номеров домов, это так и должно быть? и еще где бы взять пои на этот остров?

На этом острове я дома с номерами не нашел

vozd · 2011-09-16T06:07:28.000Z

значит просто нету карты с номерами домов. а интерестно поиск адресный будет работать? и где взять пои? или они уже вшиты в карте?

Ezhick · 2011-09-16T06:27:02.000Z

vozd:

а интерестно поиск адресный будет работать?

будет, но очень плохо и недолго…

vozd:

и где взять пои? или они уже вшиты в карте?

под какую прогу карта-то?

vozd · 2011-09-16T06:44:16.000Z

а. карта под навител.
по поводу адресного поиска не совсем понял.

lvv1960 · 2011-09-16T08:47:21.000Z

На этом Тенерифе увидел 14 автобусных остановок по одной улице через примерно 20 метров. Что бы это могло быть?

http://www.openstreetmap.org/?lat=28.413195&lon=-16.554588&zoom=18&layers=M

OverQuantum · 2011-09-21T16:29:51.000Z

Извините, а где именно сейчас ваши выгрузки РФ по регионам?
По routing.osm.rambler.ru/extracts/ не вижу их…

Ezhick · 2011-09-21T16:52:08.000Z

Ровно сейчас - нигде, к сожалению

Ezhick · 2011-11-10T10:44:11.000Z

Значится так, выгрузки всего мира ожили: http://routing.osm.rambler.ru/extracts/world.php

Ожили слегка иначе, нежели было раньше. Сейчас выгружены страны, обрезанные по ббоксу, охватывающему границу страны + 0.2 градуса буферной зоны. Обрезка выполнена с completeways=yes complerelations=no.

Сегодня-завтра прикручу обновления, пока данные двухнедельной давности. Обновления буду сначала еженедельными, если после запуска нарезок РФ будет понятно, что мощности позволяют - частоту можно увеличить для тех стран, которые будут пользоваться спросом (и уменьшить для тех, которые не будут).

Выгрузка с обрезкой по полигону границы тоже будет, это следующий этап.

Выгрузки РФ запущу, когда окончательно обкатаю технологию на планете. Принцип будет такой же - ббокс РФ+полигон РФ и ббокс региона + полигон региона. Обновление будет на ежедневным, отсечка обновления - на 12-00 Москвы. Вроде как мощности нового сервера на это должно хватить.

Предложения, замечания и багрепорты принимаются.

Zverik · 2011-11-10T10:54:10.000Z

Зачем ббокс?

Ezhick · 2011-11-10T11:09:32.000Z

Zverik:

Зачем ббокс?

В смысле?

Zverik · 2011-11-10T12:05:54.000Z

Если есть (будет) обрезка по полигонам, зачем дополнительно держать и тратить процессорное время на обрезку по ббоксу?

Alexandr_Zeinalov · 2011-11-10T12:22:29.000Z

Вероятно, обрезка по bbox гораздо быстрее, что позволяет сэкономить на дальнейшей обрезке.

Zverik · 2011-11-10T12:28:25.000Z

выгода простоты обрезки нивелируется ключом completeWays=yes, из-за которого осмозис создаёт базу всех объектов в дампе, что куда затратнее, чем выяснение, попадает ли точка в полигон.

Ezhick · 2011-11-10T12:45:34.000Z

Причин для ббокса много:

полигон есть не для всех стран.
Не всегда нужна страна, обрезанная по границе. Например, если едешь в приграничный район в Европе полезно иметь карту чуть шире.
Сборка из двух стран получается лучше, если склеивать два квадрата, а потом обрезать их общим полигоном, нежели склеивать два полигона. Меньше глюков на границах вылазит.

Аналогичная фигня с регионами РФ.

Komяpa · 2011-11-10T12:59:56.000Z

У чудной тулзы pbftoosm есть фича - она может взять .poly и дообрезать дамп прямо при чтении и конвертации в osm xml. Т.е. берется, например, дамп Беларуси и полигон Минска, и запускается в виде

pbftoosm -i=BY.osm.pbf -B=minsk.poly

и получается готовый дамп Минска в выходном потоке.
Примерно для этого же нужны вырезки по bbox

Zverik · 2011-11-10T13:26:58.000Z

но у неё нет фичи completeways. Так-то она работает существенно быстрее osmosis.