Слой погоды для Open Street Map

Vitalts · 2012-06-25T12:54:46.000Z

Ссылку на страницу прогноза погоды для города можно давать вот сюда http://openweathermap.org/city/524901 где 524901 идентификатор города.

Где бы взять идентификатор интересующего города?

dom1n1k · 2012-06-26T19:16:25.000Z

Dennsy:

1 - Прогноз погоды, отдельная большая и очень интересная тема. Собственно это одна из причин, почему мы это затеяли. Брать чужой не хочется. Чужой прогноз связывает нас лицензионными ограничениями. Совсем свободных проектов я не встречал. Мы считаем сейчас прогноз погоды, но пока это все достаточно сыро и требует отладки и проверки. Выдавать в паблик такой продукт мы не готовы. Но прогноз будет обязательно! Всем кому эта тема интересна можно обсудить ее отдельно.

А по какой модели считаете? Вероятно WRF, она единственная опенсорсная из известных мне.
Вообще, оно конечно интересно, не спорю. Но имхо дело это малоподъемное для частников - если нужен именно практический продукт, а не игрушка.

какую область обсчитываете, какой шаг сетки?
с каких данных модель стартует?
какие граничные условия?
как вы думаете проводить настройку модели и валидацию результатов?
Всё это очень непросто…

Dennsy · 2012-07-03T17:02:10.000Z

Vitalts:

Ссылку на страницу прогноза погоды для города можно давать вот сюда http://openweathermap.org/city/524901 где 524901 идентификатор города.

Где бы взять идентификатор интересующего города?

Поиска пока нет. Самый простой способ - найти интересующий город на карте, кликнуть на нем и списать ID из URL.
Вообще то эти ID совпадают с geoname id . Так исторически сложилось.

А по какой модели считаете?

С WRF мы играем. Считам юг от Москвы. Шаг сетки в 10 км , ~ 200 точек * 2.
На вход идет GFS и наши данные. Результат… гм. скажем так не очевидный. WRF это такой конструктор забавный с десятком различных под моделей для каждой составляющей модели. Очевидно, что бы рассчитывать по ней сколько либо значительную территорию необходимы значительные вычислительные ресурсы. Не то чтобы совсем уж невероятно большие если судить по количеству процессоров, но проблема тут в другом - в fortran + MPI предъявляет очень высокие требования к скорости обмена данными между вычислительными ядрами. Эта архитектура принципиально не масштабируется дешевым железом. Грубо говоря нельзя запустить эту задачку на 1000 персоналках. А хочется!
Досточно посмотреть какой прорыв сейчас происходит в области биг дейта. Вот кудато туда мы пытаемся двигаться.

Vitalts · 2012-07-03T17:13:10.000Z

Поиска пока нет. Самый простой способ - найти интересующий город на карте, кликнуть на нем и списать ID из URL.
Вообще то эти ID совпадают с geoname id . Так исторически сложилось.

На поиск и не рассчитывал. Спасибо, нашел интересующий город. Понаблюдаю за прогнозом

dom1n1k · 2012-07-03T17:22:26.000Z

Dennsy:

WRF это такой конструктор забавный с десятком различных под моделей для каждой составляющей модели.

Вот-вот, и я про это. Классический опен-сорс: огромный конструктор, где куча всего, а продукта нет.
Даже если оставить за кадром вопрос вычислительных ресурсов - как заставить этот зоопарк давать действительно адекватный прогноз, а не просто какую-то отстраненную цифирь? Как эти подмодели скомбинировать и настроить? А почему именно так, а не иначе? Ответы все эти вопрос крайне неочевидны.
Поэтому, не в обиду будет сказано, я считаю все прогнозы погоды в руках энтузиастов баловством и не более.

A_G_T · 2012-07-03T21:29:46.000Z

Небольшой офф о погоде и прогнозе.
Случайно увидел в продаже недорогую (1500р) погодную станцию под брендом Vitek (Vitek VT-6400 BK).
Прикупил. Датчики внутри и один беспроводной выносной.
Поставил и стал наблюдать. Делает весьма хороший краткосрочный прогноз. Заявленная вероятность “угадывания” 70% .
Пока ни разу не ошиблась.
Прикупил еще одну. С целью посмотреть внутренности, а потом подарить родственникам.
“Hi-Tech” весьма не самый свежий. Какой МК увидеть не удалось, он с внутренней стороны платы.
(На платах стоит марка HIDEKI.)
Но прогнозирует-то правильно.

dom1n1k · 2012-07-03T21:42:58.000Z

A_G_T:

Делает весьма хороший краткосрочный прогноз. Заявленная вероятность “угадывания” 70%.

Насколько краткосрочный?
Если речь идет о нескольких часах, то оно просто экстраполирует чуть вперед текущую тенденцию. Фактически, то же самое может делать человек в голове, просто тут оно автоматизируется.
Если хотя бы 0,5-1 суток - это именно угадывание, а не прогноз. Первый же резкий фронт это покажет. Невозможно прогнозировать погоду на основе показаний в единственной точке пространства. Как при игре в покер - невозможно достоверно просчитать какая карта придет, но можно играть на вероятностях и статистически быть в плюсе.

usm78-gis · 2012-07-03T21:49:16.000Z

dom1n1k:

Классический опен-сорс: огромный конструктор, где куча всего, а продукта нет.
…
как заставить этот зоопарк давать действительно адекватный прогноз, а не просто какую-то отстраненную цифирь?
…
я считаю все прогнозы погоды в руках энтузиастов баловством и не более.

наука != продукт. Это подход к науке с логикой “сколковского” акционера.
Тот кто работает на ECMWF и метеослужбы,
естественно сильно беспокоятся об источниках финансирования,
и очень любят поливать грязью “конкурентов”,
но их собcтвенные научные достижения очень часто весьма далеки от
энтузиастов в тех же самых университетах.

dom1n1k · 2012-07-03T22:14:31.000Z

usm78-gis:

наука != продукт.

Вот именно. Я не спорю, авторы WRF наверняка очень неглупые люди. Но между научными изысканиями и конкретным прикладным продуктом, пригодным к практическому использованию - огромная путь. Который, увы и ах, под силу пройти только серьезным коллективам специалистов.
Энтузиасту-одиночке невозможно перелопатить весь код системы, разобрать и понять его, оптимизировать все параметры, регулярно проводить валидацию результатов и т.д. При всем к нему (энтузиасту) уважении. Он может только запустить то, что скачал, получить НЕЧТО и сказать “ух ты, а прикольно!”

Конспирологический бред про борьбу за финансирование комментировать не буду.

Dennsy · 2012-07-05T13:58:26.000Z

Про WRF это не просто опенсорсная поделка. На ней считают прогнозы очень серьезные метеорологических организации . Даже наш росгидромед, что то делает.
Настроить ее и правда безумно трудно.
Но суть нашего проекта не в этом чтобы конкурировать с метеослужбами. Суть в том, чтобы предоставить информацию о текущей погоде максимально быстро и в максимально удобном виде. Ну и прогноз также - на совсем небольшой период времени используя практически онлайн данные о текущей погоде. Такой подход не требует решения гигантского количества уравнений описывающих динамику атмосферных явлений. Общие тенденции изменения погоды известны из той же. к примеру модели GFS. Наша задача - корректировать глобальный прогноз учитываю оперативные данные.

По поводу того как маленькая погодная станция угадывает погоду.
Это достаточно старая идея, называется она алгоритм Zambretti
Для прогноза учитывается давление, тренд изменения давления и направление ветра. Он очень неплохо работает в приморских регионах.
К примеру - если ветер дует с моря и давление падает, то будет дождь.
Подробнее можно почитать тут http://www.meteormetrics.com/zambretti.htm

И еще про любителей и их возможности - OSM это хороший пример того, ЧТО могут просто любители!

dom1n1k · 2012-07-05T14:03:50.000Z

Dennsy:

Наша задача - корректировать глобальный прогноз учитываю оперативные данные.

О, а вот это действительно интересно!
А вы как-то проверяете (или планируете проверять), что дает это уточнение?
Может какую-то статистику ведете?

Dennsy · 2012-08-06T17:18:11.000Z

У нас произошел заметный апдейт в сервисе.
Мы начали сотрудничать с Канадской метеослужбой и как следствие появилось много новых слоев данных.
Это осадки, облачность, ветер, влажность и многое другое. Все это рассчитывается на “ацких” суперкомпьютерах в Канаде,
а результат доступен для всех. Все данные можно получить как WMS, или как слой к OpenLayers
Кроме того, есть слой данных метеорадаров, но к сожалению, только для Америки и Канады.

Основные данные можно посмотреть тут
http://openweathermap.org

Дополнительные слои
http://openweathermap.org/wiki/Models/GDPRS

О моделях
http://openweathermap.org/wiki/Models

Ну и собственно наша Wiki
http://openweathermap.org/wiki/Main_Page

всем кому есть что сказать про погоду или увидят ошибки - добро пожаловать в wiki

И еще… на http://openweathermap.org мы используем стандартную карту OSM, но мне кажется, что она не совсем удобна и не соответствует направлению сайта.
Наверное надо карту более серую и с рельефом и детализация вплоть до домов наверное не нужна. Мы готовы поставить mapnik и OSM в postgis, но настройка стилей кажется сложной и непонятной задачей. Может кто либо посоветовать или помочь с этим? И вообще есть ли идеи по тому какой должна быть карта погоды?

PavelRus · 2012-08-06T17:45:04.000Z

Шкала прогноза осадков странная: от 0.1 до 10.0 насыщенность цвета падает, а от 10.0 до 100.0 опять увеличивается. И получается в центре “облака” осадков прозрачный цвет, а по краям темно-синий. По-моему, лучше наоборот.

Dennsy · 2012-09-01T05:26:49.000Z

Всем привет!
У нас случился большой апгрейд API
http://openweathermap.org/wiki/API

Кроме того, для нескольких регионов мира скоро будет доступен прогноз рассчитанный с шагом сетки 2 км!

PavelRus:

Шкала прогноза осадков странная: от 0.1 до 10.0 насыщенность цвета падает, а от 10.0 до 100.0 опять увеличивается. И получается в центре “облака” осадков прозрачный цвет, а по краям темно-синий. По-моему, лучше наоборот.

В общем правильная идея… но есть историческая традиция в этом … не знаю даже может отказаться от нее …

j-wills · 2012-11-09T06:45:58.000Z

А есть где маны как на arduino uno собрать погодную станцию не с ethernet, а с gprs?

ullus · 2012-11-09T08:35:41.000Z

Столкнулся сегодня с прекрасным. В Перово температура приблизилась к абсолютному нулю.
Хорошо-бы чтобы заведомо некорректные значения отбраковывались и не отображались.
http://openstreetmap.ru/#layer=Mw&zoom=15&lat=55.73914&lon=37.7697&marker=1
слой OpenWeatherMap (города)

EyeOnNet · 2013-07-27T17:24:52.000Z

А можно ли сейчас подключить метеостанцию? Что-то сайт барахлит, по ссылке http://openweathermap.org/wiki/API выдает “504 Gateway Time-out”, прочитать по станционный API больше негде. А жаль, данные (температура, влажность, давление) с профессиональной станции Вайсала. Тем более, на сто верст окрест сейчас есть только единственная станция в openweathermap для моей локации!

Probeerka · 2014-08-15T18:47:35.000Z

А никто не в курсе, почему исчезли показания любительских температурных датчиков (DS1820)? Сейчас на карте видны только показания метеостанций.
Область с термометром
Сам термометр

freeExec · 2014-08-16T05:40:15.000Z

Может его посчитали глючным или почему там ночью 16 градусов, а днём ад в 58?

Probeerka · 2014-08-16T14:29:14.000Z

freeExec:

Может его посчитали глючным или почему там ночью 16 градусов, а днём ад в 58?

Возможно, хотя ранее модерации данных не было. Но других самодельных термометров на карте России я также не нашел, только данные с метеостанций населенных пунктов и аэропортов.