Comments 103
Зашел я как-то в магазин, пока закупался — пошел дождь. Ради интереса запустил Яндекс.Погода и радостно узрел, что дождя в моей локации не будет еще пол часа.
UFO just landed and posted this here
У наших зарубежных товарищей есть такой сервис https://en.ilmatieteenlaitos.fi/precipitation-in-finland (не рекламы ради). Он умеет показывать движение дождевых облаков с точностью до 15минут. А еще — умеет строить «предсказание» движения дождевых облаков на некоторое время вперед.
Но нам он был бы мало интересен, если бы не одно но: часть радара захватывает территорию Санкт-Петербурга.
А как мы знаем, дожди в Санкт-Петербурге не редкость.
И самое интересное, что данные с этого сайта — более объективны, чем с яндекса.
Но нам он был бы мало интересен, если бы не одно но: часть радара захватывает территорию Санкт-Петербурга.
А как мы знаем, дожди в Санкт-Петербурге не редкость.
И самое интересное, что данные с этого сайта — более объективны, чем с яндекса.
По Ленинградской области достаточно хорошо показывает вот тут http://www.nepogoda.ru/
Уж точно точнее яндекса.
А объективность на чем основана — есть проделанный анализ?
Нам важны репорты о том, что мы ошибаемся. Пожалуйста пишите, в приложении специальный интерфейс есть. И самое важное, как проверяется, что данные объективно лучше?
И что вы с этими репортами делать будете? Реальное улучшение результата возможно только при повышении качества (детализации) входных данных, а с методом вы можете играть до бесконечности без всякого смысла.
Объективно данные лучше тем, что если приведенный мной радар показывает дождевую тучу, которая приближается — будет дождь. Если он показывает что туча уходит в сторону — дождя не будет.
В яндексе же уже пару раз попадал на то, что тучу не показывает, а дождь есть и наоборот.
Так же как уже писали выше — яндекс любит править данные задним числом. То есть тучи не было, но вот пошел дождь и тучу тут же нарисовали.
В яндексе же уже пару раз попадал на то, что тучу не показывает, а дождь есть и наоборот.
Так же как уже писали выше — яндекс любит править данные задним числом. То есть тучи не было, но вот пошел дождь и тучу тут же нарисовали.
Знаем мы эти круговые метеорадары 
Судя по всему, у нынешнего варианта алгоритма есть проблема с тем, что к краю покрытия спутника нейросети мерещится дождь из-за кривизны Земли — словно отдельные облака, видимые в перспективе, для алгоритма равняются сплошной облачной завесе и сильным осадкам. Сейчас это, например, сильно заметно на восточном краю покрытия.
На краю действительно искажения больше, но конкретно сейчас там фронт проходит с дождем.
Так, чтобы фронт накрывал на 100 км от Костаная одной ровной полосой?
Не верю, простите.
Не верю, простите.
Не просим принимать на веру. Возьмем данные с метеостанций с независимого сайта. rp5.ru подойдет? Берем снизу: Костанай — rp5.ru/Архив_погоды_в_Костанае — идет дождь. Берем сверху: Сургут — rp5.ru/Архив_погоды_в_Сургуте_(аэропорт) — идет дождь. Есть идеи, как проверить лучше?
«Распределение осадков в зоне фронтов имеет полосную структуру. В пределах одной фронтальной зоны имеется несколько полос, вытянутых вдоль фронта, шириной 30-70 км и длиной в несколько сотен км. В них осадки более интенсивны, в то время как между полосами располагаются зоны шириной 60-120 км, в которых интенсивность осадков незначительна или вообще отсутствует.» (Вельтищев, Степаненко, Мезометеорологические процессы, 2007)
Масштаб по длине — сотни км, все сходится.
Масштаб по длине — сотни км, все сходится.
Переводя с наукообразно-прессрелизного языка на человеческий, все это означает довольно простую вещь: в Яндексе продолжают дорисовывать недостающие данные «по аналогии», ровно также, как происходит с пробками или положением общественного транспорта. Для обеспечения заявленной детализации достоверно, плотность сети измерений должна быть на пару порядков выше (например, как у Норвежского метеорологического института или как у Weather Underground).
А с той плотностью, которая есть, можно успешно рисовать только «мурзилки», очень далекие от правды.
А с той плотностью, которая есть, можно успешно рисовать только «мурзилки», очень далекие от правды.
Да уж. В Яндексе многое «дорисовывают».
Бренд «Weather Underground» принадлежит «Weather.com», и да — там прогнозы точнее, по ним можно часы проверять.
Справедливости ради, покрытие России метеостанциями оставляет желать лучшего, потому прогнозы гораздо менее точны. Но таки да, буржуи предсказывают погоду в России лучше, чем местные спецы. Увы.
Справедливости ради, покрытие России метеостанциями оставляет желать лучшего, потому прогнозы гораздо менее точны. Но таки да, буржуи предсказывают погоду в России лучше, чем местные спецы. Увы.
Но таки да, буржуи предсказывают погоду в России лучше, чем местные спецы. Увы.
Не совсем так, вот есть например независимый ресурс, который сравнивает основных поставщиков, которые согласились передать данные по качеству: meteotrust.com
Я не серфер и не яхтсмен, но перепробовал кучу погодных провайдеров, благо на Андроид это просто. В итоге — фаворитом оказался weather.com. Если утром было написано, что в 16 часов будет гроза, которая прекратится к 18, то так и было. Коллеги сначала меня пытались троллить, но поле нескольких подобных случаев, когда мой прогноз до 15 минут совпадал с реальной погодой — все перешли на этого провайдера. Потому что когда:
— Что вы истерите? По прогнозу эта гроза кончится раньше рабочего дня.И я (то есть прогноз от везер-ком) оказываюсь прав — никакие аргументы типа: «Да у Яндека на сотовых вышках метеодатчики! Да у них такие компьютеры!!» уже никого не убеждали.
— Да что ты гонишь! Посмотри какой ужас творится!!!1111расрас
Не сразу, но нашел статью от Яндекса про то же самое трехлетней давности:
habr.com/company/yandex/blog/271725
habr.com/company/yandex/blog/271725
А с той плотностью, которая есть, можно успешно рисовать только «мурзилки», очень далекие от правды.
Поэтому мы постепенно расширяем наблюдательную сеть, используя в том числе и спутниковые снимки
Давайте вы не будете позориться еще больше, разводя еще более развесистую клюкву, а?
Спутниковые снимки (те, что доступны, а не «в теории») не могут скомпенсировать дрянную плотность наземной сети. Потому что чем лучше разрешение во времени, тем хуже разрешение в пространстве, а некоторые параметры погоды из снимков вообще очень фигово доставать — это для верной интерпретации самих снимков данные о погоде нужны.
Спутниковые снимки (те, что доступны, а не «в теории») не могут скомпенсировать дрянную плотность наземной сети. Потому что чем лучше разрешение во времени, тем хуже разрешение в пространстве, а некоторые параметры погоды из снимков вообще очень фигово доставать — это для верной интерпретации самих снимков данные о погоде нужны.
Увеличение плотности наземной сети — не панацея)
«Для прогноза с мелким шагом порядка 10 км необходимо количество метеорологических станций увеличить примерно в тысячу раз, что нереально с экономической точки зрения. Прогресс возможен лишь при переходе к качественно иным методам измерений.
В ближайшее время растущая точность* спутников, видимо, сравняется с точностью метеозондов, и это изменение количества информации, в свою очередь, существенно повлияет и уже влияет сейчас на методы усвоения оперативной метеорологической информации (т. е. регулярно поступающей в установленное время суток и в установленной форме).
*Увеличивается количество частот, на которых спутник измеряет уходящее в космос излучение атмосферы, улучшаются вычислительные алгоритмы решения так называемой обратной задачи: определения профиля температуры T(z) по измеренному распределению излучаемой энергии по частотам.»
elementy.ru/nauchno-populyarnaya_biblioteka/431200/Meteorologicheskie_nablyudeniya_raspredelennye_v_prostranstve_i_vo_vremeni
«Для прогноза с мелким шагом порядка 10 км необходимо количество метеорологических станций увеличить примерно в тысячу раз, что нереально с экономической точки зрения. Прогресс возможен лишь при переходе к качественно иным методам измерений.
В ближайшее время растущая точность* спутников, видимо, сравняется с точностью метеозондов, и это изменение количества информации, в свою очередь, существенно повлияет и уже влияет сейчас на методы усвоения оперативной метеорологической информации (т. е. регулярно поступающей в установленное время суток и в установленной форме).
*Увеличивается количество частот, на которых спутник измеряет уходящее в космос излучение атмосферы, улучшаются вычислительные алгоритмы решения так называемой обратной задачи: определения профиля температуры T(z) по измеренному распределению излучаемой энергии по частотам.»
elementy.ru/nauchno-populyarnaya_biblioteka/431200/Meteorologicheskie_nablyudeniya_raspredelennye_v_prostranstve_i_vo_vremeni
UFO just landed and posted this here
Ох Яндекс. Вроде свои, русские, однако: хвастаетесь сбываемостью прогнозов, а американская Погода в iOS делает недельный прогноз заметно точнее.
По спутниковым картам — пока точность у них ужасная. Проще на сайт локальной метеослужбы заходить и смотреть там.
======
Не про Яндекс. Как житель Новосибирска мне очень обидно, что метеорадара в таком большом городе нет. В каком то Барабинске — всегда, а в центре Нска приходится в окно выглядывать :))
По спутниковым картам — пока точность у них ужасная. Проще на сайт локальной метеослужбы заходить и смотреть там.
======
Не про Яндекс. Как житель Новосибирска мне очень обидно, что метеорадара в таком большом городе нет. В каком то Барабинске — всегда, а в центре Нска приходится в окно выглядывать :))
Читаю и не могу понять. Где же вопросы про глубину UNet? Где комменты с предложением попробовать GANы? Вижу только про, кхм, потерянные полимеры. Я как-то пропустил момент, когда на Хабре перестали интересоваться технологиями.
Если говорить про качество прогнозов, есть независимый сервис meteotrust.com, который говорит о том, что наши температурные прогнозы по-прежнему самые точные в основных городах РФ. Карта осадков, построенная по спутникам не идеальна, однако в среднем качественно выше любого аналога за исключением радарных снимков.
Ну и, чтобы направить разговор в конструктивное русло, мы всегда благодарны за систематические и подробные репорты о наших расхождениях с действительностью. Погода от этого только лучше :)
Если говорить про качество прогнозов, есть независимый сервис meteotrust.com, который говорит о том, что наши температурные прогнозы по-прежнему самые точные в основных городах РФ. Карта осадков, построенная по спутникам не идеальна, однако в среднем качественно выше любого аналога за исключением радарных снимков.
Ну и, чтобы направить разговор в конструктивное русло, мы всегда благодарны за систематические и подробные репорты о наших расхождениях с действительностью. Погода от этого только лучше :)
Я не вижу что meteotrust.com меряет облачность и осадки, а это бывает более важно чем просто температура.
Нет, точность осадков они не измеряют, вы правы, речь только про температуру. Думаю, что независимых замеров точности по осадкам нет в публичном доступе потому, что метрики такого сравнения могут быть не всем понятны. Какую метрику, на ваш взгляд, было бы интересно анализировать, сравнивая нескольких поставщиков погоды?
Было ли облачно или нет, был ли дождь или нет, в конкретной точке. Есть же метеорадары, которые оценивают яркость неба и количество осадков в реальном времени, вот с ними и сравнивать.
Вы предлагаете метрику accuracy. Это не очень хороший способ сравнивать прогнозы потому, например, что эта метрика будет равна примерно 0.95 у прогноза, который всегда предсказывает «без осадков». У нашего прогноза эта метрика «заметно» выше — на несколько процентов. На такой метрике не будут видны ни титанические успехи ни серьезные фейлы прогноза. У нас есть несколько метрик для осадков, они сложнее, чем accuracy и, думаю, мы о них расскажем.
Можно предсказывать время начала следующего дождя в данной точке. Или время, когда дождь закончится.
Можно предсказывать время следующего скачка температуры более, чем на 5 градусов от текущей температуры, или от температуры, которая была в этой точке ровно сутки назад.
Вообщем надо как-то учиться предсказывать сюрпризы, а не их отсутствие.
Можно предсказывать время следующего скачка температуры более, чем на 5 градусов от текущей температуры, или от температуры, которая была в этой точке ровно сутки назад.
Вообщем надо как-то учиться предсказывать сюрпризы, а не их отсутствие.
Какая разница, какая глубина сети, если сеть занимается выдумыванием на основании заведомо недостаточно детальных данных (то есть, проще говоря, враньем и пусканием пыли в глаза)?
Ну зачем вы так про нашу сеть, она и обидеться может :) Ее моральные качества — на высоте.
А вообще прогноз погоды — это почти всегда экстраполяция на основе заведомо неполных и порой довольно недостоверных данных. От параметров же прогнозирующего алгоритма зависит то, хороший получается прогноз, или нет. Такие дела.
А вообще прогноз погоды — это почти всегда экстраполяция на основе заведомо неполных и порой довольно недостоверных данных. От параметров же прогнозирующего алгоритма зависит то, хороший получается прогноз, или нет. Такие дела.
Ну зачем позориться передергиванием? Конечно, прогноз — экстраполяция. Только и экстраполяция может быть правомерной, а может — неправомерной. С той плотностью входных данных, которая у вас есть, она, главным образом, неправомерная. А то вы сейчас сказки рассказываете в духе известной шутки про детективные фильмы: «Zoom. Enhance.»
Только и экстраполяция может быть правомерной, а может — неправомерной. С той плотностью входных данных, которая у вас есть, она, главным образом, неправомерная.
Вы же обоснуете, правда? А то как-то не слишком содержательно получается :)
Простите, но во время Великой Отечественной плотность входных данных с оккупированных территорий вообще была нулевая, а прогноз делали достойный. На метеорологов 5 лет учатся не просто так, нам есть что предложить, кроме бесконечного уплотнения наблюдательной сети)
«При прогнозировании по «обрезанной карте» широко использовались предложенные Х.П. Погосяном и Н.Я. Таборовским основы метода адвективно-динамического анализа процессов в тропосфере и типизация синоптических процессов над Европой, разработанная О.Г.Кричаком для работы в условиях дефицита информации с оккупированной территории. » meteoinfo.ru/9may
«При прогнозировании по «обрезанной карте» широко использовались предложенные Х.П. Погосяном и Н.Я. Таборовским основы метода адвективно-динамического анализа процессов в тропосфере и типизация синоптических процессов над Европой, разработанная О.Г.Кричаком для работы в условиях дефицита информации с оккупированной территории. » meteoinfo.ru/9may
Столько умных слов, а по факту погода всё такая же непредсказуемая. Было летом и в Москве, когда прогноз говорил что весь день солнце, а внезапно пошёл дождь. И особенно в резкоизменяющимся климате, таком как Питер и Волгоград, где прогноз был на уровне 50 летней давности, то есть никакой.
Вот именно из-за сервиса Яндекс.погода у меня идет полное отвращение ко всем сервисам Яндекса, хотя и понимаю что люди стараются. Едешь на машине а перед тобой огромное табло Яндекс погоды с текущей погодой которая показывает все что угодно только не текущую погоду.
Вот так мозг и начинает сомневаться, может Яндекс и прав, а реалити нет?
Единственное не могу понять зачем физ. лицам нужна такая точность погоды как её пытаются навязать?
Вот так мозг и начинает сомневаться, может Яндекс и прав, а реалити нет?
Единственное не могу понять зачем физ. лицам нужна такая точность погоды как её пытаются навязать?
Статистически, довольно точный прогноз будет даже если каждое утро говорить: «Сегодня будет такая же погода, как вчера» :) В течении года это точнее, чем прогнозы синоптиков 8)
Ну не совсем так, это хороший бейзлайн, но вот например для Нью-Йорка forecastadvisor говорит, что persistence в аутсайдерах: www.forecastadvisor.com/NewYork/NewYork/10036%20
Я не сказал, что такой «прогноз» будет лучший :)
Может я плохо искал, о интересно — на чем считается прогноз погоды у Яндекса. Помню историю, как в советское время контрабандой купили самый последний Крей для Росгидромицентра, это сильно увеличило точность прогнозов. Насколько я в курсе, сейчас по суперкомпьютерам Россия очень в глубоком и плохо пахнущем месте…
Может я плохо искал, о интересно — на чем считается прогноз погоды у Яндекса. Помню историю, как в советское время контрабандой купили самый последний Крей для Росгидромицентра, это сильно увеличило точность прогнозов. Насколько я в курсе, сейчас по суперкомпьютерам Россия очень в глубоком и плохо пахнущем месте…
У нас есть по 100 серверов в 3 ДЦ. На них проходит расчеты метеорологической модели. Плюс мы используем несколько других поставщиков и машинное обучение — подрбонее тут — habr.com/company/yandex/blog/271725
Статья старая, с тех пор мы глобально работаем, но подходы похожи. Для подготовки данных и применения обученной модели, у нас есть map-reduce кластер на 3000 ядер.
Статья старая, с тех пор мы глобально работаем, но подходы похожи. Для подготовки данных и применения обученной модели, у нас есть map-reduce кластер на 3000 ядер.
Интересно было посмотреть конкретные технические данные, такие как: петафлопсы, количество ядер, архитектуру. Я не спец, но так можно хоть ка кто сравнить с топовыми мировыми суперами, а в той статье такой информаци нет.
Про архитектуры мы писали в этой статье: habr.com/company/yandex/blog/343518
Учтем, что нужно больше цифр.
Учтем, что нужно больше цифр.
Зашел сюда увидеть эту картинку.
Не увидел и потому запощу ее сам
Не увидел и потому запощу ее сам
Спасибо за техническую статью о том как у вас это все работает. Интересно так-же как составляют карту аллергенов, есть выездные лаборатории ?
На это нужна целая отдельная статья. Попробую кратко. К сожалению, станций по пыльцевому мониторингу можно пересчитать по пальцам руки, а ежедневно обновляющаяся — только одна в Москве. Да и это с задержкой в сутки. Поэтому такие данные в основном модельные. По спутниковым снимкам и кадастру составляется карта растительности основных аллергенов. Затем используется модель цветения, основанная на сумме накопленных температур. То есть в каждой точке известно что растет, а также с учетом прогноза по температуре — когда зацветет. Далее эти данные обрабатываются в модели, аналогичной тому, которая рассчитывает прогноз погоды, чтобы после начала цветения переносит пыльцу вместе с ветром.
А чего только метеосат? Есть ещё даже такой: Электро-Л.
Было дело, когда метео-радары на ЛЭМЗе только появились, наши спецы ездили в Я. на переговоры, по выдаче данных. С тех пор программная часть несколько улучшилась, но не в разы. Радиус обзора локатора — 150км, никак не 250км. Импульсная мощность не такая уж большая.
Мне вот интересно, когда прогнозы из разных источников яндекс научится отображать согласовано в своих приложениях. Например, в 12:00 в верхней части экрана приложения может показывать в ленте погодных условий, что дождь начнётся в 13:00, а чуть ниже попап метеорадара: в ближайшие два часа осадков не предвидится. Ну и какой из двух личностей яндекс-прогнозиста верить?
Хотелось бы более разнообразной обратной связи по осадкам: сейчас можно указать вид осадков, но не их силу. Неужели не имеет прогностического значения?
Хотелось бы более разнообразной обратной связи по осадкам: сейчас можно указать вид осадков, но не их силу. Неужели не имеет прогностического значения?
Вы еще забыли пропарсить и подтягивать метеостанции локальные из сети (тот же aprs.fi возьмите и др. сервисы). Для бигдаты чем больше, тем лучше ;)
И еще предложение: давайте сделаем простой набор яндекс.метео для установки?
Мини-погодная станция через APRS.CWOP в т.ч. с грозоотметчиком и др. фишками? А то приходится из импортных комплектующих или на коленке собирать, а так будет фирменный Российский продукт от ЯR
И еще предложение: давайте сделаем простой набор яндекс.метео для установки?
Мини-погодная станция через APRS.CWOP в т.ч. с грозоотметчиком и др. фишками? А то приходится из импортных комплектующих или на коленке собирать, а так будет фирменный Российский продукт от ЯR
Мы не можем просто так парсить данные, в каждом случае мы заключаем договор на легальную покупку необходимых данных. Тема со станциями интересна, можно побольше подробностей?
Эти данные открыты и общедоступны.
По метеостанциям ситуация следующая: в России не выпускается недорогих станций надбытового уровня, которые бы позволяли получать метеоданные + грозоотметчики с ними были. Много времени использовал импортную недорогую станцию, отлично себя зарекомендовала и стоит копейки имея полный функционал. Но, в основном народ собирает на коленках.
Сейчас я после тяжёлой болезни сменил вид деятельности и возвращаюсь в ИТ тематику через… ведение кружка в школе (ардуинки, робототехника, электроника и т.п.) — заодно восполняю знания. И как раз думал, что бы имело смысл делать в качестве нормального и интересного школьного проекта. И вот как раз очень нехватает реальной народной погодной станции.
Температура, влажность, атмосферное давление, направление и скорость ветра, грозоотметчик. Станция может быть в т.ч. максимально автнономной, т.к. датчики потребляют мало энергии, как и контроллеры для сбора данных. Оптимально построить и на базе открытых протоколов под такие метеостанции единую сеть (как говориться, чтобы передавало через любой доступный канал простые пакеты в очень понятном формате — а пакеты на столько короткие, что умещаются к примеру в такую строку:
May 15 2018 00:09
000/000g000t076r000p000P000h10b10263
По сути можно реализовать очень интересный проект ;) с коммерческой реализацией + с социальной составляющей. Пишите в лс :)
По метеостанциям ситуация следующая: в России не выпускается недорогих станций надбытового уровня, которые бы позволяли получать метеоданные + грозоотметчики с ними были. Много времени использовал импортную недорогую станцию, отлично себя зарекомендовала и стоит копейки имея полный функционал. Но, в основном народ собирает на коленках.
Сейчас я после тяжёлой болезни сменил вид деятельности и возвращаюсь в ИТ тематику через… ведение кружка в школе (ардуинки, робототехника, электроника и т.п.) — заодно восполняю знания. И как раз думал, что бы имело смысл делать в качестве нормального и интересного школьного проекта. И вот как раз очень нехватает реальной народной погодной станции.
Температура, влажность, атмосферное давление, направление и скорость ветра, грозоотметчик. Станция может быть в т.ч. максимально автнономной, т.к. датчики потребляют мало энергии, как и контроллеры для сбора данных. Оптимально построить и на базе открытых протоколов под такие метеостанции единую сеть (как говориться, чтобы передавало через любой доступный канал простые пакеты в очень понятном формате — а пакеты на столько короткие, что умещаются к примеру в такую строку:
May 15 2018 00:09
000/000g000t076r000p000P000h10b10263
По сути можно реализовать очень интересный проект ;) с коммерческой реализацией + с социальной составляющей. Пишите в лс :)
Посмотрите в сторону narodmon.ru
У них уже есть простой API для приема данных + есть раздел с помощью
У них уже есть простой API для приема данных + есть раздел с помощью
они еле живы, пытались с ними когда-то :)
Вранье чистой воды (хотя что удивительного при карме -70), ничего вы с нами и не пытались, кроме как выведать инфу как все построено, после чего слились. И мы поживее будем нескольких проектов пиаренных и поддержанных яндексом и в итоге заглохшими уже давно, видимо такое сотрудничество не пошло им на пользу. Помнится с Я.Картами целый раздел был мол вот наши избранные проекты и т.п. и где оно сейчас…
А вы оказывается еще и на столько наглы, что и предположить трудно. Обвиняете в том, чего не может быть.
Из личных метеостанций пытался подключить целый список аппаратуры к вашему сервису. В результате у меня отлично CWOP и APRS работает, а ваш недосервис так и не смог запуститься даже на cumulus.
Помнится, на одном из радиолюбительских форумов бегал «мальчик» и расспрашивал всех по поводу APRS для коммерческой реализации.
Пожалуйста опубликуйте нашу с вами переписку, раз она была. Пожалуйста, буду рад почитать. Или принесите публично извинения за то, что назвали меня лжецом.
Смею предположить, что яндекс вас не купил :).
С Уважением, Иван Еремин RA1AMX
Из личных метеостанций пытался подключить целый список аппаратуры к вашему сервису. В результате у меня отлично CWOP и APRS работает, а ваш недосервис так и не смог запуститься даже на cumulus.
Помнится, на одном из радиолюбительских форумов бегал «мальчик» и расспрашивал всех по поводу APRS для коммерческой реализации.
Пожалуйста опубликуйте нашу с вами переписку, раз она была. Пожалуйста, буду рад почитать. Или принесите публично извинения за то, что назвали меня лжецом.
Смею предположить, что яндекс вас не купил :).
С Уважением, Иван Еремин RA1AMX
Ну это не секрет и мы и продаваться не собирались вовсе, так к слову… ниже по тексту есть пояснение почему. Было мнение со стороны и не раз мол «странно почему еще он(яндекс) этого не сделал», но оно не наше и не совпадает с нашими целями.
«Мы еле живы» — вранье и поживее многих других живущих только за счет данных от METAR и еще до сих пор развиваем сервисы и не планируем тормозить, даже если яндекс сделает что-то свое в этом духе, т.к. они будут ориентированы на бабки заставляя людей купить Netatmo или еще что для вхождения в сервис, а мы будем ориентированы на людей в т.ч. и с низким порогом вхождения даже с одним датчиком за 1$, но в удачном месте, т.е. и тут остаемся при своем, про карму -70 тоже правда.
Вы писали ранее «пытались с ними» (а не пытался, т.е. мы) это кто мы тогда уточняющий вопрос возникает? Когда так говорите, значит от имени фирмы так с кем не сложились партнерские дела? А приводите просто имя, которое ни о чем не говорит. Уточните кто именно «мы» и что именно пытались совместного сделать и за мной (за себя лично скажу) не заржавеет. Просто одно дело, если вы недовольный наш пользователь и совсем другое, если партнер с кем не сложилось и с такими заявлениями да еще и на публичном ресурсе.
PS И да, с полной ответственностью заявляю, я не тот мальчик, что бегал у вас по форумам. Профиль не тот, не радиолюбитель я уже много лет как.
«Мы еле живы» — вранье и поживее многих других живущих только за счет данных от METAR и еще до сих пор развиваем сервисы и не планируем тормозить, даже если яндекс сделает что-то свое в этом духе, т.к. они будут ориентированы на бабки заставляя людей купить Netatmo или еще что для вхождения в сервис, а мы будем ориентированы на людей в т.ч. и с низким порогом вхождения даже с одним датчиком за 1$, но в удачном месте, т.е. и тут остаемся при своем, про карму -70 тоже правда.
Вы писали ранее «пытались с ними» (а не пытался, т.е. мы) это кто мы тогда уточняющий вопрос возникает? Когда так говорите, значит от имени фирмы так с кем не сложились партнерские дела? А приводите просто имя, которое ни о чем не говорит. Уточните кто именно «мы» и что именно пытались совместного сделать и за мной (за себя лично скажу) не заржавеет. Просто одно дело, если вы недовольный наш пользователь и совсем другое, если партнер с кем не сложилось и с такими заявлениями да еще и на публичном ресурсе.
PS И да, с полной ответственностью заявляю, я не тот мальчик, что бегал у вас по форумам. Профиль не тот, не радиолюбитель я уже много лет как.
Про них мы прекрасно знаем. Проблема любительских станций в том, что они в большинстве случаев неправильно установлены, например измеряют температуры стены или балкона. Из этого можно вытянуть полезный сигнал, если использовать одинаковые станции, например netatmo. Но к сожалению у народного мониторинга зоопарк средств измерения, что затрудняет использование данных.
Странно, неужели для нейросети так критичен разброс температуры?
Вот например скрин карты с датчиками моего района Санкт-Петербурга, не так и сильно врут датчики.
Или еще лучше — запилите свой API, нарисуйте схемку на ESP, нарисуйте схемку правильного размещения датчика и принимайте данные от населения.
Думаю энтузиасты вмиг подтянутся (народная карта яндекса тому подтвержение, там люди быстро нарисовали все кусты и тропинки в своих районах).
Вот например скрин карты с датчиками моего района Санкт-Петербурга, не так и сильно врут датчики.
Или еще лучше — запилите свой API, нарисуйте схемку на ESP, нарисуйте схемку правильного размещения датчика и принимайте данные от населения.
Думаю энтузиасты вмиг подтянутся (народная карта яндекса тому подтвержение, там люди быстро нарисовали все кусты и тропинки в своих районах).
flightradar рассылает желающим свои устройства. Было б желание и бюджет, а добровольцев найти не проблема. Особенно если им предложить вознаграждение в виде той же подписки на сервисы яндекса, если пришлют сначала план установки датчиков, потом фото с подтверждением корректной установки. Выбросить в окно датчик всегда можно.
Был такой проект ГородИзОкна (он же ПробкиИзОкна), работал по такому же принципу только вебки рассылал, и что в итоге? Отработали полученное бабло и слились по тихому. Не для РФ этот подход, менталитет не тот, как можно получить бабки и не «проесть» сразу же. Много ли станций flightradar в РФ и СНГ посмотрите — единицы. Собственно не вы 1й яндексу это предлагаете… если это не принесет лям другой через месяц — не заинтересуете.
Да-да, все так, но мы с этим боремся как можем, а смысл тогда в вашей пропиаренной на каждом углу системе Метеум, которой судя по вашей же рекламе отсеить некачественные данные вообще не проблема (если это конечно и правда нейросеть).
А еще надо учесть что в разных местах установки вранье в показаниях наблюдается в разное время суток и просто выкинуть 3/4 данных по локации из-за проблем с завышением в определенные часы тоже вроде как расточительство.
А еще надо учесть что в разных местах установки вранье в показаниях наблюдается в разное время суток и просто выкинуть 3/4 данных по локации из-за проблем с завышением в определенные часы тоже вроде как расточительство.
в догонку не успел отредактировать: точность показаний на 99% зависит от правильности размещения датчика и только на 1% от бренда (то бишь стоимости) самой станции.
Какую станцию выбрать за 1000$ или за 5$ самому собрать по сути вопрос аналогичный какой смартфон купить с целью только позвонить за 100к или 10к, т.е. на сколько крутым владельцем хочешь себя ощущать.
Какую станцию выбрать за 1000$ или за 5$ самому собрать по сути вопрос аналогичный какой смартфон купить с целью только позвонить за 100к или 10к, т.е. на сколько крутым владельцем хочешь себя ощущать.
Не пробовали данные у народного монитора покупать? Я думаю и вам была бы польза и они смогли бы свои затраты на обслуживание серверной части отбить.
Простите, а в Яндексе есть люди с опытом моделирования погоды с помощью урматфиза? Я полагаю, что использовать нейросеть для системы, описываемой системой уравнений в частных производных (хоть и очень сложной), не лучшее решение. Возможно я не прав и был проведен анализ, показывающий обратное. Мне было бы очень интересно понять причины перехода на моделирование с помощью универсального черного ящика, не знающего физику.
Опыт конечно имеется. В том числе некоторый есть и у меня :) Дело в том, что черный ящик конечно не знает физику, но его можно научить находить закономерности, чтобы воспроизводить законы, наблюдаемые в природе. Там как атмосфера сложная система, то по честному мы не всем можем учесть, а тем более решить аналитически. Приходится прибегать к допущениям, упрощениям и параметризациям. А вот тут машинное обучение и приходит на помощь — обобщает наши знания и помогает найти лучшее решение. Если говорить про определение дождя со спутников, то точность детекции алгоритмами, построенных на урматфизе оказывается в районе 0.3 по f1, тогда как мы смогли добиться 0.8 с помощью нейросети.
UFO just landed and posted this here
Надо отдать должное — Яндекс-Погода наиболее адекватно отражает погоду во Владивостоке и на Севере Сахалина (места, где я живу и езжу в отпуск, на рыбку). Большинство информеров тупо берут текущую погоду у метеостанций ближайших аэропортов. А погода в аэропорте Владивостока «Кневичи» разительно отличается от погоды собственно в городе, поскольку аэропорты на ДВ строятся с учетом летних прибрежных «выносов». Итог: за окном туман и морось, погодный информер бодро сообщает о ясной, солнечной погоде. Осенью предупреждает об утренних заморозках, а город греет ещё не остывшее море, и до заморозков ещё месяц.
Что интересно, в черте города находятся минимум 2 метеостанции Росгидромета, но он, судя по всему, не желает отдавать задаром погодные данные «на сторону». А как же безопасность и здоровье граждан? Куда смотрит МЧС? Не ответа, только капли дождя стекают за шиворот мне, не взявшему зонтик.
Что интересно, в черте города находятся минимум 2 метеостанции Росгидромета, но он, судя по всему, не желает отдавать задаром погодные данные «на сторону». А как же безопасность и здоровье граждан? Куда смотрит МЧС? Не ответа, только капли дождя стекают за шиворот мне, не взявшему зонтик.
Интересная статья, спасибо. Вопрос: как часто перерасчитывается прогноз и влиют ли как-нибудь сообщения из приложения «За окном другая погода»?
PS: не могу сказать, что часто интересуюсь погодой, но недавно надо было ехать за грибами, а на улице был дождь. Визуализация осадков в яндексе помогла принять решение выдвигаться. В итоге дождя нет, грибы собраны. Спасибо вам)
PSPS: Также выше в комментариях озвучили интересную идею создать готовый кит для любительской погодной станции и продавать за недорого. В больших городах неактуально, но в деревнях и маленьких городках было бы востребовано. Как минимум себе на дачу бы поставил. Ну и можно будет потом в сельские школы «подарить» по какой-нибудь гос. программе. В итоге все в плюсе — вы получаете больше данных для прогнозирования, жители получают более точный прогноз.
PS: не могу сказать, что часто интересуюсь погодой, но недавно надо было ехать за грибами, а на улице был дождь. Визуализация осадков в яндексе помогла принять решение выдвигаться. В итоге дождя нет, грибы собраны. Спасибо вам)
PSPS: Также выше в комментариях озвучили интересную идею создать готовый кит для любительской погодной станции и продавать за недорого. В больших городах неактуально, но в деревнях и маленьких городках было бы востребовано. Как минимум себе на дачу бы поставил. Ну и можно будет потом в сельские школы «подарить» по какой-нибудь гос. программе. В итоге все в плюсе — вы получаете больше данных для прогнозирования, жители получают более точный прогноз.
UFO just landed and posted this here
Об этом написано в статье — это 1 км в видимом диапазоне. :)
Каналы попадают все.
Снимки приходят на компьютер, подключенный к тюнеру от тарелки, складываются в хранилище, затем распаковываются, склеиваются в единое поле, переводятся в удобочитаемые форматы.
Landsat-8 или Sentinel-2(3) напрямую не используем, только в качестве данных, ассимилированых в модели прогноза погоды.
Еще мы используем python библиотеки и нейросети.
Каналы попадают все.
Снимки приходят на компьютер, подключенный к тюнеру от тарелки, складываются в хранилище, затем распаковываются, склеиваются в единое поле, переводятся в удобочитаемые форматы.
Landsat-8 или Sentinel-2(3) напрямую не используем, только в качестве данных, ассимилированых в модели прогноза погоды.
Еще мы используем python библиотеки и нейросети.
UFO just landed and posted this here
Sign up to leave a comment.
Как Яндекс создал глобальный прогноз осадков с использованием радаров и спутников