Интересно, что когда я учился, алгоритм PSO у нас чаще называли стайным. Хотя в оригинале да, рой агентов. Разницы по сути мало, но сам факт. Представлять пчел, наверное, приятнее, чем волков :)
А ведь хороший проект! Вернее, из него можно быстренько сделать фреймворк для создания жестового управления буквально к чему угодно. Комбо из жестов можно даже вместо ключа-пароля использовать на любом утюга с вебкой:)
Отдельное спасибо за рабочую цепочку транслятлров весов модели, очень намаялся с этим, когда работал с YOLO.
Если вы так же как и я не поняли разделения и противопоставления, Кейси сама начинает свои статьи с тезиса, что настоящих сайентистов настолько мало, что она придумала делить их на подвиды по исполняемым функциям. И идеальный сайентист в её представлении это аналитик+статистик+ML/AI экспертиз.
Разумно, но вообще не принято, особенно в русскоязычном комьюнити.
Если честно, всю статью ждал, что вы хоть немного расскажете про задачи перед командами, но нет :)
По вашему профилю классифаеда скорее ожидаешь увидеть команду DS аналитики в плане оценки жилья, антифрода и прочего, а не CV и NLP. Очень интересно, какие основные проекты, наверняка есть о чем рассказать.
Молодцы, если заработает — позволит разгрузить и людей и аппаратуру, уменьшит очереди где они не нужны.
А каких объемов был датасет? Сами собирали-размечали? Давали примеры с некашляющими людьми? Брали людей разных полов, национальностей и возрастов?
Ну и самый очевидный вопрос — не проще использовать звук? :)
А как откликались, если не секрет? Отдельно под каждую компанию резюме под нужды каждой? Лично писали или через стандартные формы? У вас какая-то запредельная конверсия откликов в ответы, хочется узнать секрет успеха :)
Профиль крутой, но все же.
И ещё вопрос, если можно. Не ощущаете ETL после DS скучным?
Вот не раз встречал именно такую трактовку. Что максимум молодец еще в момент начала поисков предупредит руководителя. Максимально удобную трактовку для руководителя, которому лень раз в квартал просто поговорить со своими подчиненными и попытаться понять назревшие проблемы до того, как человек пустится во все тяжкие.
С одной стороны, я вполне понимаю, что часто люди просто выгорают и шансов удержать все равно нет. Ну нет в компании других задач, подходов и руководителей. Часто к этой точке уже и удерживать не хочется, человек все равно еле работает. С другой, это не значит что надо сидеть i'm fine до того момента, как человек посреди проекта принесет заявление.
У нас был случай, когда уволился разработчик, который только что перенял огромный и критичный блок у другого только что уволившегося. И эта передача явно подтолкнула его быть сговорчивее при переходе. Было шумно, расстались плохо, но в общем и целом все живы.
Не могу понять пункта про «Знает ли руководитель, что вы собираетесь уволиться?». Я не представляю, как с этим можно адекватно работать, особенно, если от тебя что-то всерьез зависит. Эта информация с большей вероятностью тебе навредит, чем поможет что-то исправить. Ничего серьезного уже не доверят, а троллить регулярно будут. Опять же, если слишком долго будешь искать после того как расскажешь, возникнут очевидные вопросы, почему ты никому не нужен.
Огромное спасибо за то, что вы делаете. Это очень круто, что пытаетесь залезть в эту "аналоговую" задачу с ИТ стороны.
Я подумал — а это точно эффективно, использовать дрон и анализ фотографий в поиске? Объясню, что имею ввиду. Я подозреваю, что когда по лесу идет поисковик, он в основном ориентируется либо на движение, либо на звуки потерявшегося человека. Реально увидеть лежащего человека тяжело, особенно, если он не в куртке неестественного цвета. Можно заметить движение, еще проще пойти на звук. Радиус "детекции" невооруженным глазом, неверное, метров 10 — просто заметить неподвижного человека, метров 15-20 для движения и метров 50 для звука. Конечно, цифры условные.
Я это к чему. Может было бы эффективнее использовать дрон как носитель громкоговорителя и микрофона? Или каким-то другим способом использовать именно звук, раз уж он в лесу/поле проходит лучше, чем картинка.
Насколько я понимаю — совершенно необязательно. Возможно создать вполне себе честную скоринговую модель, в которой ни на одном этапе никто не будет иметь доступа к действительно персональным данным. Другой вопрос, что в разы проще сделать иначе.
Предполагаю, что если все это сделать через третью компанию «Яндекс Скоринг», то с т.з. законодательства все будет действительно деперсонализировано.
Т.е. Яндекс из всех своих сервисов готовит некоторую деперсонифицированную выгрузку с захэшированными почтой, телефоном и неподписанными столбцами факторов.
Передает эту выгрузку новому юрлицу, в этих данных нет ни грамма персональных данных.
Аналогично поступают банки, только готовят выгрузку с информацией о выплате кредитов.
Скоринговое ООО готовит не менее скоринговую модель на базе этих двух выборок, формально не прикасаясь к персональным данным.
Далее банки просят яндекс скоринг оценить клиента, используя опять же хэшированные данные. При некоторой сноровке, можно даже использовать разные алгоритмы хэширования почты и телефонов в обучающей выборке и для собственно скоринга, чтобы модель не использовала в явном виде кредитную историю конкретного человека.
Мне кажется, потому что это безумно скучно :). Я НЕ DE, но где-то очень близко. И более скучной вещи, чем ETL/ELT, бесконечные пайплайны и прочая слежка за доступностью и качеством данных мне представить сложно. Вроде бы и по квалификации ты разработчик, и код иногда пишешь, но никакого удовольствия от созданного продукта нет. Ты где-то реально на уровне грузчика. Объективно, без тебя компании будет хуже, но и вклад твой абсолютно незаметен. Вспоминают, когда сломалось или скопилась гора свежей работы.
Сочи — отдельный мир. Во-первых, Сочи — это минимум десяток городков и поселочков, между которыми километры трасс. Климат — чудо. Летом не слишком жарко, длинное межсезонье, зимой дожди. Субтропики. На улицах растут фрукты, кругом зелень весь год, постоянно живые цветы.
В плане жизни — очень на любителя. Я бы с удовольствием жил там (желательно поближе к Адлеру, олимпийскому парку) 8-9 месяцев несезона, а на лето уезжал. Сезон здесь — стихийное бедствие, которое однако всех кормит. Из-за этого отношение к людям очень своеобразное, особенно не к своим местным. Очень много культур, все смешаны, все с перчинкой. В море местные не купаются, отдыхать улетают. Все лучшее туристам, так сказать.
Отдельная песня — Роза Хутор и весь горный кластер, который тоже формально Сочи. Очень красиво, очень дорого зимой. Но побывать стоит.
Честно, мне нравится, что живем мы именно в Краснодаре, а не в Сочи. Море все еще воспринимается как подарок, нет туристов. Есть все блага цивилизации в виде театров, музеев и нормальных магазинов, в Сочи с этим уже тяжело. Но ездить туда нелетом очень любим.
Тут как по мне вопрос другой культуры. В моем родном Красноярске как-то вообще не принято улыбаться. Я как-то раз считал — из 20 случайных встречных в лучшем случае у 1 не траур на лице. Здесь все же повеселее.
То же самое со случайным общением. В Красноярске кондуктор в автобусе может не говорить и не слышать ни слова в свой адрес очень долго — у нас не принято просто так здороваться, благодарить по мелочи и т.п. В Краснодаре случайные взаимодействия везде и всюду. И постоянно здороваешься, шутишь, благодаришь и т.д. Вроде мелочь, а настроение другое.
В плане душевности и прочего ничего сказать не могу. Мое мнение — везде люди +- одинаковые в плане моральных качеств.
Слишком просто, чтобы быть. Я из Красноярска — у нас широченный незамерзающий вечно парящий Енисей через весь город — влажность тоже высокая, особенно зимой. И все равно температуры ощущаются по-другому.
А можно я вставлю свои 5 копеек на правах понаехала?:)
Переехал из Сибири пару лет назад.
1) климат. С ним меньше всего проблем. Жару вы либо переносите, либо нет. Если да, то никаких проблем даже у сибиряка. Ну и да, +35 в Краснодаре воспринимаются как +30 сибирских. И +10 краснодарских воспринимается как легкий минус в Сибири. Почему — загадка.
2) море. 150км — это 3-4 часа в сезон, иногда еще больше. Ибо
3) пробки. Пробки всегда и везде, в городе и за городом, в центре и на окраинах. Ибо
4) общественный транспорт. Он не работает. Город очень большой по площади, много частного сектора. При этом нормальных маршруток нет, адекватно ходят только трамваи, но не в дождь. Такси раньше было очень дешевым, сейчас цены ощутимо поднялись. Поездки на море всегда отдельное приключение, это определенный талант добраться туда за адекватное время
5) культурная жизнь. Чем меньше в ней государственного/муниципального, тем интереснее. Государственные театры/музеи не особо пытаются работать
6) огромное количество понаехалов в духе меня. Половина приехала из соседних станиц, половина со всей остальной страны. Коренного краснодарца еще найди
7) и все равно я люблю Краснодар :). За периодические +15 в январе, за возможность съездить на море не в сезон. За то, что у меня 2 комплекта одежды — летний и синтепоновая куртка. За общую приветливость, которой так не хватало в Сибири.
У южных городов у каждого свой колорит. И Ростов, и Краснодар, и Сочи — они очень разные.
Откуда менеджмент узнает? Может быть, наконец, поговорит со своим сотрудником?
Серьезно. Менеджмент в крупных компаниях видит 3 основные точки приложения своих умений:
1) заседания в более высоких кабинетах (как вариант у заказчика)
2) набирать задач, чтобы под них можно было (потом) выбивать кадры, а в будущем за счет этого переименоваться самому во что-то более крупное
3) поиск крайнего, на которого списать факап
При этом с подчиненными можно вообще не работать, да что там, не общаться, не знать как зовут и кто что делает. В итоге кошмарный разрыв в линейном руководстве и то самое выгорание.
Ларри — не гуру коммуникации. Он не умеет лепить красивые презенташки, не умеет руководить людьми, а благодаря горе-менеджменту даже не видит фронта работ дальше одного спринта. Он не может что-то менять, у него нет на это полномочий. У него есть профессиональный навык и он продал его компании. И он делится своим заработком (а производит продукт и генерирует прибыль здесь именно он, а не его менеджер) с руководством в обмен на то, что оно будет коммуницировать, оптимизировать процессы, находить точки приложения его компетенции, мотивировать и т.д. И похоже, руководство не очень справляется.
Мммм, механистический подход к труду, прямо как сто лет назад.
Работать точно будет, даже достаточно эффективно. Одна беда, люди, которые могут найти более человечное место, уйдут очень быстро. Останутся либо те, кто не сможет найти, либо те немногие, кому действительно совсем не нужно общение на работе.
Для простых задач не критично, конечно, но что-то действительно интересное в такой обстановке, мне кажется, не создать. Просто слишком жесть. Вот избавиться бы от абсолютизма, сделать поправку на то что люди не машины, и как все лучше было бы.
Насколько я понимаю оригинальный текст — речь именно про одну компанию. Более того, чуть ли не один отдел. И в рамках одной компании игнорить код на ревью — ну, скажем мягко, неэффективно. Конечно, это должно входить в KPI, метрики, да куда угодно. Код на ревью — в том числе твой код, твоя ответственность. Понятно, что бывают ситуации, завалы-авралы, но в общем и целом, моя позиция именно такая — код написан и отдан на ревью. Горячий шарик ответственности перешел из твоих рук в руки ревьювера. Если код лежит без движения и сроки затягиваются — ответственен в этом именно ревьювер. По-дружески можно подойти потыкать, но это не обязанность.
А ведь хороший проект! Вернее, из него можно быстренько сделать фреймворк для создания жестового управления буквально к чему угодно. Комбо из жестов можно даже вместо ключа-пароля использовать на любом утюга с вебкой:)
Отдельное спасибо за рабочую цепочку транслятлров весов модели, очень намаялся с этим, когда работал с YOLO.
Если вы так же как и я не поняли разделения и противопоставления, Кейси сама начинает свои статьи с тезиса, что настоящих сайентистов настолько мало, что она придумала делить их на подвиды по исполняемым функциям. И идеальный сайентист в её представлении это аналитик+статистик+ML/AI экспертиз.
Разумно, но вообще не принято, особенно в русскоязычном комьюнити.
По вашему профилю классифаеда скорее ожидаешь увидеть команду DS аналитики в плане оценки жилья, антифрода и прочего, а не CV и NLP. Очень интересно, какие основные проекты, наверняка есть о чем рассказать.
Молодцы, если заработает — позволит разгрузить и людей и аппаратуру, уменьшит очереди где они не нужны.
А каких объемов был датасет? Сами собирали-размечали? Давали примеры с некашляющими людьми? Брали людей разных полов, национальностей и возрастов?
Ну и самый очевидный вопрос — не проще использовать звук? :)
А как откликались, если не секрет? Отдельно под каждую компанию резюме под нужды каждой? Лично писали или через стандартные формы? У вас какая-то запредельная конверсия откликов в ответы, хочется узнать секрет успеха :)
Профиль крутой, но все же.
И ещё вопрос, если можно. Не ощущаете ETL после DS скучным?
С одной стороны, я вполне понимаю, что часто люди просто выгорают и шансов удержать все равно нет. Ну нет в компании других задач, подходов и руководителей. Часто к этой точке уже и удерживать не хочется, человек все равно еле работает. С другой, это не значит что надо сидеть i'm fine до того момента, как человек посреди проекта принесет заявление.
У нас был случай, когда уволился разработчик, который только что перенял огромный и критичный блок у другого только что уволившегося. И эта передача явно подтолкнула его быть сговорчивее при переходе. Было шумно, расстались плохо, но в общем и целом все живы.
Огромное спасибо за то, что вы делаете. Это очень круто, что пытаетесь залезть в эту "аналоговую" задачу с ИТ стороны.
Я подумал — а это точно эффективно, использовать дрон и анализ фотографий в поиске? Объясню, что имею ввиду. Я подозреваю, что когда по лесу идет поисковик, он в основном ориентируется либо на движение, либо на звуки потерявшегося человека. Реально увидеть лежащего человека тяжело, особенно, если он не в куртке неестественного цвета. Можно заметить движение, еще проще пойти на звук. Радиус "детекции" невооруженным глазом, неверное, метров 10 — просто заметить неподвижного человека, метров 15-20 для движения и метров 50 для звука. Конечно, цифры условные.
Я это к чему. Может было бы эффективнее использовать дрон как носитель громкоговорителя и микрофона? Или каким-то другим способом использовать именно звук, раз уж он в лесу/поле проходит лучше, чем картинка.
Т.е. Яндекс из всех своих сервисов готовит некоторую деперсонифицированную выгрузку с захэшированными почтой, телефоном и неподписанными столбцами факторов.
Передает эту выгрузку новому юрлицу, в этих данных нет ни грамма персональных данных.
Аналогично поступают банки, только готовят выгрузку с информацией о выплате кредитов.
Скоринговое ООО готовит не менее скоринговую модель на базе этих двух выборок, формально не прикасаясь к персональным данным.
Далее банки просят яндекс скоринг оценить клиента, используя опять же хэшированные данные. При некоторой сноровке, можно даже использовать разные алгоритмы хэширования почты и телефонов в обучающей выборке и для собственно скоринга, чтобы модель не использовала в явном виде кредитную историю конкретного человека.
Но да, ласточка выручает, если не забывать за неделю покупать билеты.
На счет 2 часов — до жд вокзала еще нужно добраться, у нас это полчаса-час.
В плане жизни — очень на любителя. Я бы с удовольствием жил там (желательно поближе к Адлеру, олимпийскому парку) 8-9 месяцев несезона, а на лето уезжал. Сезон здесь — стихийное бедствие, которое однако всех кормит. Из-за этого отношение к людям очень своеобразное, особенно не к своим местным. Очень много культур, все смешаны, все с перчинкой. В море местные не купаются, отдыхать улетают. Все лучшее туристам, так сказать.
Отдельная песня — Роза Хутор и весь горный кластер, который тоже формально Сочи. Очень красиво, очень дорого зимой. Но побывать стоит.
Честно, мне нравится, что живем мы именно в Краснодаре, а не в Сочи. Море все еще воспринимается как подарок, нет туристов. Есть все блага цивилизации в виде театров, музеев и нормальных магазинов, в Сочи с этим уже тяжело. Но ездить туда нелетом очень любим.
То же самое со случайным общением. В Красноярске кондуктор в автобусе может не говорить и не слышать ни слова в свой адрес очень долго — у нас не принято просто так здороваться, благодарить по мелочи и т.п. В Краснодаре случайные взаимодействия везде и всюду. И постоянно здороваешься, шутишь, благодаришь и т.д. Вроде мелочь, а настроение другое.
В плане душевности и прочего ничего сказать не могу. Мое мнение — везде люди +- одинаковые в плане моральных качеств.
Переехал из Сибири пару лет назад.
1) климат. С ним меньше всего проблем. Жару вы либо переносите, либо нет. Если да, то никаких проблем даже у сибиряка. Ну и да, +35 в Краснодаре воспринимаются как +30 сибирских. И +10 краснодарских воспринимается как легкий минус в Сибири. Почему — загадка.
2) море. 150км — это 3-4 часа в сезон, иногда еще больше. Ибо
3) пробки. Пробки всегда и везде, в городе и за городом, в центре и на окраинах. Ибо
4) общественный транспорт. Он не работает. Город очень большой по площади, много частного сектора. При этом нормальных маршруток нет, адекватно ходят только трамваи, но не в дождь. Такси раньше было очень дешевым, сейчас цены ощутимо поднялись. Поездки на море всегда отдельное приключение, это определенный талант добраться туда за адекватное время
5) культурная жизнь. Чем меньше в ней государственного/муниципального, тем интереснее. Государственные театры/музеи не особо пытаются работать
6) огромное количество понаехалов в духе меня. Половина приехала из соседних станиц, половина со всей остальной страны. Коренного краснодарца еще найди
7) и все равно я люблю Краснодар :). За периодические +15 в январе, за возможность съездить на море не в сезон. За то, что у меня 2 комплекта одежды — летний и синтепоновая куртка. За общую приветливость, которой так не хватало в Сибири.
У южных городов у каждого свой колорит. И Ростов, и Краснодар, и Сочи — они очень разные.
Серьезно. Менеджмент в крупных компаниях видит 3 основные точки приложения своих умений:
1) заседания в более высоких кабинетах (как вариант у заказчика)
2) набирать задач, чтобы под них можно было (потом) выбивать кадры, а в будущем за счет этого переименоваться самому во что-то более крупное
3) поиск крайнего, на которого списать факап
При этом с подчиненными можно вообще не работать, да что там, не общаться, не знать как зовут и кто что делает. В итоге кошмарный разрыв в линейном руководстве и то самое выгорание.
Ларри — не гуру коммуникации. Он не умеет лепить красивые презенташки, не умеет руководить людьми, а благодаря горе-менеджменту даже не видит фронта работ дальше одного спринта. Он не может что-то менять, у него нет на это полномочий. У него есть профессиональный навык и он продал его компании. И он делится своим заработком (а производит продукт и генерирует прибыль здесь именно он, а не его менеджер) с руководством в обмен на то, что оно будет коммуницировать, оптимизировать процессы, находить точки приложения его компетенции, мотивировать и т.д. И похоже, руководство не очень справляется.
Работать точно будет, даже достаточно эффективно. Одна беда, люди, которые могут найти более человечное место, уйдут очень быстро. Останутся либо те, кто не сможет найти, либо те немногие, кому действительно совсем не нужно общение на работе.
Для простых задач не критично, конечно, но что-то действительно интересное в такой обстановке, мне кажется, не создать. Просто слишком жесть. Вот избавиться бы от абсолютизма, сделать поправку на то что люди не машины, и как все лучше было бы.