Data Engineering *

24 и 25 ноября 2021 года Ростелеком в третий раз проведет конференцию по управлению данными DataTalks 3.0, где ведущие эксперты крупных компаний поделятся практическим опытом управления данными. В мероприятии примут участие представители Gartner, Сбера, Яндекс.Go, Билайна, Tele2, консалтинговой компании BSSG, SAS Россия/СНГ, Accenture и другие.

Встреча будет интересна студентам, специалистам в области управления данными, аналитикам данных и дата-инженерам, Chief Digital Officer (CDO), а также представителям бизнеса и ИТ-специалистам смежных направлений.

Московский кредитный банк (МКБ) проводит онлайн хакатон для молодых специалистов по Data Science. Если вы студент последних курсов или начинающий специалист МКБ предлагает проявить свои таланты в области DS и выиграть отличные призы.

Компания Arenadata завершила финальное тестирование нового продукта на базе технологии Elasticsearch — Arenadata LogSearch 1.0. (ADLS). Это один из первых продуктов на российском рынке, который обеспечивает быстрый доступ к технологии Elasticsearch и возможность работать с ней в гетерогенной ИТ-инфраструктуре (bare-metal, clouds, multi-clouds). 

Arenadata LogSearch — это масштабируемая отказоустойчивая система, предназначенная для анализа и полнотекстового поиска. Технология Elasticsearch была разработана для полнотекстового поиска на базе библиотеки Apache Lucene. Основной функциональной особенностью библиотеки является обеспечение масштабируемой и высокоскоростной индексации данных (создание объектов внутри базы данных, соответствующих определённым критериям поиска). Подобные системы особенно актуальны, когда необходим поиск по сложным запросам: поиск фраз, включающих разные части речи или поиск по географическим координатам.

Ситимобил каждый месяц проводит митапы о применении Data science в городских и геосервисах, логистике и технологиях умных городов.

На митапе мы рассмотрим разные особенности применения современных технологий в геосервисах. Поговорим и о классическом data science в задачах прогнозирования времени прибытия, о проектирование data warehouse (DWH), чтобы можно было эффективно применять методы машинного обучения и строить дэшборды. А также продолжим говорить о Switchback-экспериментах (у нас уже был доклад об этом не первом митапе), которые часто просто незаменимы в геосервисах.
В этот раз в гости к Ситимобил придут коллеги из Самоката.

Ждём вас 28 октября в 18:00.  Регистрация

На вебинаре 21 Октября в 11:00 МСК руководитель направления по развитию решений (DataLake) Atos и инженер по решениям Cloudera расскажут об особенностях, ключевых отличиях озер от обычных баз данных и о сферах, в которых они будут наиболее полезны.

С 15 октября начнётся курс Нетологии «Введение в SQL и работу с базой данных». На пяти занятиях студенты изучат реальный кейс магазина, которому нужно собрать данные, настроить быстрый поиск информации и сформировать отчёты. После каждого урока обязательна практика и домашнее задание для закрепления навыков.

На митапе мы рассмотрим задачи оптимального планирования маршрутов, диспетчеризации и прогнозирования времени в пути с разных сторон. Поговорим о том, как применяются модели машинного обучения и динамическое программирование для решения этих задач, обсудим влияние внешних факторов. Таких, например, как пробки. А также поймём, как строить жизненный цикл подобных Data Science-решений, чтобы можно было эффективно их масштабировать и развивать под нагрузкой. В гости к Ситимобил придут коллеги из Optimate AI и Яндекс.Маршрутизации.

Ждём вас 12 августа в 18:00.  Регистрация

28-29 августа в подмосковном парке "Патриот" в рамках форума Армия 2021 прошел хакатон на тему искусственного интеллекта. Главным организатором хакатона выступило Новое Общественное Движение Цифровая Лига.

В хакатоне приняли участие молодые Data Science инженеры из Москвы, Московской области и Санкт-Петербурга. На хакатон пришло 10 команд в составе от 2 до 5 чел., всего 33 участника.

На протяжении 2-х дней участники решали задачу от ГосНИИАС, суть которой была в создании алгоритма на основе нейронной сети для обнаружения и классификации мишеней для стрельб.

Ситимобил запускает митапы о применении Data science в городских и геосервисах, логистике и технологиях умных городов.

Вместе с коллегами из Циан и Яндекс GO обсудим обработку геоданных, проведение экспериментов в продуктах, где пользователи могут быть объединены сетевым эффектом и многое другое.

Привет!

На связи Team Leads МегаФона Big Data Ваня Горбань и Артём Глазунов. Мы решили провести серию voice chats со спикерами из DS-сообщества, а потом эти записи смонтировать в выпуски подкаста «Данные люди».

Это будут эфиры про данные и людей, которые с ними работают. Их истории и деятельность, как они к этому пришли и куда идут. В каждом выпуске приглашаем известных в сообществе Data Science и за его пределами и просто очень интересных людей поговорить об анализе данных.

Все voice chats будут проходить в тг-канале @bigdatapeople.

​Ближайшее расписание эфиров:

18 августа — Алексей Драль (Founder & CEO BigData Team)

24 августа — Рубен Ениколопов, (PhD, Ректор Российской Экономической Школы)

2 сентября — Юрий Кашницкий (Senior ML Scientist @ Elsevier, к.т.н., лидер открытого курса по машинному обучению mlcourse.ai)

• Импорт данных в MATLAB
• Процесс подготовки данных для машинного обучения
• Метод быстрого обучения моделей и выбора лучшего алгоритма
• Способ создания независимого от MATLAB приложения

(r)evolution of retail

Если ваш конёк — работа с большими данными, приглашаем на Weekend Offer в X5 Group. 

Мы сокращаем дистанцию до двух дней: 6-го июня интервью, 7-го июня оффер.

Откликнуться можно тут https://your.gms.tech/v/v6xoYc1w?tg=apply&s=tg

Привет, Хабр! Сегодня хотим представить вам проект студентов магистратуры «Наука о данных» НИТУ МИСиС и Zavtra.Online (подразделении SkillFactory по работе с университетами) созданный на учебном "Межгалактическом Хакатоне 2021", который прошел в марте. Команда поделится решением выбранной задачи — предсказание победителя-бойца турнира UFC. Задача отличалась от прочих тем, что после написания модели из неё можно сделать целый продукт, оформив модель в приложение, готовое к использованию конечными пользователями, например теми, кто захочет обыграть букмекеров.

14-16 мая в OTUS пройдут соревнования для Дата инженеров и специалистов по машинному обучению. Участникам предстоит за 2 дня решить задачи в категориях Machine Learning и Data Warehouse.

Задания рассчитаны на специалистов с опытом в профессии около года. Но испытать свои силы может любой желающий — участие бесплатное.

X5 выходит на тропу митапов. 2 апреля приходите на онлайн #meetupХ5 по data-driven подходу в наших проектах. Обещаем – все только самое интересное и эксклюзивное от самых главных спецов Big Data X5. С соблюдением дистанции, но с широким виртуальным охватом спикеры Х5 не только поговорят о последних разработках Х5, но и ответят на ваши вопросы.