Лучшие инструменты с открытым исходным кодом и библиотеки для Deep Learning — ICLR 2020 Experience

• Блог компании ГК ЛАНИТ,
• Python,
• Data Mining,
• Big Data,
• Машинное обучение

• Перевод

Сложно найти на Хабре человека, который не слышал бы про нейронные сети. Регулярные новости о свежих достижениях нейронных сетей заставляют удивляться широкую публику, а также привлекают новых энтузиастов и исследователей. Привлеченный поток специалистов способствует не только еще большим успехам нейронных моделей, но и приводит к развитию инструментов для более удобного использования Deep Learning подходов. Помимо всем известных фреймворков Tensorflow и PyTorch активно развиваются и другие библиотеки, нередко более гибкие, но менее известные. 

Эта статья является переводом одного из постов neptune.ai и освещает самые интересные инструменты для глубокого обучения, представленные на конференции по машинному обучения ICLR 2020. 

Читать дальше →

Мой новый коллега – цифровой аватар. Как и зачем компании создают фотореалистичные 3D-модели людей

• Блог компании ГК ЛАНИТ,
• Работа с 3D-графикой,
• Графический дизайн,
• Искусственный интеллект,
• AR и VR

Когда за три недели до окончания съемок «Гладиатора» умер Оливер Рид – актер, игравший роль тренера гладиаторов Антония Проксимо, – создателям фильма пришлось срочно переписывать сценарий так, чтобы Проксимо погиб по ходу действия, а недостающие сцены создавать с помощью дублера и компьютерных эффектов. Тогда, 21 год назад, 160 секунд киноленты с участием «цифрового Рида» обошлись в 3,2$ млн. А сейчас благодаря развитию технологий, по нашим оценкам, можно было сократить бюджет раз в тридцать, и за эти деньги не просто сделать цифрового двойника актера (digital double) для нескольких сцен, а создать его полную гиперреалистичную 3D-модель и дальше снимать с ней кино без ограничений во времени и пространстве. Наша команда как раз и работает над созданием таких аватаров. В этом посте я расскажу, зачем они нужны помимо кино и что любопытного мы узнали во время собственных экспериментов.

Читать дальше →

Savochkin 8 сентября 2020 в 10:06

“Чистый код”: пять ключевых моментов из обязательной к прочтению книги для программистов

• Блог компании ГК ЛАНИТ,
• Программирование,
• Системное программирование,
• Читальный зал

• Перевод

Недавно я написал о «Пять книг, которые изменили мой стиль программирования». В комментариях несколько читателей рекомендовали «Чистый код» Роберта С. Мартина. В результате я прочитал книгу и нашел ее достойной углубленного обзора.

Читать дальше →

LinuxCertifiedInstructor 1 сентября 2020 в 10:13

Как устроена графика в Linux: обзор различных сред оформления рабочего стола

• Блог компании ГК ЛАНИТ,
• Настройка Linux,
• Графические оболочки,
• Разработка под Linux

Эта статья о том, как устроена графика в Linux и из каких компонентов она состоит. В ней много скриншотов с различными реализациями сред рабочих столов. 

Если вы не сильно различаете KDE и GNOME или различаете, но хотели бы узнать, какие еще есть альтернативы, то эта статья для вас. Она обзорная, и хотя в ней много названий и немного терминов, материал будет также полезен начинающим и только посматривающим в сторону Linux.

Тема может заинтересовать и продвинутых пользователей при настройке удаленного доступа и при реализации тонкого клиента. Часто встречаю вполне матерых линуксойдов с утверждениями «на сервере только командная строка, и графику подробнее изучать не планирую, так как это всё нужно для простых пользователей». Но даже знатоки Linux с большим удивлением и радостью открывают для себя опцию «-X» у команды ssh (а для этого полезно понимать работу и функции X-сервера).

Источник

Читать дальше →

samy1010 25 августа 2020 в 11:02

Уроки волшебства для кота, дейтинг для беременных и астрология

• Блог компании ГК ЛАНИТ,
• Data Mining,
• Big Data,
• Машинное обучение

Data Scientists узнают, что интересует людей и на что они тратят деньги

В ходе исследований различных аудиторий Data Scientists наблюдают как закономерные, так и удивительные факты, которые ярко характеризуют социум вокруг нас. В этой статье я расскажу о тех курьёзах и необычных случаях, которые заметила при выполнении задач, связанных с аудиторным анализом, исследованием интересов пользователей Интернета и покупательского поведения различных социальных групп. 

Какие социологические особенности удалось выяснить благодаря применению моделей машинного обучения? Что мы знаем о покупателях? 
 

Источник

Читать дальше →

aimfirst 18 августа 2020 в 10:01

Проектные решения: игра по твоим правилам

• Блог компании ГК ЛАНИТ,
• Управление разработкой,
• Управление проектами,
• Agile,
• Atlassian

Не секрет, что чем крупнее программный проект, тем больше его успех зависит от результатов работы аналитиков, в частности, от выбора правильной стратегии составления и согласования проектных решений. Однако как организовать работу этих творческих сотрудников? И как сделать так, чтобы результаты их деятельности были одинаково понятны как  представителям заказчика, так и программистам? Как оценить возможные сроки выполнения и значимость этой работы для проекта? В этой статье я попытался сформулировать свои рецепты оптимизации управления аналитической работой на проектах по созданию программного обеспечения для государственных заказчиков. Приветствуется любая критика.

Источник

Читать дальше →

sheltata 11 августа 2020 в 10:06

Как прекратить страдать и начать учиться

• Блог компании ГК ЛАНИТ,
• Учебный процесс в IT,
• Управление персоналом,
• Карьера в IT-индустрии,
• Мозг

Успели во время самоизоляции стать суперэффективными и освоить пару новых специальностей? Тоже нет? А ведь все вокруг трубили: «Используй это время с пользой! Кризис – всегда точка роста». Оказывается, это совершенно нормально, если вы не нашли в себе сил начать осваивать новый язык программирования или вышивание гладью. Психологи говорят, что сильный и продолжительный стресс вредит обучению, а мы все это время прожили в условии постоянно меняющихся правил. Однако хватит «выученной беспомощности», впереди еще много перемен, и суперэффективность нам может пригодиться. 

Я поговорила с преподавателями «Сетевой Академии» (кстати, нашему учебному центру 30 августа исполняется 25 лет!), чтобы узнать, что они думают про обучение дома, и собрала все мысли в этом посте: действительно ли это было время возможностей? Что поможет обучению, если всё вокруг мешает процессу? Чему и где учиться онлайн? Они дали свои рекомендации и рассказали о достойных образовательных платформах.

Кстати, нашим преподавателям самим пришлось во время карантина срочно перестраивать учебный процесс, переформатируя его в онлайн. Так что они прекрасно знают, каково это – разрываться между работой, бытом, домочадцами и мониторингом новостей, при этом неотрывно следуя концепции непрерывного обучения.

Читать дальше →

sheltata 10 августа 2020 в 16:40

«Сетевая Академия ЛАНИТ» проводит опрос об обучении

• Блог компании ГК ЛАНИТ,
• Исследования и прогнозы в IT,
• Учебный процесс в IT,
• Статистика в IT

Нашему учебному центру «Сетевая Академия ЛАНИТ» в августе исполняется 25 лет. Нам интересно проанализировать, как изменились подходы организаций к обучению сотрудников, и мы будем рады поделиться этим исследованием с вами.

В этом году нам пришлось сильно измениться – из-за пандемии трансформировался весь рынок корпоративного обучения. Чтобы выявить тренды, предлагаем вам ответить на несколько несложных вопросов об обучении в вашей компании.

В благодарность за ваше время мы дарим вам промокод — все курсы нашей образовательной платформы за 25% от стоимости.

Опрос «Сетевой Академии ЛАНИТ» о корпоративном обучении в кризис

Как мы разрабатывали кроссплатформенную BPMS

• Блог компании ГК ЛАНИТ,
• .NET,
• Микросервисы

Всем привет!

В НОРБИТ мы занимаемся SRM-решениями. Сегодня расскажем про особенный для нашей команды проект — разработку BPMS-платформы NBT. Мы не просто создали бизнес-решение для заказчика, а разработали собственный продукт с нуля, — всё это подразумевает совершенно другой подход к проектированию, разработке, управлению командой, организации процессов доставки изменений и планирования выпусков. 

В общем, в статье не только красивая КДПВ. Ещё вы узнаете:

• про наш опыт проектирования микросервисной архитектуры (выбор инструментов, подходов к использованию этих инструментов, а именно абстрагирование их использования);
• про разработку конструктора бизнес-объектов и внедрение в решение конструктора бизнес-процессов для обеспечения подхода Low-code development;
• про то, как мы организовали работу над проектом и избавили разработчиков от некоторых рутинных или отвлекающих их аспектов при работе над системой (абстрактные межсервисные взаимодействия, автогенерация кода, атмосфера в команде);
• и про то, какой мем помогал нам в сложные периоды.

Источник

Читать дальше →

Digital Practitioner Body of Knowledge — обзор инструкции по цифровой трансформации для практиков

• Блог компании ГК ЛАНИТ,
• Профессиональная литература,
• Управление продуктом,
• Читальный зал

Относительно недавно вышёл фреймворк Digital Practitioner Body of Knowledge. Эта работа освещает крайне актуальную тему — запуск цифрового продукта и бизнеса. Моя статья — краткий обзор этого материала. В нём упоминаются популярные техники, которые применяются в различных аспектах деятельности цифрового предприятия. 

По DPMBoK я готовил внутренний методологический материал. По-моему, этой весной всем стало понятно, что сегодня почти не осталось бизнеса, которому не требуется осуществить цифровую трансформацию, а данный пост может ввести в курс дела всех интересующихся этой темой или открыть интересную дискуссию в комментариях.

Источник

Читать дальше →

Savochkin 21 июля 2020 в 11:01

Программное обеспечение дешевле в мелкой таре

• Блог компании ГК ЛАНИТ,
• Программирование,
• Управление разработкой,
• Управление проектами,
• Читальный зал

• Перевод

Предлагаю вашему вниманию перевод статьи, в которой высказывается интересная точка зрения на размер релизов/задач при разработке информационных систем. По мнению Аллана Келли, при разработке ПО отсутствует экономия на масштабе, а при увеличении объема задач/релизов экономика только ухудшается. Статья содержит примеры и доводы, иллюстрирующие это, и автор рекомендует стараться ставить небольшие и конкретные задачи, работать более мелкими релизами. Пытливый читатель сразу задаст вопросы: «Можно ли из этого сделать вывод, что необходимо максимально уменьшать размер задач/релизов? Где же тогда этот предел? Нужно ли выводить в продуктив по одной строчке кода?» Эти вопросы, к сожалению, не раскрыты в статье. По моему личному опыту, в имеющихся условиях у команды существует некоторый оптимальный размер задач/релизов, который определяется зрелостью процессов, спецификой культуры команды и уровнем развития инженерных практик. Для кого-то это три месяца, для кого-то это одна неделя, кто-то способен работать в режиме  непрерывной поставки… Однако если инвестировать в то, чтобы команда научилась бы работать меньшими задачами/релизами, то это впоследствии принесет долгосрочную отдачу.

Читать дальше →

Когда город умный: опыт мегаполисов (продолжение)

• Блог компании ГК ЛАНИТ,
• Беспроводные технологии,
• Искусственный интеллект,
• Транспорт,
• Урбанизм

Сегодня мы снова решили поделиться достижениями ведущих мегаполисов в организации жизни горожан. В прошлом посте речь шла об инфраструктуре умного транспорта, современных телекоммуникациях, контактах с правительством, а также средствах видеонаблюдения и обеспечения безопасности. Это всё, конечно, останется и будет развиваться, но коронавирус добавил новых серьёзных задач – как обеспечить социальную дистанцию в городских пространствах, как разделять потоки людей, как привести бесконтактные технологии в сферы, которые ранее основывались на тесном взаимодействии людей, – прежде всего, в здравоохранение. Итак, посмотрим, какие из уже имеющихся технологий сейчас будут в приоритете.

Источник

Читать дальше →

Использование методов анализа графов для поиска аномалий

• Блог компании ГК ЛАНИТ,
• Промышленное программирование,
• Машинное обучение,
• Искусственный интеллект

• Перевод

Несмотря на то, что описание данных с помощью графов практикуется еще с позапрошлого столетия, использование их в решении повседневных задач по анализу данных лишь набирает обороты. Хотя основное внимание уделяется, как водится, графовым эмбеддингам и сверточным сетям, маленькие шаги предпринимаются и в алгоритмах по поиску аномалий или антифроде. Основная обзорная статья, на которую ссылается большинство специалистов в своих в докладах и публикациях, — Graph based anomaly detection and description: a survey от авторов Leman Akoglu, Hanghang Tong, Danai Koutra (Akoglu, 2015). Мы в CleverDATA решили рассказать Хабру об этом практически единственном материале по теме и предлагаем вашему вниманию его саммари.

Первый граф Российского царства Борис Петрович Шереметев. Аномалий не обнаружено.

Читать дальше →

Как цифровой бизнес спасёт мир. Теперь уже точно

• Блог компании ГК ЛАНИТ,
• Исследования и прогнозы в IT,
• Статистика в IT,
• Будущее здесь,
• Урбанизм

• Перевод

Не так давно все мы стали свидетелями того, как цифровые сервисы и решения, облегчили и даже спасли жизнь людей во время изоляции. Примеров множество. Люди могли продолжать работать, лечить, обучать, заниматься спортом с помощью целого ряда платформ конференц-связи. Они активно пользовались сервисами заказа средств индивидуальной защиты, продуктов, медикаментов. Государство и бизнес сумели оперативно скоординироваться и запустить порталы Все.онлайн и Доступвсем.рф. Существенно расширился перечень государственных онлайн-услуг. Если для многих в эпоху «до пандемии» утверждение, что переход на цифру является жизненной необходимостью, было лишь громкими словами, то теперь стало очевидно — и в горе, и в радости цифровые инструменты являются залогом устойчивости бизнеса, его выживания и развития. 

Строго говоря, пандемия коронавируса только ускорила уже давно назревавший процесс неизбежного во всех секторах цифрового преобразования, стала его катализатором, заставила сменить приоритеты представителей оффлайн экономики. Например, она подтолкнула Х5 Retail Group к масштабированию сервиса экспресс-доставки «Пятерочки», а Сбербанк — к расширению спектра доставки Сбер-Маркета и запуску сервиса для поддержки людей старшего поколения в рамках DocDoc.

В этом контексте нашей команде в ЛАНИТ показалась очень полезной вышедшая не так давно статья Брайна Вонга, вице-президента из Alibaba Group — компании, являющей один из гениальных примеров успешных бизнес-экосистем. Предлагаем вашему вниманию перевод этой статьи и призываем поговорить в комментариях, действительно ли, по вашему мнению, кризис — это время возможностей, и оказались ли адепты цифровизации в более выгодном положении в период пандемии. 

Источник: REUTERS / Джон Сибли

Читать дальше →

В поисках обеда: распознавание активности по данным фитнес-трекера

• Блог компании ГК ЛАНИТ,
• Data Mining,
• Big Data,
• Машинное обучение,
• Data Engineering

Мне посчастливилось участвовать в проекте SOLUT, который стартовал в ЛАНИТ около года назад. Проект развивается благодаря активному участию Центра компетенции больших данных ЛАНИТ (ЦК Дата), и главное технологическое новшество проекта заключается в использовании машинного обучения для мониторинга человеческой активности. Основным источником данных для нас являются сенсоры фитнес-трекеров, закрепленные на руках работников. В первую очередь, результаты распознавания помогают поднять производительность труда и оптимизировать производственные процессы на стройке. Также анализ поведения рабочих позволяет отслеживать самочувствие человека, соблюдение техники безопасности и напоминает строителям про обед.

Источник

Читать дальше →

Savochkin 16 июня 2020 в 10:01

10 идей из книги «Как управлять интеллектуалами»

• Блог компании ГК ЛАНИТ,
• Профессиональная литература,
• Управление проектами,
• Управление персоналом,
• Читальный зал

Жизнеспособна ли ваша команда? Должен ли руководитель кодить? Всегда ли инженеры ненавидят процессы? Какими должны быть регламенты? Как оценивать производительность инженеров? Почему так важны тет-а-теты? Как побыстрее «свалить» с совещания? Почему в Кремниевой долине так любят плоские организационные структуры? Если эти вопросы для вас актуальны, то вам стоит почитать книгу «Как управлять интеллектуалами. Я, нерды и гики» Майкла Лоппа. Книга будет полезна тем, кто хочет более осознанно заниматься управлением инженерными командами. Предлагаю подборку важных идей книги.

amazon litres

Читать дальше →

Использование Deep Packet Inspection для выявления индикаторов компрометации

• Блог компании ГК ЛАНИТ,
• Информационная безопасность,
• Антивирусная защита,
• IT-инфраструктура,
• Сетевые технологии

• 🔥 Технотекст 2020

Всем привет!

Я занимаюсь информационной безопасностью в компании «ЛАНИТ-Интеграция». Пока большинство офисных сотрудников работает из дома, используя сервисы и рабочие столы компании дистанционно, хочу поговорить про то, как бизнес защищает свои активы от внешних угроз. Географически распределённая инфраструктура приумножает риски информационной безопасности, так как увеличивается количество точек входа в информационную систему организации. Эта статья о том, какие инструменты мы можем использовать при расследования инцидентов информационной безопасности.

В сфере компьютерной безопасности IOC — это объект, наблюдаемый в сети или операционной системе, который с большой долей вероятности указывает на компрометацию устройства. К таким объектам могут быть отнесены обнаруженные сигнатуры вирусов, хеш-суммы вредоносных файлов, адреса командных серверов ботнетов. Индикатор компрометации используется для раннего обнаружения попыток проникновения в компьютерные системы и первичной оценки возможной угрозы.

Уровень защищенности инфраструктуры любой компании или предприятия оценивается по наименее защищенному объекту инфраструктуры — это может быть автоматизированное рабочее место или сервер. Поэтому важно находить скомпрометированные узлы в корпоративной или технологической сети организации и устранять причину их компрометации.

Читать дальше →

Будущее наступает: китайские роботы приехали в Россию

• Блог компании ГК ЛАНИТ,
• Разработка робототехники,
• Робототехника,
• Научно-популярное,
• Будущее здесь

Несколько месяцев назад в Россию из Китая приехали роботы от Ubtech Robotics — Aimbot, Cruzr и Alpha Mini. Мы первыми их получили и протестировали. В этой статье поделимся опытом распаковки, покажем, как один робот мониторит наш ЦОД, а другой — до разгара пандемии встречал посетителей в офисе.

Читать дальше →

Consyst 1 июня 2020 в 12:25

Опрос ИТ-руководителей об изменении потребностей в ИТ-услугах

• Блог компании ГК ЛАНИТ,
• Исследования и прогнозы в IT,
• Конференции,
• Статистика в IT,
• Удалённая работа

«Консист Бизнес Групп» при поддержке группы компанийЛАНИТ и отечественного вендора бизнес-систем ТУРБО проводят исследование изменения потребностей в ИТ-услугах в российских компаниях.

Читать дальше →

evgdmitrieva 26 мая 2020 в 10:01

Как живые: наш опыт редактирования старых фотографий

• Блог компании ГК ЛАНИТ,
• Обработка изображений,
• Машинное обучение,
• Искусственный интеллект

Семейной историей мы с мужем занимаемся уже лет десять. Накопилась большая база черно-белых фотографий по каждому из сотен предков и их родственников. Самое важное на таких фото — это, конечно, лица людей. Чтобы делиться с роднёй и публиковать в интернете, хочется иметь эти фото в хорошем качестве, находить новые, интересные детали.

Революцией в этой сфере для нас в последние месяцы стало появление ряда программ и сервисов, которые в совокупности и при правильном использовании позволяют любому человеку легко ретушировать и расцвечивать старые семейные фото. Результат — реалистичные, чёткие, красивые кадры из старых, зернистых, нерезких и часто поврежденных фото. В большинстве случаев не требуется использование фотошопа.

Хотим поделиться со всеми, кому интересно это ремесло, теми программами, которые мы открыли, а также некоторыми способами их комбинирования в правильном порядке. Речь пойдет об онлайн-приложении Remini, сервисе «Компьютерное зрение от почты mail.ru», приложении Google Snapseed, а также о ряде других штуковин. 

Читать дальше →