Обновить
-6
Алексей@java3000

Администратор windows умеющий в программирование

Отправить сообщение

Apache Spark 3.4 для Databricks Runtime 13.0

Время на прочтение10 мин
Охват и читатели2K

Databricks — это аналитическая платформа для облачных вычислений, работы с большими данными и машинного обучения. Компания разрабатывает data lake и работает с фреймворком Apache Spark. Приводим перевод статьи Databricks о нововведениях Apache Spark 3.4, который вошел в релиз Databricks Runtime 13.0.

Читать далее

Как мы проходили кризисы 2020-2023 и как заранее готовились к ним

Время на прочтение10 мин
Охват и читатели19K

Прикол этого поезда на Шри-Ланке в том, что если смотреть вперёд, повышаются шансы встретиться со стенкой тоннеля

Вообще, 90% работы делается до кризиса: вы занимаете нужную позицию, накапливаете ресурсы, строите информационную сеть. А потом наступает коллизия.

В 2019 году мы как компания знали, что не готовы к крупным кризисам, поэтому сели и выписали 20 самых серьёзных по последствиям и масштабу ситуаций. И на каждую прописали подготовку + действия во время эскалации. В случае с билетами и отелями это, знаете ли, пригодилось.

Многие вещи надо делать заранее. Например, если бешеный экскаватор отрезал вам дата-центр, хорошо бы иметь второй и третий, механики переключения, время от времени проводить учения, вот это всё. С возрастом вы узнаёте, что на стойке в офисе должен лежать договор аренды, причём «Погодите, я сейчас распечатаю» явно не работает, надо именно готовую нотариальную копию. Должны быть механики резкого расширения колл-центра, приоритезации разных задач на случай перегрузок (прям сортировка по Пирогову, сначала пассажиров с отправлениями сегодня, потом остальных) и так далее. То есть для многих сценариев надо подумать и сделать что-то заранее. В рамках подготовки среди прочего мы поняли, что нужно зачистить собственные соцсети, перестать общаться в «грязных» мессенджерах, снести некоторые антивирусы, поговорить с адвокатом про коллизии в его практике.

В общем, у нас создалось полное ощущение, что мы подготовились. Первый же кризис — пандемия-2019 — показал что мы готовы чуть менее, чем никак.

То есть даже не так. Медленные решения мы принимали отлично, а вот тактический уровень очень сильно пострадал. В общем, для начала давайте вернёмся в апрель 2020. Помните те милые времена, когда горела Австралия и какой-то вирус показывал нездоровую контагиозность?
Читать дальше →

Создание игры в стиле GameBoy в 13 КБ

Уровень сложностиСредний
Время на прочтение9 мин
Охват и читатели7.6K

В прошлом году я решил поучаствовать в гейм-джеме js13kgames. Это длящееся один месяц ежегодное соревнование по созданию с нуля игры на JavaScript, которая должна уместиться в 13 КБ (в zip). Места как будто не очень много, но с достаточным количеством креативности при таких ограничениях можно достичь многого. Просто взгляните на потрясающие примеры прошлых лет:


Хотя в прошлом году моя игра заняла не такое высокое место, я всё равно хотел бы поделиться своими открытиями, сделанными в процессе её разработки.

Мне захотелось сделать игру, напоминающую о ретроэпохе игр на портативных консолях с их уникальным квадратным экраном, низким разрешением и видом сверху вниз. Я решил реализовать быстрый геймплей в стиле action-RPG с простым, но увлекательным геймплеем, мотивирующим игрока продолжать игру. С музыкой всё было очевидно — звуковые эффекты должны быть похожими на звуки аркадных автоматов.

Поиграть в мою игру можно на странице Gravepassing сайта JS13KGames. Полный код выложен на GitHub.
Читать дальше →

OpenVMS: операционная система для атомных станций. Настройка сети и активация лицензий

Время на прочтение16 мин
Охват и читатели6.4K

Продолжаем наше увлекательное погружение в операционную систему OpenVMS. В первой части мы установили её внутри виртуальной машины VirtualBox и освоили процесс подключения через Telnet-клиент. Теперь пришла пора активировать первую лицензию на сеть, установить OpenSSH и затем активировать все остальные лицензии. Без долгих вступлений — приступим.

Читать далее

Каково это — быть операционной системой?

Уровень сложностиПростой
Время на прочтение4 мин
Охват и читатели17K

Pier-Luc Brault придумал забавную игру, которая превращает вас в... операционную систему. Некий пользователь загружает нас процессами, которые нужно распределять по свободным CPU. Если мы будем плохо справляться с задачей, пользователь выйдет из себя и перезагрузит нас. Game over.  

Читать далее

Индуктивная нагрузка биполярного транзистора

Уровень сложностиСредний
Время на прочтение15 мин
Охват и читатели13K

В книгах со времен рассвета полупроводниковой импульсной силовой схемотехники отечественного (СССР) и зарубежного производства, авторы зачатую прибегают к рассказу принципов работы того или иного устройства основываясь лишь на базовых схемотехнических постулатах, без явного объяснения происходящих внутри биполярного транзистора уникальных явлений. Так, к примеру, подавляющее количество литературы, в частности посвященной описанию принципа работы, разработки и дальнейшего расчёта импульсных источников питания (далее ИБП), не объясняет природы переходных процессов, происходящих в биполярном транзисторе с индуктивной нагрузкой. Данная статья является попыткой автора систематически собрать воедино многие фрагменты знаний электроники и электротехники, с целью избавления следующего поколения пытливых умов от необходимости самостоятельного анализа кривых напряжения и тока в разных участках схемы. Так же в данной работе на конкретном примере продемонстрирован процесс анализа и введения необходимых уточнений и допущений для поддержания корректности дальнейшего повествования.

 В далее излагаемом материале простейшей схемой ИБП (далее ПИБП) автор называет автогенераторную схему, реализованную на минимальном количестве элементов (см рис.1).

Читать далее

Родословная газировки

Уровень сложностиПростой
Время на прочтение9 мин
Охват и читатели7.3K

Сегодня газированные напитки представлены самыми разными брендами, которые предлагают потребителю многочисленные варианты газировки. Классическая история газированных напитков обычно начинается с английского химика Джозефа Пристли, который в 1772 году изобрел удобный для использования на борту корабля сатуратор для насыщения воды углекислым газом.

Врачи того времени считали, что такая газированная вода сможет приостановить цингу, главный бич всех флотов мира в дальних плаваниях. В нашем материале рассказываем о родословной газированного напитка.

Читать далее

Stripe — session 2023

Уровень сложностиПростой
Время на прочтение6 мин
Охват и читатели5.2K

Всем привет! 

Не так давно Stripe* провели конференцию на которой показали инновации своего сервиса. В этой статье я сделаю краткий обзор на презентацию и разбавлю своими комментариями.

Одно из первых видео под названием: Powering growth for the internet economy.

Первым выступает Patrick Collison, Cofounder and CEO и рассказывает, что миссия компании - увеличить ВВП Интернета и напоминает, что сейчас интересное время для финансовых сервисов, так как много чего произошло: сложно забыть, что пара крупных банков обанкротилось, инфляция и кредитные ставки улетели в космос и также замедлились обороты транзакций после пандемии.  Далее в духе презентаций Apple, Patrick отмечает рост компании и что в 2019 году Stripe уже обработал $216B (двести шестнадцать миллиардов долларов), однако в последующие 12 месяцев смогли достичь отметки в $1T (один триллион долларов). Так же количество подключаемых компаний выросло с 1600 до 4600 в неделю, а также количество клиентов с годовым оборотом в $1B (один миллиард долларов) превысило 100 клиентов. 

Ко всему прочему, Stripe внедрил множество инноваций и теперь хочет поведать о них. 

Слово передается Will Gaybrick, President of Product and Business. Он расскажет про 3 ключевых аспекта бизнеса, в которых компания провела инновации.

Читать далее

Ракету пустил и забыл. Или как заставить DI работать

Уровень сложностиПростой
Время на прочтение7 мин
Охват и читатели3.4K

Ваш первый день на работе. Вчера вы рассказывали про чистую архитектуру, SOLID принципы, и про то, как создавать аккуратную и масштабируемую архитектуру.

Сегодня нужно написать простенький экран, который будет отображать список. Вы с огромным энтузиазмом начинаете реализовывать прекрасный список - каталог товаров магазина. Один запрос, один список. Все сделали красиво, фрагмент создался, подтянул из DI ViewModel, которая в свою очередь передала остальным слоям, чтоб загрузить данные по АПИ и закешировать их. Все эти компоненты правильно освобождаются, так как все это сделано как надо отдельным Субкомпонентом с отдельным скоупом.

Следующий день, оказалось, что к списку нужно добавить расценки, однако их можно загружать только отдельным запросом. Этот запрос оказался тяжелым на сервере, так что каждый ответ может приходить дольше чем обычно, и сам запрос ко всему списку разбит на несколько подзапросов. При отправке запроса клиент должен выслать список наиболее просматриваемых товаров пользователем. Бэк при этом очень попросил лишний раз запросы не делать, так как сервер и так не справляется.

В одночасье, мы понимаем, что наша шаблонная архитектура превращается из легкой и понятной в сложную и нечитабельную. А все потому, что нам нужно прежде всего обеспечить жизненный цикл компонентов достаточно большим, чтобы эти компоненты успели: собрать информацию для запроса, выполнить долгие запросы, а может быть и несколько за раз, при страничной загрузке, сохранить ответы сервера и закешировать их, также сформировать один общий список товаров с 2 разных запросов и, наконец, выполнить фильтрацию и сортировку конечного списка.

Читать далее

Генетический алгоритм, нейросеть играет в догонялки

Время на прочтение4 мин
Охват и читатели6.5K

Нейронка (#) учится убегать от бота (@). Изначально она вообще не знает - что нужно делать. Однако, с каждым следующим поколением, эволюционным путем формируется требуемый паттерн поведения. На видео можно наглядно пронаблюдать, как с каждым поколением ей это удается все лучше и лучше. Это лишь один из запусков, в другой раз - поведение может быть иным, например - сетка может бегать вдоль стены по кругу.

Читать далее

Консоль мечты в 2023-ем году — Playstation 3

Уровень сложностиПростой
Время на прочтение7 мин
Охват и читатели48K

Лебединая песнь Sony! на втором месте, конечно, Steam Deck, на третьем — Nintendo Switch. Ну, а если говорить максимально серьезно, то у Playstation 3 есть несколько весомых преимуществ, делающих ее незаменимой даже в 2023 году.

?‍♂️Спасибо, Кэп!?‍♂️

Unity: Как реализовать бесконечный ListView с изображениями?

Уровень сложностиСредний
Время на прочтение19 мин
Охват и читатели3.6K

В этой статье я расскажу, как реализовать бесконечный ListView c изображениями.

Для реализации задуманного будем использовать Unity UI Toolkit в паре с UnityMvvmToolkit. Я уже писал про UnityMvvmToolkit статью вот здесь. С тех пор API притерпел значительные изменения, а точнее, произведен переход на реактивные свойства, плюс появилась поддержка генераторов исходного кода...

Читать далее

Assembler 6502 переключение CHR мапером MMC3

Уровень сложностиСредний
Время на прочтение8 мин
Охват и читатели1.5K

Одна из ключевых функций мапперов это переключить программных банков памяти и банков памяти с графикой CHR. Если брать для сравнение маппер MMC1 то он переключает графику постранично, по факту переключая полностью. MMC3 имеет 5 банков CHR памяти и позволяет их переключать по отдельности, не переключая полностью pattern table. Под катом подробности как это реализовать на ассемблере...

Читать далее

Когда робот тебя обманывает

Уровень сложностиПростой
Время на прочтение6 мин
Охват и читатели2.5K

Многие пользователи до сих пор не представляют, что ИИ-боты могут лгать. Причем не случайно дезинформировать человека, а лгать преднамеренно, что может быть задумано разработчиками. И проблема здесь в том, что после того как пользователь узнает о том, что робот ему солгал, у него может полностью пропасть доверие к ИИ. 

Читать далее

Какой язык программирования выбрать? Часть 4: Spark

Время на прочтение5 мин
Охват и читатели4.8K

Особенность Spark в том, что другого такого фреймворка нет в принципе. Flink, Apache NiFi и другие инструменты закрывают не все задачи. Лично моё мнение – Spark на голову выше их всех. Он уникален, широко распространён и де-факто является стандартом индустрии обработки больших данных.

Читать далее

Разработка составов высокопрочных сталей

Время на прочтение25 мин
Охват и читатели10K

Наше время часто называют компьютерным веком, веком искусственного интеллекта. При этом забывают, что мы продолжаем жить в эпоху железа. Оно окружает нас всюду: в виде столовых приборов и железной арматуры в бетонных стенах, из которых состоит наше жильё, в составе и деталях велосипедов, автомобилей, поездов, вагонов метро, кораблей, на которых мы ездим и плаваем, многочисленных трубопроводах, да и в корпусах компьютеров, серверов, жестких дисков. Технология производства железных изделий, зародившаяся всего лишь около 2500 лет назад, сейчас превратилась в мощную индустрию, по степени развития которой оценивают в том числе интеллектуальное состояние современных стран. Поэтому сегодня в блоге ЛАНИТ пойдет речь о том, как создаются высокопрочные стали, которые окружают нас каждый день.

Читать далее

Отвечаю на вопросы про экономический эффект машинного планирования на уральских цехах

Уровень сложностиПростой
Время на прочтение4 мин
Охват и читатели4.2K

Недавно я тут писала о системе календарного планирования для завода НЛМК в Калуге. В комментариях было много вопросов об эффектах этого решения и о том, кто в итоге лучше справлялся с планированием: система или может быть рабочий с 20-летним опытом. Этот пост своего рода развернутый ответ вопросы и комментарии.

Кому интересно узнать, какую экономию дает «машинное» планирование на примере прокатного цеха НЛМК-Урал, прошу под кат.

Читать далее

Получение данных виртуальной клавиатуры Android в web проекте

Уровень сложностиПростой
Время на прочтение7 мин
Охват и читатели2.5K

Постоянное взаимодействия помогает удерживать хоть какие то знания в голове, эта статья удержание знаний javascript.

А вдруг пригодиться?

Улучшаем BARSiC: как мы проверяли и совершенствовали алгоритм консенсуса в кластере

Время на прочтение6 мин
Охват и читатели3K

Привет, Хабр! В команде ВКонтакте существует система управления репликацией и консенсусом в кластере, которая называется BARSiC (Binary Asynchronous Replication with Simple Consensus). Прежде всего она контролирует состав кластера, определяя, кто реплика, а кто — мастер. А при выходе мастера из строя реплики выбирают нового с непротиворечивой линейной историей. 

Для решения этой задачи команда ВКонтакте совместно с университетом ИТМО работали над научно-исследовательским проектом «Разработка моделей для верификации распределенных алгоритмов в системе BARSiC». В этой статье подробно расскажем о том, как мы в рамках проекта верифицировали выбранный для BARSiC алгоритм, и попутно исправили найденную в нём ошибку. 

Читать далее

Почему здесь так жарко? Взламываем умный кондиционер

Время на прочтение15 мин
Охват и читатели23K


Многие производители кондиционеров сегодня выпускают устройства, которые можно подключать к Wi-Fi и управлять ими через приложение. Включение кондиционера и охлаждение воздуха дома, пока вы едете с работы — это настоящая мечта. Однако пользоваться приложениями производителей часто не так удобно, как более совершенным ПО для автоматизации дома, которое может интегрироваться с голосовыми помощниками Google и Amazon. Поэтому, когда один из нас переехал в квартиру с умным контроллером кондиционера, одной из приоритетных целей стал взлом этого устройства для работы с Home Assistant.

Начиная исследование, мы и не догадывались, насколько вопиющие уязвимости безопасности обнаружим; среди прочего, они позволяют полностью захватить кондиционер через интернет.

Читать дальше →

Информация

В рейтинге
Не участвует
Откуда
Москва, Москва и Московская обл., Россия
Дата рождения
Зарегистрирован
Активность

Специализация

Десктоп разработчик, Администратор серверов
Младший
От 110 000 ₽
Java
Java Spring Framework
RESTful WebServices.
PostgreSQL
SQL
Hibernate
Linux
Базы данных
Microsoft SQL Server
Разработка программного обеспечения