Хранение данных *

А что сейчас с низкоуровневым форматированием хардов? Можно ли, скажем, отключить или как-то пометить убитую сторону, например? Или вообще скомандовать девайсу перенанести служебную разметку, если посыпались ошибки позиционирования?

Как я понимаю, потребуется TTL UART и ломаный протокол команд? Чего там сейчас люди творят на этом поприще?

Эх, верните мне мою FAT с её bad clusters, тотальным host-managed RELO (хотя тогда и слова-то такого не было) и интерливингом секторов… славные времена, когда всё задавалось в файловой системе, а не где-то в чёрном ящике харда :(

Хотя полный host-managed всего на свете в ext4, включая контроль над SMR — это было бы ещё лучше :)

Что-то подумалось, а ведь сейчас мощности проца хватает с головой на обработку VHS в реальном времени, а где не хватает — там шейдеры в помощь.

Вывод видео сделать на SCART не проблема, китайские платы видеозахвата — тоже за пучок пятачок…

Кто-нибудь уже задумывался о софтовой реализации девайса «АрВид», чтобы максимально использовать полосу сигнала и запихнуть на кассету гигов хотя бы пять, приспособив таким образом к делу старый видак?

Или, может, лучше поступить наоборот — не натягивать слона на вантуз, приспосабливая PAL/SECAM для несвойственных ему целей, а взять механику видака и прицепить к головкам кастомный усилитель? Механика у меня где-то валяется, правда, увы, я не аналоговик ни разу :( но если удастся выжать гигов 20-30 на одну кассету, это была бы уже не игрушка, а вполне себе стример для бедных…

Google объявила о планах направить $1 млрд на строительство дата-центра в Великобритании. Центр обработки данных разместят на участке площадью 13 Га в городе Уолтем Кросс, расположенном примерно в 24 км от центра Лондона.

Британское правительство назвало инвестиции Google «огромным вотумом доверия» Великобритании. Инвестиции Google в размере $1 млрд свидетельствуют о том, что Великобритания — это центр передового опыта в области технологий, который имеет огромный потенциал для роста, заявил премьер-министр страны Риши Сунак.

В 2022 году Google приобрела офисное здание недалеко от Ковент-Гарден в центре Лондона за $1 млрд, а также ещё один объект в районе Кингс-Кросс, где корпорация строит новый офис и базируется её дочерняя компания в сфере ИИ — DeepMind.

Новый ЦОД Google поможет удовлетворить спрос на услуги в отраслях ИИ и облачных технологий, а также предоставит критически важные вычислительные мощности предприятиям по всей Великобритании, создавая строительные и технические рабочие места, отметила финансовый директор Alphabet Рут Порат. Численность персонала Google в Великобритании превышает 7 тыс. человек.

В ноябре прошлого года Microsoft объявила о намерении вложить $3,2 млрд в Великобританию. Финансирование запланировано на три года. Средства направят на увеличение мощности дата-центров Microsoft, чтобы поддержать будущие услуги в сфере ИИ.

Система резервного копирования RuBackup 2.0 получила обновление. В новой версии программного обеспечения (ПО) добавлены возможность журналирования событий информационной безопасности и аутентификация посредством Microsoft Active Directory, рассказали информационной службе Хабра в пресс‑службе «Рубэкап».

В свежей версии ПО появились такие обновления:

— в модуле для безагентного резервного копирования VMware vSphere изменены настройки по умолчанию для восстановления виртуальных машин;

— расширена и обновлена документация по ПО;

— стабилизирован механизм переключения с основного сервера RuBackup на резервный и обратно;

— выполнены точечные доработки на основе обратной связи от пользователей и исправлен ряд мелких ошибок, вызывающих некорректную работу системы и её компонентов.

С полным списком обновлений можно ознакомиться по ссылке.

❓100 Вопросов по Машинному обучению (Machine Learning) - Вопрос_10

?Вопрос_10: Что такок Tarantool и как он устроен ? (Часть_3)

1. Транзакции: В более новых версиях Tarantool была добавлена поддержка механизма транзакций. Транзакции позволяют группировать несколько операций в единую атомарную операцию, что обеспечивает целостность данных.

2. Разрешение конфликтов: Tarantool предоставляет механизм разрешения конфликтов при работе с репликацией и шардингом. Возможности разрешения конфликтов включают автоматическое разрешение конфликтов на основе временных меток и возможность управления конфликтами пользовательским кодом.

t.me/DenoiseLAB (Еесли вы хотите быть в курсе всех последних новостей и знаний в области анализа данных)

Недавно к нам обратился клиент, у которого потенциально 2 млн пользователей и ему нужно разработать стриминговый сервис, где 10К-20К пользователей могут смотреть медиа-контент в разрешении 4К онлайн.

Фильм 4К весит 5 гб, если 10К пользователей одновременно его смотрят, то это большая нагрузка на хранилище данных. Сложность в том, чтобы сбалансировать трафик на сервис, чтобы система не перегружалась, а пользователи не испытывали дискомфорта.

Чтобы этого добиться, нужно написать ПО таким образом, чтобы плеер или серверная часть отдала контент порционным пользователям. Так мы распределим нагрузку.

Для хранения контента на 2 млн человек, потребуется от 300-400 ТБ устойчивого хранилища. Нужно построить системы хранения данных.

Нужна защита хранилища, если какой-то жесткий диск выйдет из строя, чтобы не потерять лицензионный контент.

Когда 10 тыс. человек запрашивают одно видео или хотя бы два-три видео, это легко решается кешированием. А если эти 10 тыс. смотрит разный контент, то стандартная СХД не справится. Скорость не позволит находить это на жестких дисках.

В реализации нужно:

— Построить архитектуру хранения и обслуживания клиентов СХД с высоким уровнем IOPS — количество запросов, которые приходят к системе хранения данных за секунду. Чем ровнее запросы из разных секторов жестких дисков, тем сложнее и дольше приходится обрабатывать их сервера.

— Построить балансировщики, которые обрабатывают большое количество разного контента на обычных HDD дисках и отказоустойчивых хранилищах.

Релиз Modus BI Cloud

В 2022 году многие BI-вендоры ушли с российского рынка. Малый и средний бизнес остались практически без привычных, полезных и недорогих инструментов аналитики.

Раньше я уже писал, что мы под эту задачу разрабатываем Modus BI Cloud – облачный сервис аналитики данных для малого и среднего бизнеса. Архитектура платформы построена на принципе low-code - пользователь может создавать отчеты, дашборды и аналитические панели любой сложности без навыков программирования. Базовая версия будет бесплатной.

Подробнее об архитектуре продукта я писал здесь

Рад сообщить, что 25 октября 2023 года продукт выйдет на рынок, а 26-го октября в 12:00 приглашаю на вебинар-презентацию с моими коллегами, где вы узнаете:

• зачем вести аналитику, если у вас не огромная корпорация;

• как Modus BI Cloud учитывает все особенности небольшого бизнеса;

• все об архитектуре и функциональных возможностях low-code платформы;

• как мы построили карту развития продукта;

• об отличиях Modus BI и Modus BI Cloud.

Вебинар будет полезен аналитикам, представителям малого и среднего бизнеса и всем, кто ищет функциональное облачное BI-решение.

Участие по предварительной регистрации

Яндекс почта для организации сказала, что "Скоро сервисы организации перейдут в режим просмотра" и предложила три тарифа на выбор БАЗОВЫЙ ОПТИМАЛЬНЫЙ РАСШИРЕННЫЙ

а вы знали, что менеджеру надо сказать: "Я ЗНАЮ ПРО ЗАКРЫТЫЙ ТАРИФ "СТАРТОВЫЙ", для тех кто еще никакой тариф не подключал, там будет только почта, но будет в 2 раза дешевле Базового?

Вот такие они ....

ГК «Астра» и ГК Key Point подписали соглашение о сотрудничестве. В рамках соглашения, планируется проведение пилотных проектов по построению инфраструктуры центров обработки данных на базе технологических решений участников. Подписание соглашения состоялось в рамках Восточного экономического форума, проходящего во Владивостоке с 10 по 13 сентября 2023 года. Об этом рассказали информационной службе Хабра в пресс‑службе ГК «Астра».

С 2021 года ГК Key Point занимается проектом по созданию региональной сети дата‑центров. В первую очередь проекта был создан ЦОД уровня надёжности Tier III на 440 стоек во Владивостоке, запущенный в эксплуатацию в феврале 2023 года. Сейчас идёт строительство второй очереди проекта, всего в проекте создание 35 объектов на 10 тысяч стоек. Из этих объектов 4 ЦОДа будут размером от 400 до 1,2 тысячи стоек. Кроме Владивостока, в города, где будут находиться ЦОДы, вошли Новосибирск, Екатеринбург и Ставрополь. Также ЦОДы меньшим количеством, от 50 до 400 стоек, заявлены в других не озвученных городах России.

По словам представителей ГК «Астра», в этих ЦОДах инфраструктура создана на основе серверной OC Astra Linux, комплекса средств виртуализации «Брест» и ПО для администрирования IT‑инфраструктур ALD Pro.

Western Digital отказалась отвечать на вопросы The Verge о проблеме с твердотельными накопителями SanDisk.

Журналисты спросили компанию, почему она до сих пор продаёт проблемные диски, будет ли бесплатно восстанавливать утраченные данные, предупреждает ли покупателей о рисках и т.д.

Глава отдела по связям с общественностью Western Digital Робин Шульц прислал следующий текст:

«В ответ на недавние сообщения об опасениях по поводу конкретных портативных твердотельных накопителей Western Digital мы хотим заверить наших уважаемых клиентов, что принимаем все необходимые меры для решения любых проблем, связанных с продуктами. Мы понимаем важность нашей продукции для клиентов и очень серьёзно относимся к этим вопросам. Мы проводим всесторонний обзор, чтобы получить полное представление о проблемах».

Western Digital не сообщила, когда представит результаты своей работы над проблемами.

Между тем на компанию уже подали в суд. Авторы коллективного иска ссылаются на мошенническую и недобросовестную деловую практику, а также другие нарушения.