Справедливо. У меня постоянно крутилось в голове, что не могли же просто так выгрузку на диск сделать, если так всё плохо. И где-то оно должно быстро работать. Теперь приходит полное осознание что к чему.
По объёму памяти — надо всё что в swap лежит отправить в озу, чтобы к диску обращений не было. В идеале нужно 256 гб памяти. Ну или диск сделать таким же быстрым, как озу.
Думал об этом, но побоялся собирать, т.к. в случае неудачи это стало бы мёртвым грузом, неизвестно когда пригодившимся. Теперь хотя бы понятно, что смысл в этом есть.
Да, всё так. В примерах контекст это случайные фразы на разные темы из интернета. В том числе и абсурдные, которые предложили в комментариях к посту про yalm, как если бы спрашивал тестировщик :)
При хорошем контексте результат вполне себе приемлемый + я совсем не смотрел в сторону изменения параметров в конфиге. Думаю там тоже есть над чем поэксперементировать.
Kingston NV1 [SNVS/1000G]. На swap выделен отдельный раздел.
Максимальная скорость последовательной чтения / записи: 2100 / 1700 Мбайт/сек. В тестах такую скорость показывает, при копировании больших файлов тоже.
Но вот при генерации текста iostat и близко такие значения не показывает. Завтра поисследую и чуть больше чисел про это напишу.
Если окажется, что дело в диске, могу взять что-то поменьше и побыстрее. Но пока есть сомнения, что это кардинально повлияет на скорость генерации.
Приветствую, коллега! Как видно из коммента ниже: "Недоступность сайта банка никак не связана с конкурсом". Так что это не проблема конкурса, всё ок ¯\_(ツ)_/¯
Три, описания есть в основном репо. Первый фронт, второй про роботов, третий про коннектор брокера. Конечно, в монорепе было бы удобнее делать сквозные фичи. Но в долгосрочной перспективе разделённые сущности по репозиториям сильно облегчат поддержку, рефакторинг и проверку пуллреквестов.
Справедливо. У меня постоянно крутилось в голове, что не могли же просто так выгрузку на диск сделать, если так всё плохо. И где-то оно должно быстро работать. Теперь приходит полное осознание что к чему.
NAS вариант, да
По объёму памяти — надо всё что в swap лежит отправить в озу, чтобы к диску обращений не было. В идеале нужно 256 гб памяти. Ну или диск сделать таким же быстрым, как озу.
Думал об этом, но побоялся собирать, т.к. в случае неудачи это стало бы мёртвым грузом, неизвестно когда пригодившимся. Теперь хотя бы понятно, что смысл в этом есть.
Да, всё так. В примерах контекст это случайные фразы на разные темы из интернета. В том числе и абсурдные, которые предложили в комментариях к посту про yalm, как если бы спрашивал тестировщик :)
При хорошем контексте результат вполне себе приемлемый + я совсем не смотрел в сторону изменения параметров в конфиге. Думаю там тоже есть над чем поэксперементировать.
Спасибо, обязательно посмотрю и попробую исправить ситуацию.
Kingston NV1 [SNVS/1000G]. На swap выделен отдельный раздел.
Максимальная скорость последовательной чтения / записи: 2100 / 1700 Мбайт/сек. В тестах такую скорость показывает, при копировании больших файлов тоже.
Но вот при генерации текста iostat и близко такие значения не показывает. Завтра поисследую и чуть больше чисел про это напишу.
Если окажется, что дело в диске, могу взять что-то поменьше и побыстрее. Но пока есть сомнения, что это кардинально повлияет на скорость генерации.
Спасибо за комментарий.
Приветствую, коллега! Зато ниже в комментах объяснили что это было.
Приветствую, коллега! Как видно из коммента ниже: "Недоступность сайта банка никак не связана с конкурсом". Так что это не проблема конкурса, всё ок ¯\_(ツ)_/¯
Три, описания есть в основном репо. Первый фронт, второй про роботов, третий про коннектор брокера. Конечно, в монорепе было бы удобнее делать сквозные фичи. Но в долгосрочной перспективе разделённые сущности по репозиториям сильно облегчат поддержку, рефакторинг и проверку пуллреквестов.