Обновить

Red Hat представила открытый проект llm-d — это распределённая структура вывода LLM на основе Kubernetes

Время на прочтение1 мин
Охват и читатели2.3K
Всего голосов 2: ↑2 и ↓0+3
Комментарии2

Комментарии 2

Что такое «планировщик вывода»? А планировщик ввода будет?

Да, лучше бы не переводили. Оставили Inference Scheduler и наверное было бы понятней. Ну или хотя бы "планировщик инференса".

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Другие новости