Обновить
2
Григорий@wooferclaw

MLOps, DevOps, .NET, Python

2
Подписчики
Отправить сообщение

да, просто укажите load_in_4bit=True

int8 должен запуститься на бесплатной T4 в колабе. Так что у вас думаю тоже заработает.

Информация

В рейтинге
Не участвует
Откуда
Санкт-Петербург, Санкт-Петербург и область, Россия
Зарегистрирован
Активность

Специализация

Бэкенд разработчик, DevOps-инженер
Старший
C#
.NET Core
Docker
Python