Pull to refresh
3

User

0,1
Rating
1
Subscribers
Habr CareerHabr Career
Send message

Сепаратор для логов. Сжимаем логи для контекста LLM без потери читаемости

Level of difficultyMedium
Reading time6 min
Reach and readers11K

logzip — утилита для сжатия логов перед анализом в LLM. Вместо того чтобы отправлять в Claude/GPT сырые 10 МБ лога, мы сжимаем его до 3.4 МБ (−58%), сохраняя полную читаемость и видимость ошибок. Статья рассказывает о проблеме (Lost in the Middle, переплата за мусорные токены), архитектуре на Rust, алгоритме Recursive BPE и реальном ROI: −$2,070 в год на API.

Проект open source (MIT), интегрирован с Claude Desktop через MCP.

Читать далее

Information

Rating
3,620-th
Registered
Activity

Specialization

Фулстек разработчик, ML разработчик
Ведущий
From 3,000 $
Git
PostgreSQL
Linux
Python
Английский язык
Разработка программного обеспечения
Базы данных
Django
FastAPI
ООП