Pull to refresh
4

User

4,1
Rating
1
Subscribers
Habr CareerHabr Career
Send message

Сепаратор для логов. Сжимаем логи для контекста LLM без потери читаемости

Level of difficultyMedium
Reading time6 min
Reach and readers9.9K

logzip — утилита для сжатия логов перед анализом в LLM. Вместо того чтобы отправлять в Claude/GPT сырые 10 МБ лога, мы сжимаем его до 3.4 МБ (−58%), сохраняя полную читаемость и видимость ошибок. Статья рассказывает о проблеме (Lost in the Middle, переплата за мусорные токены), архитектуре на Rust, алгоритме Recursive BPE и реальном ROI: −$2,070 в год на API.

Проект open source (MIT), интегрирован с Claude Desktop через MCP.

Читать далее

Information

Rating
1,243-rd
Registered
Activity

Specialization

Фулстек разработчик, ML разработчик
Ведущий
From 3,000 $
Git
PostgreSQL
Linux
Python
Английский язык
Разработка программного обеспечения
Базы данных
Django
FastAPI
ООП