Галлюцинации LLM — это артефакты сжатия. И это объясняет вообще всё

Мне здесь больше всего зашла даже не сама JPEG-аналогия, а сдвиг оптики: смотреть на LLM не как на “почти разум”, а как на очень ёмкую, но дырявую память. После этого и ожидания от модели становятся заметно здоровее.)))