Я создал вдвое более быстрый лексер, но обнаружил, что узким местом был ввод-вывод

[Mertico]

Интереса ради статья о схожих проблемах и почему Bun быстрее NodeJs на установке зависимостей

https://habr.com/ru/articles/946420/

[Gromilo]

Ещё вариант: использовать архивы без сжатия.

NVMe SSD со скоростью чтения 5-7 ГБ/с

Данные на диске 1,13 ГБ

Можно было бы сэкономить 4.5с на разархивации

[ya_ne_znau]

Это упомянуто в статье (переводе):

Что бы я сделал иначе:

Применял бы незапакованные tar для локального кэширования...

[Gromilo]

Реально, хз как пропустил