Мечты об идеальном API или как преодолевались сложности в проекте AdHands

Складываем в MySQL, причём в два. Один MySQL (MyISAM с партицированием по месяцам) используется для хранения статистики по ROLAP. Второй MySQL (InnoDB) для хранения нестатистических данных, таких как имена рекламных кампаний и т. п. На данный момент обе базы занимают около 1ТБ на жёстком диске. Данные от API обрабатываем в пакетном режиме, при обработке пакета пишем где-то 100 записей в секунду, но так как пакеты маленькие (100000 записей), то нагрузка на базу непостоянная. Пакеты маленькие, потому что, в основном, это статистика за прошедший или текущий день.