PHP Excel Templator (PHP-шаблонизатор для Excel) или как мы до этого писали хардкод для Excel

Это всё можно настроить в файле шаблона. Например, в разделе «Разметка страницы» -> «Печатать заголовки». В открывшемся окне есть поле «сквозные строки» — в нём и выбираем строку (т.е. строку шапки), которая будет повторяться на каждой странице.