Комментарии 8
В названии - теория временных рядов, в первом абзаце - теории анализа временных рядов :-?
Если теория, то где же теорема?
Ну нет же такой теории, есть просто временные ряды и их анализ.
Заходишь почитать про применение трансформеров, а в сухом остатке только ссылка на пару статей по теме.
В результате - объяснение почему трансформеры это одна из оптимальных моделей и да, примеры применения этой модели. Этот пост - не практическое применение с кодом и тд.
В тексте есть общие слова про трансформеры - где тут про их применение к временным рядам кроме отсылок к статьям? "Архитектура очень похожа на оригинальный трансформер. В качестве оптимизатора в этой работе использовался Adam. Для регуляризации авторы добавили dropout и dropout rate - 0.2 для каждого слоя." - очень информативно конечно)
Дело в том, что я не знаю что можно добавить к описанию этой модели. Выше написано, почему именно трансформер подходит для обработки последовательностей. Суть в рассмотрении различных методов и сравнение моделей, применяемых для временных рядов. Конечно понимаю, что ограниченно количество информации связанное с временными рядами, посвящённое конкретно трансформерам
К такому графику, можно добавить также визуализацию автокорреляционной функции.
Да, было-бы довольно уместно добавить в том месте статьи соответствующий график.
Публикации
Анализ временных рядов, применение нейросетей (1 часть)