Компрессор для данных или как я написал свой первый custom transformer

[lilpuf]

Скорее лимитер, чем компрессор, имхо :)

[KirillSHI]

Называть его лимитером было бы не совсем корректно, ведь лимитер это тот же компрессор, но с логарифмической функцией сжатия, где ты не можешь корректировать её степень, только порог. А я реализовал несколько вариаций, в том числе и клиппер и классический компрессор и лимитер в этом трансформере, что все по сути выполняет роль компрессора, только с разными функциями сжатия)

[RHendrik]

Спасибо за статью благодаря ей обратил внимание проблему OOD в ML и методы борьбы с ним. Идея интересная, но как по мне это больше заплатка или если по другому выразиться мы маскируем данные или подгоняем под себя, не уверен что это правильный подход к решению выбросов и аномалий.

[KirillSHI]

Ваше мнение имеет право на существование, у меня на это иной взгляд. Так как и обучающие и тестовые данные обрабатываются по одному алгоритму без утечки данных, то тут никакой подгонки нет.
Но согласен, это не волшебная палочка, которая решает все проблемы, как и все инструменты в DS, в каждом случае что-то сработает, а что-то нет, это просто еще один инструмент.