Автоэнкодер на сверточных сетях у меня есть рабочий для этой задачи, но мне он кажется серьезным перебором для задачи такого уровня. На задворках сознания крутится ощущение, что для такой элементарной задачи должно быть глубоко плевать на функции активации, сверточная или плоская сетка и вот это все, оно должно работать влет как угодно. Вполне возможно я не прав, вторая часть покажет :D
Скорее всего вы правы и есть более простые методы найти там аномалии. Я даже отдельно упомянул где-то в статье, что мне хотелось волшебства. Т.к. проект «just for fun» — хочется опыта, а не результата =)
А как искать аномалии с помощью распределения? Т.е. вот есть датасет — там бывают очень короткие линии, бывают очень длинные — и это нормально, бывают прямые, а бывают изогнутые. А бывают линии, завернутые в кольцо — и это явная аномалия. Как-то можно с помощью распределения Гаусса такие выловить?
Если идти по пути математики — я бы предположил, что можно изначально каждую координату самолета рассматривать как график, поискать его производную, если она переходит 0 два раза — то есть вероятность аномалии.
Но, опять, из меня тоже тот еще сварщик, поэтому и учусь )
Спасибо, теперь придется вторую часть писать =)
Датасет выложил вот сюда: gofile.io/?c=jBNJM7
Там и сырые данные и сгенерированные из них картинки двух размеров.
Ко многих туториалах первый кодирующий слой и последний декодирующий имеют разные активации, при этом только размеры симметричные. Сходу, если честно, мне кажется это довольно логичным. А кто такое хорошее векторное пространство? )
На практике у меня уже вполне себе хорошо сработал кодировщик на tanh, а декодирующий слой на relu. Плюс, и правда, на сверточных сетях все достаточно неплохо себя ведет. Планирую еще эксперименты со SDAE, чтобы еще больше картинку можно было использовать, ибо на 64х64 теряется часть нужных деталей в датасете.
Тут тоже ведь момент, у меня не стоит задачи чтобы он отлично воспроизводил все, мне надо чтобы он даже слегка оверфитнулся на типовые изображения, чтобы потом достаточна ошибка была на нестандартных…
А статья так — раз уж начал копать, можно заодно и оформить текстом )
Вообще, я построил на трудах из Оби. хромированных, которые используются для построения всяких рекламных конструкций. Но использовал их с мыслью, что потом надо заменить на настоящие =) Пока руки не дошли на заменить )
А вот это, между прочим, отличный повод написать статью — как с помощью вакуумного насоса за 4к и какой-то матери сделать вакуумный стол для чпу фрезера =) Я бы зачитал!
Ну, кстати, я твой пост посмотрел на цнц-клубе посмотрел, у меня белых опилок именно от текстолита заметно меньше остается, видимо не так глубоко захожу за медь. Но да, дышать этим не стоит.
Нуу, это ж его еще сделать надо ) Так вся конструкция довольно тихая, а вот если туда вакуумный носос добавить или пылесос тот же — то уже печаль может настать )
В моем случае почему-то именно фрезеровка плат — практически бесшумный процесс. Не сильно громче 3д-принтера. Вот если фанеру начать фрезеровать — то это да, в комнате без защиты ушей тяжело находиться, как пылесос, но я этого дома и не делаю. А платы — бесшумное и, главное, очень быстрое развлечение.
Хлипкий, китайский… у меня станок из напечатанных на 3д принтере деталей, подшипников от роликов из спортмастера и круглой трубы хромированной из оби =) Поэтому да, с жесткостью механики есть определенные проблемы =) Но пока у меня ощущение, что если обороты поднять хотя бы до 30к — уже станет сильно лучше.
Почему-то я не сомневался, что первый коммент будет про то, что не нужна вся эта фигня с фрезером, ХЖ — наше все =) Но я и не спорю даже, ХЖ — проверенная временем и работающая технология. Просто лично мне не нравится =)
Ну, это ж не демонстрация возможностей с призывом всем строить себе фрезер. Это скорее личный опыт на кривеньком самодельном фрезере. Ну и под корпуса с шагом 0.5 вообще без проблем прорежет. Я чуть экспериментировал с момента написания статьи еще (сам текст я закончил неделю назад) — и не сомневаюсь, что даже на моем поделии реально 0.3/0.2 делать стабильно.
Да, в процессе гугления скорости подачи я понял уже, что надо в районе 50000 об/мин. Появилась даже мысль, что можно использовать обычные бесколлекторные моторы на 2000-3000kV, выйдет как раз около 30-50к оборотов при питании от 12В. К тому же при таких задачах радиальные нагрузки почти отсутствуют и можно не заморачиваться лишними подшипниками. Вопрос только в цанге подходящей.
А как искать аномалии с помощью распределения? Т.е. вот есть датасет — там бывают очень короткие линии, бывают очень длинные — и это нормально, бывают прямые, а бывают изогнутые. А бывают линии, завернутые в кольцо — и это явная аномалия. Как-то можно с помощью распределения Гаусса такие выловить?
Если идти по пути математики — я бы предположил, что можно изначально каждую координату самолета рассматривать как график, поискать его производную, если она переходит 0 два раза — то есть вероятность аномалии.
Но, опять, из меня тоже тот еще сварщик, поэтому и учусь )
Датасет выложил вот сюда: gofile.io/?c=jBNJM7
Там и сырые данные и сгенерированные из них картинки двух размеров.
Тут тоже ведь момент, у меня не стоит задачи чтобы он отлично воспроизводил все, мне надо чтобы он даже слегка оверфитнулся на типовые изображения, чтобы потом достаточна ошибка была на нестандартных…
А статья так — раз уж начал копать, можно заодно и оформить текстом )