Как стать автором
Обновить
21
0
Eduard Lanchev @EddyLan

Data Scientist

Отправить сообщение

Прямую ссылку можете дать ? А то эта ссылка на канал вообще. Да, я на него подписан, но смотрю туда редко.

Сорри, в прошлый раз искал, сразу не нашел. Много сообщений в ленте.

Во вторых в gpt пока нет обучения с подкреплением.

Мы же за весь ИИ говорим, почему gpt?
RL в чистом виде - это обучение той же самой сетки только другим способом. Конечно, в полной модели (например, по играм) не только RL используют. Но какая разница )

Могу предложить вам самим провести пару экспериментов

Когда-нибудь руки дойдут. Но что-то мне подсказывает, что при таком развитии это за меня уже сделают раньше )

OpenAI выкатил очередное улучшение

Если вы про ChatGPT 4o. То улучшение это точно не то, о чем мы здесь с вами говорим.

Александр, на самом деле, я буду только рад, если развитие ии притормозит и никогда agi не появится. А пока, даже от тех моделей, которые уже есть, возможные последствия до конца не осознаются.

Могу согласиться с тем, что специально GPT на задачи не натаскивали. Но в сети есть эксперименты, которые подтверждают, что при определенных сложно составленных запросах решаются весьма сложные задачи, которых нет в учебниках. Например, об этом рассказывал Игорь в своем канале со ссылками на первоисточники: https://t.me/seeallochnaya

И еще один пример. Если вы отслеживаете историю развития ИИ, моделей, то наверняка знаете, что есть модель AlphaZero от DeepMind, которая учится играть в разные игры сама с собой и доходит до уровня игры выше человека.
https://en.wikipedia.org/wiki/AlphaZero
Конечно, пример уже староват. Но из него следует, что ИИ не требуется опыт человека, чтобы научиться делать что-то лучше, чем человек.

Дискуссионный вопрос, сможет ли ИИ, выучив правила (законы), генерить что-то новое, до сели неизвестное и превосходящее то, что было до этого.

По поводу программирования, на мой взгляд, все очень просто. ИИ вообще будет писать на 0 и 1. Но из-за требования человека к интерпретируемости, ИИ создаст какие-то новые языки программирования, чтобы человеку было проще его "контролировать".

По поводу общих законов мироздания. Очевидно, что знания человека несовершенны. Если представить все знания как таблицу Менделеева, то на ней будет много незаполненных человеком клеточек. Но по соседним заполненным клеточкам можно узнать свойства пустой. Мне кажется, что ИИ сможет это делать более эффективно чем человек. Нас ждет много открытий.

Хуже, что контроль над ИИ - это мнимая вещь.

Спасибо за комментарий!
Сергей, вот это "формате (gpt4) и проверщика правил (antrophic) поверх" огонь!
Соглашусь, что удовольствие не дешевое. Но яндекс дешевле и качество очень хорошее на наш взгляд. Конечно, пока 100 новостей в день деньги небольшие, но когда будут тысячи, то стоимость вырастет соответственно. Но там и цели и потребности и финансирование проекта должны быть другие. Посмотрим.

Дубли да. Неприятность доставляют. Но дубли есть двух типов. Вы о чем говорите?
Если мы говорим о дублях, когда источник одну и ту же статью публикует много раз, меняя немного название или текст - то это не проблема. Мы небольшой моделькой убираем дубли.

Если мы говорим о дублях по содержанию статей от разных источников - то это совсем другая проблема. Скорее даже фича. Мы примерно представляем, что будем делать. Но сейчас пока заняты другим.

Спасибо за отклик.
Да, микросервисы нам сейчас сильно помогают. Уже сейчас пишем новые фичи и, конечно, нет никакого головняка, как их быстро встроить.

По поводу вашего вопроса. Мы сейчас на такой стадии, что расширять команду не планируем. Но я буду рад познакомиться, пишите в телегу в личку (мало ли что и когда): https://t.me/Eduard_Lanchev

Вот хорошо, что у нас не такие задачи :)
Кровью сердце обливалось, когда на прошлом проекте сеньор 2 недели разбирался с тем, как работает ffmpeg. Но предполагалось, что ему не за это деньги платят, а по факту время ушло на изучение документации. Вот в таких задачах ИИ, ChatGPT, RAG отлично могут помочь и сократить время в разы!

Как-то ушли от темы.
Вернусь. Программист в ближайшие годы еще будет нужен, но немного в другом статусе. И таких "новых" программистов будет больше, чем сейчас.
Это мое мнение. Кратко я свои аргументы высказал выше.
Извиняюсь, но дальше углубляться в философию, историю и литературу (Тихий Дон очень люблю) прямо сейчас не могу себе позволить.
Спасибо вам за комментарии и общение!

Спасибо за приятный отзыв )

Изначально, мы не ожидали многого от ChatGPT, но после того как он нам сделал CI/CD за час-два, а RabbitMQ мы разобрались с нуля за пару дней (не только этим занимались) при том, что один наш программист рассказывал, что только на его настройку может уйти чуть ли не месяц ))(так и не понял, чего там на месяц), и после того, как решение для парсеров было найдено тоже за 2 дня - тестировали разные варианты (а нас не пугал сложностью парсинга только ленивый) - то да, мы поняли, что с ChatGPT можно все ))
Скажу так, ChatGPT сильно удивил и порадовал. Не ожидали.

То, что вы сейчас видите в TechMix было условно сделано силами 1,5 человек примерно за 3 недели вместе с ChatGPT. Сложно сказать, сколько времени потребовалось профессиональным программистам для этого и кому мидлу или сеньору (и зависит от их опыта работы с RabbitMQ, докером, настройкой CI/CD, работой с парсерами и тд). Думаю, программисты быстрее бы не написали, если только они уже с этим не сталкивались.

Мы делали впервые, максимум общие знания, без опыта и конкретики. С учетом этого, у нас получилось очень быстро.

Сергей, да, в истории были аналогии и в одну сторону и в другую. Например, изобретение станков сделало крестьян рабочими, а ремесленники исчезли. И рабочих стало намного больше, чем было ремесленников. Причину мы знаем, снижение себестоимости, больший спрос и все такое.
Но знаем и другой пример - станки с ЧПУ - или автономные роботизированные комплексы. В этом случае, рабочих почти не стало.

С ИИ мне кажется мы скорее подходим пока под первый вариант. От ремесленников к рабочим из крестьян ;) Почему так? Потому то впереди не просто ИИ, а IoT во всем, роботизация. И это все кто-то должен программировать, обслуживать, учить. Сейчас столько программистов нет. А автономности у ИИ (чтобы взять все это на себя) пока маловато. Поэтому скорее ИИ будет использоваться как улучшенное средство производства, которое повышает производительность труда инженера при снижении себестоимости. Инженером сможет стать чуть ли не каждый. Название инженер - условное.

Я точно знаю, что отсутствия знаний по физике не мешает миллионам китайцев, работающих на конвейерах, собирать лучшую электронику в мире.

Совершенствование средств производства зачастую приводило к росту числа тех, кто их использует.

Что вы имеете в виду? О каких граблях говорим?

Огонь комментарий! На самом деле, я считаю, что программисты будут нужны, вернее, инженеры-разработчики. И потребуется их больше, чем сейчас. И поможет в этом, кажется, ИИ. То есть средства разработки сильно упростятся и станут доступны большему количеству людей. Конечно, ценность этой профессии может упасть в следствии массовости. Но гениальные умы найдут свое место, где им будет чем заняться, кроме нажатия на одну кнопку ))

Большое спасибо за интересный комментарий! Да, прогресс идет независимо от нас. Мы же только и успеваем под него подстраиваться. Спасибо еще раз!

Константин, спасибо за подробный ответ. Да, streamlit представляем как работает. Интересно )) Исходя из ответов 2 и 3, похоже придется писать свой лоадер, который будет грузить несколько книг в pdf и проставлять в мета название книги и номер страницы при разбиении на документы. В целом понятно, бесплатного сыра нет ))

Константин, спасибо за статью!
Можно вопросы )
1. "При этом первый прототип решения занимал 50 строк кода на python вместе с UI."
Как в несколько строк UI поднять? ) Он тоже в SDK есть?
2. Если хотим несколько книг загрузить, предусмотрена ли обработка списком?
Например:
loader = TextLoader(["../мастер_и_маргарита.txt", "../война_и_мир.txt"])
3. Вы упоминаете, что можно сделать ссылки на страницы (а в моем случае, на страницы и книгу из загруженного списка книг). Как это сделать в принципе, я понимаю, если бы сам делал базу эмбендингов. А как это сделать инструментарием SDK?
Заранее благодарен за ответы.

Здравствуйте!
Спасибо за статьи по метрикам!
Очень жду третью часть. Не подскажете, когда планируете?
Спасибо!

Спасибо за статью!
Пара вопросов:
1. Light нода разве позволяет парсить данные? В том смысле, что она не хранит на дисках весь объем блокчейна.
2. Смотрели Web3py?

"Автоматизация решений клиентских обращений"
Коллеги, вы уверены, что по-русски это так звучит?
Найдите выпускающего редактора, который знает русский язык.

Ссылки на ноут случайно нет? )
Спасибо!

Извините за наивный вопрос. А почему из браузера с юпитером не работается? Зачем его вставлять в VSC?

Информация

В рейтинге
Не участвует
Откуда
Москва, Москва и Московская обл., Россия
Работает в
Дата рождения
Зарегистрирован
Активность