Человек здоровый ментально описал всех разработчиков которые проходят собесы и написал мне - Тебя и всех остальных поставили в известную позицию - Просидел полтора года на шее у жены. Абсолютно ментально здоров. ))
Мне очень жаль компанию которая наняла такого ментально такого здорового человека. А еще больше жаль его коллег которые выше описанный поток бреда видят воочию.
С таким уровнем токсичности и злобы вам явно не разработчиком надо быть. Не хотите ничего учить и развиваться да дело ваше деградируйте в овоща оправдывая это самоуважением. )) Работа курьером вас заждалась.
Я с вами на ты не общался. И кого поставили в известную позицию так это вас.
Я в отличии от вас полтора года на шее у жены не сидел. И подобного себе никогда не позволил. Я её уважаю и хочу чтобы моя семья жила хорошо.
В чем тут когнитивный диссонанс. ? С чего бы вы должны проходить собеседование без подготовки. Кто вам такую чушь вообще сказал и как вы к этому пришли. Фраза собес должен. Вам никто ничего не должен. И тем более компании лично для вас не будут делать собесы такими как вы хотите.
Везде на хорошую вакансию нужно готовится в любой профессии. Тем более вы в IT.
На конкурентном постоянно меняющимся рынке. Где просто необходимо постоянно учиться.
Я начинал с C++ и Pascal, но когда на рынке стали были востребованными Web разработчики стал бекенд разработчиком. Начал писать на Perl и PHP. Увидел что Python взлетел выучил Python. Больше платят в Java выучил Java. Увидел что больше платят с хорошим английским выучил английский.
На рынок ворвался Go выучил Go. Увидел что Machine Learning стал востребованным перешел в него. На рынке больше платят за хорошие знание алгоритмов и структур данных освежил старые вузовские знания порешал задачки и решил проблему.
Я соответствую рынку поэтому у меня нет проблем.
Нытье вида - у меня спросили задачку с сортировкой боже мой что случилось - меня просто поражает. Ладно какой нибудь Junior разработчик. Но 20 лет опыта пишет человек.
Когда ответ огромной красной вывеской перед глазами. Не можешь пройти простое алгоритмическое собеседование так пойди две - три недели порешай задачки и пройди этот собес. Не хочешь ну так иди в таксисты, курьеры что сказать.
Я выучу и пройду этот собес и буду получать хорошие деньги.
Просто поражает обсуждение чего угодно, но не того что надо. Настоящая причина почему кризис IT в России. Потому что санкции и нет международных компаний. ВСЕ. IT в России умирает и это только начало. Да в мировом IT тоже кризис. Но до уровня российского ему очень далеко.
Если начать работать на зарубежные компании оказывается работы очень много и найти её не проблема. Если есть навыки и английский.
То есть после 20 лет в IT вы жалуетесь на то что не можете выучить вопросы для прохождения собеса ? Вы не думали что проблема в вас ? Не думали там алгоритмы подучить, задачки на LeetCode порешать ? Чтобы сортировку суметь написать. После 20 лет не суметь написать сортировку ну это позор по моему. Вас видимо порвет если вам задачку с графом или деревом дадут.
Я больше 20 лет в программировании у меня нет проблемы в прохождении собесов. Так как это отдельный навык. И его надо качать. И да мне отказывают постоянно. Несмотря что я эксперт в своей области.
Чтобы проходить собесы надо готовится и как можно больше ходить на собесы. Ну и не переживать если вам дали отказ. Вы явно на это чрезмерно сильно реагируете. Умение учиться это главный навык программиста. Просто выучите то что нужно для собесов. И пройдите несколько десятков интервью. Записывая вопросы и готовясь на них. Было бы желание.
Вы явно все полтора года сидели на попе ровно ни хрена не делая. А после жалуетесь еще и на Habr. Когда тут прекрасно знают что невозможно искать работу полтора года если действительно её искать. Вы даже на фриланс не пошли хотя там нет таких фильтров. Чтобы хоть какую то копейку сделать. Вас все устраивало. Вы не хотели работать вот и весь секрет.
Возраст как правило показатель опыта в профессии. Не всегда. Бывают мамонты которые сидят в банках и давно деградировали до овощей. Обычно это Java прогеры. Которые ничего не учат и ковыряют свой Legacy. Сам встречал таких.
В остальном. Если взять 8 из 10 программистов с 10+ годами опыта. Как правило 8 будут хорошие специалисты. Все потому что невозможно оставаться востребованным в IT не обучаясь. И чем ты дольше в профессии тем больше ты выучил и пережил всего. А за 10+ лет обучения и практики ты хочешь не хочешь станешь специалистом. Вот сейчас новый период AI. Останутся только самые лучшие в IT. Те кто приспособился и получил новые навыки.
"ловлю себя на мысли, что вот это или вон то он сделал как типичный джун" Вы все правильно замечаете только не ту сторону смотрите.
Опытный разработчик может класть болт на работу. Особенно если работа плохоя. Скорее всего это вы и наблюдаете. Я могу и пишу и буду писать говнокод. Я пишу отличный код только когда за него классно платят и мне очень интересно. Если это средняя работа я делаю минимум чтобы работать. Я на собесах специально отвечаю на только ту часть вопросов чтобы пройти этот собес. Временя когда я пытался показать себя давно прошли. Показываешь что ты знаешь дохера и умеешь дохера, ты будеш тем кто все на себе тащит. Вот это молодые разрабы не понимают. Компании это не ваши друзья. Их задача чтобы вы херачили как лошадь за минимум денег. Поэтому в крупных компаниях специально создают соревновательную среду.
Если работа говно. То и код я буду писать говно. Я не хочу тратить свои ресурсы на херню. У меня для этого пет проекты есть. Работа это не моя жизнь.
Мы все. Вы какое отношение ко всем имеете ? И какого хрена вы за меня тут рассказывате. Я в больше чем в 20 странах пожил. И могу сравнить. И сейчас и до этого. И это все было хуже чем рассказывали люди.
Какие такие сказки про СССР.
Тоталитаризм сказка ? Это правда. Запрет выезда ? - правда. Дефицит всего и вся. Правда. Полная цензура когда за слова сажают на сроки большие чем за убийство. И тогда и сейчас правда.
Про это люди и рассказывали. Еще скажите это было не так. Все вранье.
Мои родители от фразы вернутся в СССР крестятся. Это вы тут сказочник.
В этоху интернета и искусственного интеллекта вы тут рассказываете мне специалисту из IT сферы что ничего о Северной Корее не известно )) Съемки с дронов, сбежавшие оттуда люди и их интервью, китайцы и блогеры которые приехали и снимали все веселье. Заходите в YouTube и смотрите. Читать уже не надо можно буквально под зумом смотреть. Как бы там что не блокировали.
Ну мне 40 лет у меня больше 20 лет в программировании. Вы уверены что вы мне сможете составить конкуренцию хоть в чем то кроме вашего самомнения ? Хотя скорее это вы ко мне на собес придете.
Нет не кажется, это рамки одной и той же профессии. Разделять уровни опыта на разные профессии даже звучит бредово.
Команда Junior и Middle могут заменить Senior. Но это всегда хуже, дольше и приводит к экономическому ущербу. Больше багов, больше проблем с безопасностью и стабильностью.
Поэтому чтобы минимизировать проблемы нанимают много Junior, немного Middle и Senior для контроля. Итоговое решение всегда за Senior. Так и и Junior и Middle растут быстрее. И так и становятся Junior -> Middle, а Middle -> Senior Видя как работает Senior. Это было раньше.
Текущие реалии того что Senior мало, а специалисты уровня Principal Software Engineer вообще как единороги. Это огромная проблема.
Я вижу что во многих компаниях сформировались целые команды без Senior или c псевдо Senior когда самому опытному из всех дают должность Senior. И конечно компании живут по уши в говнокоде, ошибках и проблемах с безопасностью. Как расти начинающим в такой обстановке, не понятно. И можно ли вообще дорасти не известно. Кто то наверное дорастет, но сколько это времени займет.
Сломали саму цепочку. Начинающий учится у опытного. Опытный у эксперта. Это касается не только IT кстати. Везде дефицит опытных работников.
Да вы посмотрите на количество ботов в комментах. Мне уже про Северную Корею рассказывают какая она прекрасная страна. Как голод победили. И бомбу сделали. Голая жопа но бомба есть. -_-
О как боты набежали на мой коммент. Я её прекрасно застал и провел в ней детство. Нищее без нормальной одежды и еды. Когда у тебя из обуви старые ботинки на весь год. У вас с головой проблемы если вы предпочитаете пустые полки магазинов и очереди с талонами огромным торговым центрам и изобилию всего. Предпочитальщики херовы.
Могу только пожелать тем кто хочет променять рыночную экономику на плановую туда и валить.
Ясно волшебные 15 рублевые. Вы серьезно думаете переубедить адекватного человека. Что Северная Корея это чудо страна ?
Северная корея этот тоталитарный ад. Какие сказки. Когда это задокументированные факты сбежавших их этого ада людей. Это вы сейчас волшебные сказки пропаганды рассказывате. Про ядерные бомбы и победу голода в 24 году и изобилие в магазинах
15 рублей отработали молодец. Можете еще один коммент оставить. Вам еще накинут.
Едиственное что можно сказать адекватное на этот поток адского бреда. Удачи вам пожить при плановой экономике. Когда вам жрать будет нечего и не в чем ходить!
Мы прекрасно видим примеры супер развитых стран при плановой экономике. Передовая во всех планах Северная Корея где жрут собак от голода поражает воображения.
А я до сих пор помню как для меня в детстве жвачка была как что то невороятное. Потрясающие успехи отсуствия всего это вот то что будет при плановай экономике.
Ну давайте мыслить логически мы же программисты как никак.
Мыслим как HR. Берем среднестатистического прогера. Допустим вы не учились нигде и сразу стали работать в 18 лет. Как стажер.(допустим до стажера вы сами учились) Вы вы два года росли до Junior. Вы решаете самые простые задачи. Вы почти ничего не знаете. Ваш вклад в проект за эти два года будет дай бог 1%. После вы еще полтора - два года росли до Middle. Вы уже даже что то умеете. В архитектуру еще нет. Но кое какие задачи можете решить. Про какой опыт вы говорите ? Про опыт решения простых задач ? И где тут Senior ? А если вы в вузе были и работали на пол ставки со второго или третьего курса. Как вы стали Senior к 22-23 ?
Теперь поговорим о Senior. Какую вы конкуренцию можете составить человеку которому за 30-40 лет и который прошел огонь и медные трубы и 10-20 больших проектов ? Он сразу решал сложные задачи уровня Senior, занимался архитектурой. У него опыт решения настоящих проблем и доведения этого самого проекта до production. Там знания нескольких языков программирования и тонны сопуствующих технологий на практике.
Тут нет никакого эйджизма простая логика.
Вы кому доверите делать операцию хирургу у которого было 5 операций или который сделал 200 таких же ? Вам с кем будет спокойнее ехать с водителем у которого год стажа или у которого 20 лет стажа ? Почему то в друхих профессиях таких вопросов не возникает, но в IT это сплошь и рядом.
Преимущественно в России сложилась такая тема что начинаюшим дают лычку Senior. Из за недостатка этих самых опытных специалистов уровня Senior. Как решается сложные задачи такими Senior мы видим своими глазами. Лычку дали, а вот зарплату забыли. И начинающие думают что 300к рублей это зарплата Senior.
Моя finetune модель универсальна. Мне не нужно делать finetune под каждый новый домен. Да с некоторыми типами задач будет хуже. Но я вообще не учил модель буквы считать в слове это по умолчанию решилось.
Никакой фремворк не использует. Это полностью мой код. Модель используется Qwen с finetune под рассуждения для MCTS. Где брать датасет. Собирать используя те же самые LLM. Только более продвинутые. Любая большая модель ChatGPT, Claude .. вам сгенерирует вам все этапы рассуждений. Да нужно проверять все. Долго сложно и довольно дорого.
А вы ожидали супер логичности от модели в 8b параметров ? ) Да такие галлюцинации само собой могут быть при таком размере. Мало того верный ответ не гарантирован в 100% случаев даже при температуре 0. Так как вероятностное распределение никуда не делось.
Можете попробовать поднятя свой instance хотя я бы рекомендовал Groq API модель llama-3.1-8b-instant из за скорости ответа. При таких задачах самое то. Реализовать CoT либо XoT и проверить на своем опыте. Вообще у чистой llama 8b периодические довольно смешные ответы. У 70B конечно все намного логичнее и стабильнее. Ниже сравнение:
Да надо бы собрать тестовы стенд и проверить на современных моделях. Это конечно не GPT o1. Это все таки prompting просто. Без finetune но результаты само собой намного выше. На выходных если будет время проверю.
Человек здоровый ментально описал всех разработчиков которые проходят собесы и написал мне - Тебя и всех остальных поставили в известную позицию -
Просидел полтора года на шее у жены.
Абсолютно ментально здоров. ))
Мне очень жаль компанию которая наняла такого ментально такого здорового человека. А еще больше жаль его коллег которые выше описанный поток бреда видят воочию.
С таким уровнем токсичности и злобы вам явно не разработчиком надо быть.
Не хотите ничего учить и развиваться да дело ваше деградируйте в овоща оправдывая это самоуважением. )) Работа курьером вас заждалась.
Я с вами на ты не общался. И кого поставили в известную позицию так это вас.
Я в отличии от вас полтора года на шее у жены не сидел. И подобного себе никогда не позволил.
Я её уважаю и хочу чтобы моя семья жила хорошо.
Продолжайте уважать себя сидя на помойке.
В чем тут когнитивный диссонанс. ? С чего бы вы должны проходить собеседование без подготовки. Кто вам такую чушь вообще сказал и как вы к этому пришли.
Фраза собес должен. Вам никто ничего не должен. И тем более компании лично для вас не будут делать собесы такими как вы хотите.
Везде на хорошую вакансию нужно готовится в любой профессии.
Тем более вы в IT.
На конкурентном постоянно меняющимся рынке. Где просто необходимо постоянно учиться.
Я начинал с C++ и Pascal, но когда на рынке стали были востребованными Web разработчики стал бекенд разработчиком. Начал писать на Perl и PHP. Увидел что Python взлетел выучил Python. Больше платят в Java выучил Java.
Увидел что больше платят с хорошим английским выучил английский.
На рынок ворвался Go выучил Go.
Увидел что Machine Learning стал востребованным перешел в него.
На рынке больше платят за хорошие знание алгоритмов и структур данных освежил старые вузовские знания порешал задачки и решил проблему.
Я соответствую рынку поэтому у меня нет проблем.
Нытье вида - у меня спросили задачку с сортировкой боже мой что случилось - меня просто поражает.
Ладно какой нибудь Junior разработчик. Но 20 лет опыта пишет человек.
Когда ответ огромной красной вывеской перед глазами.
Не можешь пройти простое алгоритмическое собеседование так пойди две - три недели порешай задачки и пройди этот собес.
Не хочешь ну так иди в таксисты, курьеры что сказать.
Я выучу и пройду этот собес и буду получать хорошие деньги.
Просто поражает обсуждение чего угодно, но не того что надо.
Настоящая причина почему кризис IT в России. Потому что санкции и нет международных компаний. ВСЕ. IT в России умирает и это только начало.
Да в мировом IT тоже кризис. Но до уровня российского ему очень далеко.
Если начать работать на зарубежные компании оказывается работы очень много и найти её не проблема. Если есть навыки и английский.
Итог учите английский и качайте навыки.
То есть после 20 лет в IT вы жалуетесь на то что не можете выучить вопросы для прохождения собеса ? Вы не думали что проблема в вас ?
Не думали там алгоритмы подучить, задачки на LeetCode порешать ? Чтобы сортировку суметь написать. После 20 лет не суметь написать сортировку ну это позор по моему.
Вас видимо порвет если вам задачку с графом или деревом дадут.
Я больше 20 лет в программировании у меня нет проблемы в прохождении собесов.
Так как это отдельный навык. И его надо качать.
И да мне отказывают постоянно. Несмотря что я эксперт в своей области.
Чтобы проходить собесы надо готовится и как можно больше ходить на собесы. Ну и не переживать если вам дали отказ. Вы явно на это чрезмерно сильно реагируете.
Умение учиться это главный навык программиста. Просто выучите то что нужно для собесов. И пройдите несколько десятков интервью. Записывая вопросы и готовясь на них.
Было бы желание.
Вы явно все полтора года сидели на попе ровно ни хрена не делая. А после жалуетесь еще и на Habr. Когда тут прекрасно знают что невозможно искать работу полтора года если действительно её искать.
Вы даже на фриланс не пошли хотя там нет таких фильтров. Чтобы хоть какую то копейку сделать. Вас все устраивало. Вы не хотели работать вот и весь секрет.
Возраст как правило показатель опыта в профессии. Не всегда.
Бывают мамонты которые сидят в банках и давно деградировали до овощей. Обычно это Java прогеры. Которые ничего не учат и ковыряют свой Legacy.
Сам встречал таких.
В остальном.
Если взять 8 из 10 программистов с 10+ годами опыта. Как правило 8 будут хорошие специалисты. Все потому что невозможно оставаться востребованным в IT не обучаясь. И чем ты дольше в профессии тем больше ты выучил и пережил всего. А за 10+ лет обучения и практики ты хочешь не хочешь станешь специалистом.
Вот сейчас новый период AI. Останутся только самые лучшие в IT. Те кто приспособился и получил новые навыки.
"ловлю себя на мысли, что вот это или вон то он сделал как типичный джун"
Вы все правильно замечаете только не ту сторону смотрите.
Опытный разработчик может класть болт на работу. Особенно если работа плохоя. Скорее всего это вы и наблюдаете.
Я могу и пишу и буду писать говнокод.
Я пишу отличный код только когда за него классно платят и мне очень интересно.
Если это средняя работа я делаю минимум чтобы работать.
Я на собесах специально отвечаю на только ту часть вопросов чтобы пройти этот собес.
Временя когда я пытался показать себя давно прошли.
Показываешь что ты знаешь дохера и умеешь дохера, ты будеш тем кто все на себе тащит. Вот это молодые разрабы не понимают.
Компании это не ваши друзья. Их задача чтобы вы херачили как лошадь за минимум денег. Поэтому в крупных компаниях специально создают соревновательную среду.
Если работа говно. То и код я буду писать говно. Я не хочу тратить свои ресурсы на херню. У меня для этого пет проекты есть.
Работа это не моя жизнь.
Мы все. Вы какое отношение ко всем имеете ?
И какого хрена вы за меня тут рассказывате. Я в больше чем в 20 странах пожил.
И могу сравнить. И сейчас и до этого. И это все было хуже чем рассказывали люди.
Какие такие сказки про СССР.
Тоталитаризм сказка ? Это правда.
Запрет выезда ? - правда.
Дефицит всего и вся. Правда.
Полная цензура когда за слова сажают на сроки большие чем за убийство.
И тогда и сейчас правда.
Про это люди и рассказывали.
Еще скажите это было не так. Все вранье.
Мои родители от фразы вернутся в СССР крестятся.
Это вы тут сказочник.
В этоху интернета и искусственного интеллекта вы тут рассказываете мне специалисту из IT сферы что ничего о Северной Корее не известно ))
Съемки с дронов, сбежавшие оттуда люди и их интервью, китайцы и блогеры которые приехали и снимали все веселье. Заходите в YouTube и смотрите.
Читать уже не надо можно буквально под зумом смотреть.
Как бы там что не блокировали.
Ну мне 40 лет у меня больше 20 лет в программировании. Вы уверены что вы мне сможете составить конкуренцию хоть в чем то кроме вашего самомнения ?
Хотя скорее это вы ко мне на собес придете.
Нет не кажется, это рамки одной и той же профессии. Разделять уровни опыта на разные профессии даже звучит бредово.
Команда Junior и Middle могут заменить Senior.
Но это всегда хуже, дольше и приводит к экономическому ущербу. Больше багов, больше проблем с безопасностью и стабильностью.
Поэтому чтобы минимизировать проблемы нанимают много Junior, немного Middle и Senior для контроля. Итоговое решение всегда за Senior. Так и и Junior и Middle растут быстрее. И так и становятся Junior -> Middle, а Middle -> Senior
Видя как работает Senior. Это было раньше.
Текущие реалии того что Senior мало, а специалисты уровня Principal Software Engineer вообще как единороги. Это огромная проблема.
Я вижу что во многих компаниях сформировались целые команды без Senior или c псевдо Senior когда самому опытному из всех дают должность Senior.
И конечно компании живут по уши в говнокоде, ошибках и проблемах с безопасностью. Как расти начинающим в такой обстановке, не понятно.
И можно ли вообще дорасти не известно.
Кто то наверное дорастет, но сколько это времени займет.
Сломали саму цепочку. Начинающий учится у опытного. Опытный у эксперта.
Это касается не только IT кстати. Везде дефицит опытных работников.
Да вы посмотрите на количество ботов в комментах. Мне уже про Северную Корею рассказывают какая она прекрасная страна. Как голод победили. И бомбу сделали. Голая жопа но бомба есть. -_-
О как боты набежали на мой коммент.
Я её прекрасно застал и провел в ней детство. Нищее без нормальной одежды и еды. Когда у тебя из обуви старые ботинки на весь год.
У вас с головой проблемы если вы предпочитаете пустые полки магазинов и очереди с талонами огромным торговым центрам и изобилию всего.
Предпочитальщики херовы.
Могу только пожелать тем кто хочет променять рыночную экономику на плановую туда и валить.
Ясно волшебные 15 рублевые.
Вы серьезно думаете переубедить адекватного человека. Что Северная Корея это чудо страна ?
Северная корея этот тоталитарный ад. Какие сказки. Когда это задокументированные факты сбежавших их этого ада людей. Это вы сейчас волшебные сказки пропаганды рассказывате. Про ядерные бомбы и победу голода в 24 году и изобилие в магазинах
15 рублей отработали молодец. Можете еще один коммент оставить. Вам еще накинут.
Едиственное что можно сказать адекватное на этот поток адского бреда.
Удачи вам пожить при плановой экономике.
Когда вам жрать будет нечего и не в чем ходить!
Мы прекрасно видим примеры супер развитых стран при плановой экономике. Передовая во всех планах Северная Корея где жрут собак от голода поражает воображения.
А я до сих пор помню как для меня в детстве жвачка была как что то невороятное.
Потрясающие успехи отсуствия всего это вот то что будет при плановай экономике.
Ну давайте мыслить логически мы же программисты как никак.
Мыслим как HR.
Берем среднестатистического прогера.
Допустим вы не учились нигде и сразу стали работать в 18 лет. Как стажер.(допустим до стажера вы сами учились)
Вы вы два года росли до Junior.
Вы решаете самые простые задачи. Вы почти ничего не знаете. Ваш вклад в проект за эти два года будет дай бог 1%.
После вы еще полтора - два года росли до Middle. Вы уже даже что то умеете. В архитектуру еще нет. Но кое какие задачи можете решить.
Про какой опыт вы говорите ? Про опыт решения простых задач ?
И где тут Senior ?
А если вы в вузе были и работали на пол ставки со второго или третьего курса.
Как вы стали Senior к 22-23 ?
Теперь поговорим о Senior.
Какую вы конкуренцию можете составить человеку которому за 30-40 лет и который прошел огонь и медные трубы и 10-20 больших проектов ?
Он сразу решал сложные задачи уровня Senior, занимался архитектурой. У него опыт решения настоящих проблем и доведения этого самого проекта до production.
Там знания нескольких языков программирования и тонны сопуствующих технологий на практике.
Тут нет никакого эйджизма простая логика.
Вы кому доверите делать операцию хирургу у которого было 5 операций или который сделал 200 таких же ?
Вам с кем будет спокойнее ехать с водителем у которого год стажа или у которого 20 лет стажа ?
Почему то в друхих профессиях таких вопросов не возникает, но в IT это сплошь и рядом.
Преимущественно в России сложилась такая тема что начинаюшим дают лычку Senior.
Из за недостатка этих самых опытных специалистов уровня Senior.
Как решается сложные задачи такими Senior мы видим своими глазами.
Лычку дали, а вот зарплату забыли.
И начинающие думают что 300к рублей это зарплата Senior.
А надо большую красную кнопку удалить RuTube и забыть.
Ключевые уже ушли. И менеджеры тоже.
Остался Альтман и какая то команда. Но с его эго убегут и последние.
Моя finetune модель универсальна. Мне не нужно делать finetune под каждый новый домен.
Да с некоторыми типами задач будет хуже. Но я вообще не учил модель буквы считать в слове это по умолчанию решилось.
Никакой фремворк не использует. Это полностью мой код.
Модель используется Qwen с finetune под рассуждения для MCTS.
Где брать датасет. Собирать используя те же самые LLM. Только более продвинутые. Любая большая модель ChatGPT, Claude .. вам сгенерирует вам все этапы рассуждений. Да нужно проверять все. Долго сложно и довольно дорого.
А вы ожидали супер логичности от модели в 8b параметров ? )
Да такие галлюцинации само собой могут быть при таком размере.
Мало того верный ответ не гарантирован в 100% случаев даже при температуре 0.
Так как вероятностное распределение никуда не делось.
Можете попробовать поднятя свой instance хотя я бы рекомендовал Groq API модель llama-3.1-8b-instant из за скорости ответа. При таких задачах самое то.
Реализовать CoT либо XoT и проверить на своем опыте.
Вообще у чистой llama 8b периодические довольно смешные ответы.
У 70B конечно все намного логичнее и стабильнее.
Ниже сравнение:
Да надо бы собрать тестовы стенд и проверить на современных моделях.
Это конечно не GPT o1. Это все таки prompting просто. Без finetune но результаты само собой намного выше. На выходных если будет время проверю.