Столько вопросов. Что за продукт? Схема продаж? Пропустим критические ошибки, из разряда - ябы хотел чтоб саппорт продавал, саппорт должен решать проблемы пользователя. Нагрузить его продажами - задача амбициозная, но иногда нереальная. 1. Не понятна схема реализации - как сохранялся контекст, как использовались старые данные, как вы использовали эти данные и связывали с новыми обращениями. 2. Почему не было проведено тестирование 1 сценария, чтоб понимать в какой момент и почему LLM могла начинать выдумывать, есть инструкции, есть ограничения моделей. По вашему тексту выходит что вы широкую-на-широкую вывалили все модели, с некоторой классификацией. 3. Почему было все оставлено на ИИ, для меня наверное это самый важный момент, в любой воронке есть узкое место или критический фактор, например, оплата. Если со всем остальным можно мириться - то вот например оплата святое. 4. Зачем вы объединили обычного проверяльщика заказа - бота по сути, с ИИ? Для чего? 5. Было ли явно понятно что сейчас с человеком работает ИИ или живой человек? Важно ли это в контексте вашего продукта?
Мое мнение, возможно ошибочное: часть проблем которые вы описали - они вообще ваши, вы не смогли нормально наладить LLM и работу open AI агентов. Общее впечатление что вы дали людям агента с минимумом инструкций и не пониманием как они работают, как может выдумывать модель - у которой теплота 0 и она работает только с тем набором инструкций что ей дали? В общем как и писал в начале, столько вопросов :)
Столько вопросов.
Что за продукт? Схема продаж?
Пропустим критические ошибки, из разряда - ябы хотел чтоб саппорт продавал, саппорт должен решать проблемы пользователя. Нагрузить его продажами - задача амбициозная, но иногда нереальная.
1. Не понятна схема реализации - как сохранялся контекст, как использовались старые данные, как вы использовали эти данные и связывали с новыми обращениями.
2. Почему не было проведено тестирование 1 сценария, чтоб понимать в какой момент и почему LLM могла начинать выдумывать, есть инструкции, есть ограничения моделей. По вашему тексту выходит что вы широкую-на-широкую вывалили все модели, с некоторой классификацией.
3. Почему было все оставлено на ИИ, для меня наверное это самый важный момент, в любой воронке есть узкое место или критический фактор, например, оплата. Если со всем остальным можно мириться - то вот например оплата святое.
4. Зачем вы объединили обычного проверяльщика заказа - бота по сути, с ИИ? Для чего?
5. Было ли явно понятно что сейчас с человеком работает ИИ или живой человек? Важно ли это в контексте вашего продукта?
Мое мнение, возможно ошибочное: часть проблем которые вы описали - они вообще ваши, вы не смогли нормально наладить LLM и работу open AI агентов. Общее впечатление что вы дали людям агента с минимумом инструкций и не пониманием как они работают, как может выдумывать модель - у которой теплота 0 и она работает только с тем набором инструкций что ей дали?
В общем как и писал в начале, столько вопросов :)