Comments 26
Unexpected token '<', "<html> <h"... is not valid JSON
Вот и весь результат(
Вы уж простите, но, по-моему, делать сервис платным пока рановато :) Пока бы набирать данных для дообучения и набирать ещё.
Из стандартной PDFки Инвитро с моими последними анализами (клинический анализ крови + расширенная биохимия + белковые фракции, всего 48 показателей) распознал меньше половины (21).
Привести самостоятельно единицы "тыс/мкл" к ожидаемым "х10⁹/л" не осилил.
Заключение - по большей части общие слова, которые и так очевидны из написанных мной самостоятельно диагнозов. Временами с явными ляпами (не буду цитировать, дабы свои болячки не расписывать публично).
Спасибо за комментарий! Вы не совсем поняли, если что-то не распозналось, значит этого нет в базе знаний. Это экспертная система с конкретными правилами и ограниченным набором параметров, а не просто "ChatGPT". Если вам известна информация по вашим диагнозам, то логично, что именно она и является проблемой отклонений.
Теперь понятно, но это как-то бы подсветить сразу, возможно с перечнем тех показателей, которые поддерживаются.
Иначе формируется вот такое вот впечатление о сервисе - повышенную в два раза креатинкиназу даже не увидел, тогда как обычная неспциализированная LLM и увидела, и соотнесла с употреблением статинов, и и аспирин посоветовала к ним в комплект не забывать (т.к. про него я не упомянул) и т.п.
Там есть сообщение, но видимо не столь заметное. Да, самое просто подлючить любую топовую LLM и все и кода в 10 раз меньше. Но ее нельзя контролировать. Сегодня она хорошо ответила, завтра нет. С LLMок взятки гладки, а когда это твой сервис, где ты несешь юридическую отвественность, нужно уже думать и проверять макисимально все. P.S. Креатинкиназы просто нет в базе знаний пока.
Но у Вас же тоже LLM (но судя по определённым шероховатостям в ответе, не самая топовая на текущий момент), только что с RAG по Вашей базе знаний, как я понял. Даже если Вы промптом прямо запретили нейросети высказываться по отсутствующим в этой базе темам - это не гарантирует отсутствие галлюцинаций. Без дисклеймеров и главного совета - посетить живого компетентного врача, - всё равно не обойтись.
Все так, но мне нужно контролировать базу знаний и правила. Например, некий параметр имеет референсы 120-160. У пациента он 119. Скорее всего обычная LLM будет говорить что он снижен. Но это не всегда так. Еще один пример, в общем анализе крови часто отколяются значения в %, но это ничего не значит, если абсолютные значения в пределах доупстимых величин. Хотя на бланках все будет жирным или красным и LLM тоже будет про это писать. Поэтому нужны правила. Не для врача это не очевидно, я понимаю.
Справедливости ради, Вы LLMки недооцениваете. На примере своих анализов и Gemini 3 Pro - где превышение незначительное, так и написала; где только в процентах, но не в абсолютных значениях, - отметила этот факт (буквальная цитата: "Относительное снижение процента лимфоцитов на фоне роста нейтрофилов")
Но Вас как профессионала, безусловно, понимаю. В своей профессиональной сфере я тоже боялся бы за LLM ручаться :)
Тут всегда есть нюансы. Надо писать хорошие промты, по сути правила. Можно экспериментировать. У меня же прошлая версия сервиса на голой LLM (код есть, сервис не запущен). Сейчас только заменить на Geminin PRO или типа того и можно сравнить.
Могу только пожелать удачи!
Из идей на будущее, думаю, было бы ещё неплохо анализировать показатели в динамике, загрузив сразу пачку анализов за разные даты, т.к. некоторые вещи же только так и диагностируются (опять же на своём примере, одно дело, если у меня тромбоциты по генетическим причинам стабильно всю жизнь повышены, другое - если они неожиданно скакнули вверх за последние пару месяцев; ну или холестирин мониторить после начала приёма статинов для корректировки дозы).
Спасибо! Я проведу эксперименты с голой новой LLM (вернусь к прежней версии), кто знает, может этого будет достаточно. Если нет, буду увеличивать число биомаркеров и расширять базу знаний ...
Динамика параметров несомненно имеет значение!
Я обновил сервис с учетом всех фидбеков, теперь - любые анализы, любые форматы файлов. Платить не предлагаю, но убрать оплату не могу, сделал пока небольшую. Пример нового заключения есть на сайте. Еще раз спасибо, ваш и другие отзывы реально полезны.
А сколько вы определяете биомаркеров и откуда берете правила?
Файл Гемохелп (PDF), распознал корректно, в 2 случаях не осилил единицы измерения. Заключение ожидаемое, очень общее (но и главный "фиговый" показатель простой), однако подсветил проблему, на которую не обращала внимание и которая точно может быть - она "лежала" на границе сочетания двух показателей.
А я просто в google gemini чат загружаю pdf анализов, пишу какие препараты и сколько времени принимаю, и он вполне себе толково всё распознаёт и расшифровывает. Плюсом советует к какому врачу обратиться если с анализами что-то не то. Ну и это всё бесплатно.
Кстати, да, тот самый Инвитровский PDF, который я в комментарии выше упомянул, Gemini 3 Pro расшифровала полностью и сразу, все превышения корректно описаны.
Заключение - просто небо и земля (в пользу Gemini), как будто бы мой кардиолог лично писал :)
Цена вопроса - ~5 центов против 99 рублей :)
Спасибо за комментарий! И не принимает никаких самостоятельных решений, это просто читалка результатов работы экспертной системы, где все правила проверены. Внешне это может не отличаться от любого "ChatGPT", но вы не можете быть уверены, что в ответе нет "галлюцинаций". В моем сервисе ИИ не принимает никаких решений, это не ответ из "его головы", он лишь озвучивает результаты из валидированной базы знаний.
Почти то же самое, но с ChatGPT. Делаю "проект", закидываю все анализы по мере появления, пишу, что и сколько принимаю, какие симптому есть. Он и расшифрует и динамику расскажет и порекомендует, что еще до сдать. Если попросить, то скажет какие вкусные таблетки стоит попить и обоснует почему, заодно проверяет, что их можно совмещать с тем, что уже принимаю.
Если сравнивать с кожаными врачами - он гораздо компетентней среднего специалиста
Единственное, мне пока не удалось его убедить в безвредности алкоголя и возможности совмещения с таблетками)
.
Как идея совместить LLM и свой алгоритм. LLM надо дать задачу так что бы выдавала к примеру по определенному формату json и потом его накладывать или сравнивать или как дополнение к данным по вашему алгоритму.
Расшифруйте, пожалуйста, мои анализы