ijne24 сен в 09:07

Я захотел, чтобы Obsidian заполнялся сам

Простой

7 мин

9.6K

Open source * Windows * Машинное обучение * Программирование * Искусственный интеллект

Кейс

Из песочницы

Комментарии 20

alexwm 24 сен в 09:51

Далее мы просто открываем, смотрим и наслаждаемся тем, что не тратили сил на построение нашей базы знаний

И именно поэтому она работать и не будет. Заметка должна быть вами проработана самостоятельно, через это приходит понимание и осознание. У вас будет обширный справочник, но не база знаний.

ijne 24 сен в 09:58

Да, я тоже об этом думал и поэтому сделал механизм ручного редактирования с последующим подтверждением. То есть пользователь всегда проверяет и прорабатывает то, что добавляется в базу. Заодно это помогает отсеивать возможные неточности в ответах LLM.

JBFW 24 сен в 16:55

Это дискуссионный вопрос.

Есть многое такое, что требует записок и заметок (потому что сегодня оно не актуально), при этом его совершенно незачем прорабатывать отдельно.

Понадобиться оно может например завтра, или через месяц - и вот тогда вы его должны суметь найти. Если не понадобится - оно вам и не нужно.

Раньше я бы сам сказал "нафига? Есть же Гугль?" - но сейчас всё больше разной информации, которая исчезает бесследно: там отменили, тут запретили, где-то сочли вредной и ненужной. А у меня голова не резиновая, всё помнить.

vdimas 2 окт в 08:11

В реальности граница стирается. Любые знания, если ими не пользоваться регулярно хотя бы несколько месяцев, а лишь только "однократно разобраться за пол-часа", через единицы месяцев стираются из памяти, оставляя только самое общее представление на уровне "где-то слышал об этом", а иногда и этого не оставляя.

Цикл проработки любых знаний - это активация долговременной памяти через кратковременную, т.е. стандартные повторы материала через несколько часов, дней, недель. При таком подходе "просто справочник" мало отличается от "моих проработанных заметок".

Справочники - вообще великая вещь в деле самообучения (т.е. "механических сеансов возвращения к одной и той же информации" с т.з. работы нашей памяти), странно было услышать про них в уничижительной коннотации.

Naxofon 24 сен в 11:27

В статье не особо понятно что это и какие проблемы решает. По конспекту понял что это что-то похожее на Notebook LM, но есть уже давно open notebook где можно делать тоже самое

ijne 24 сен в 12:01

Как я писал в начале статьи, я не уделял много времени поиску аналогов, потому что в большей степени у меня был практический интерес сделать что-то самому. Посмотрел Open Notebook — действительно, проекты во многом похожи. Из отличий memplua могу выделить фоновую потоковую запись и обработку любого звука с компьютера, а не добавление заранее выбранного материала в качестве источника.

purple_elephant 24 сен в 15:28

У меня бытовой вопрос, какой процессор и объем оперативной памяти минимально и оптимально нужно для работы этой системы?

ijne 24 сен в 15:55

У меня работает на Intel Core i5-11260H, RTX 2050 4 GB и 16 GB оперативной памяти. На другом железе пока не тестировал, поэтому точные минимальные требования назвать не могу. Большую часть памяти занимают модели — около 3 ГБ. Нагрузку можно по-разному распределять между CPU и GPU при наличии CUDA. При работе на процессоре максимальная загрузка у меня была около 80%. Пробовал полностью переносить вычисления на видеокарту — в таком случае процессор практически не нагружался, а скорость генерации увеличивалась примерно в 1,5 раза.

Aquahawk 24 сен в 17:03

5 лет, 2163 заметки и всё создано руками. Никаких грабберов, никакой копипасты. ТОлько то, что я переварил и сам записал. Я сейчас делаю аи пайплайн который выкачает всё сохранённое включая видосы, всё это распарсит, вектризует и сделает по этому поиск. Но это будет жить отдельно, а не в моём обсидиане. Одно дело картотека моих знаний, другое всёкое что видел и к чему хочется иногда обратиться, но не относится к моим прямым знаниям.

графовый вид абсолютно бесполезен в реальности

BReal 25 сен в 04:52

Скачал, но не запускается. Smart Screen спросил - готов ли я запустить, я согласился, но далее - ничего. Windows 10. 1070 GTX 8Gb, i5. 16 Gb RAM.

ijne 25 сен в 06:22

Скорее всего, это баг интерфейса: само приложение, вероятно, запустилось, но окно не отобразилось. Попробуйте завершить memplua.exe через диспетчер задач и запустить приложение заново. У меня такой баг тоже иногда появлялся, постараюсь разобраться с причиной.

Axell87 26 сен в 10:28

а как запустить приложение? я скачал архив и скачал exe файл

Axell87 26 сен в 10:32

Разобрался. Но есть несколько замечаний, я так и не смог запустить.

1. В документации написано:

Откройте memplua.space и нажмите кнопку скачивания установщика. Она ведёт к файлу на Hugging Face. Скачайте memplua-<версия>-windows-x64-offline-setup.exe (около 2,6 ГБ); он содержит Qwen3-4B-Q4, Whisper small, Silero и необходимые библиотеки.

Открываю ссылку жму скачать - редирект на гитхаб. Инструкция не верная;
2. Скачал с гитхаба нужный репозиторий выполняю

powershell -NoProfile -ExecutionPolicy Bypass -File .\download-models.ps1

получаю:

 C:\memplua-0.2.0> powershell -NoProfile -ExecutionPolicy Bypass -File .\download-models.ps1
Не удается преобразовать значение "System.Object[]" типа "System.Object[]" в тип "System.Int64".
C:\memplua-0.2.0\download-windows-models.ps1:66 знак:5
+     [PSCustomObject]@{ Name = $Path; URL = "https://huggingface.co/$R ...
+     ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
    + CategoryInfo          : InvalidArgument: (:) [], ParentContainsErrorRecordException
    + FullyQualifiedErrorId : ConvertToFinalInvalidCastException

3. Похоже модель на hugs либо не существует, либо перенесли - ничего не скачивается.

curl: (22) The requested URL returned error: 404
curl: (22) The requested URL returned error: 404
curl: (22) The requested URL returned error: 404
Unable to download Qwen3-4B-Q4_K_M.gguf: curl.exe exited with code 22 while downloading bytes 0-33554431 of Qwen3-4B-Q4
_K_M.gguf.

ijne 26 сен в 10:34

Поправил ссылки, кнопка установки на сайте теперь должна вести на нужную версию установщика с HuggingFace.

ijne 26 сен в 10:32

Спасибо за фидбек. Буквально вчера завели issue по этой проблеме: https://github.com/Ijne/memplua/issues/1 Ошибка возникала из-за отсутствующих библиотек в сборке. Я уже обновил установщик — теперь необходимые зависимости должны устанавливаться вместе с приложением. Попробуйте скачать обновлённую версию с сайта и установить её заново.

Axell87 26 сен в 10:35

Дайте корректную ссылку на FULL инсталлятор.
Ваша ссылка с веб-сайта https://memplua.space/ не ведет туда куда обещано.
где взять: "Скачайте memplua-<версия>-windows-x64-offline-setup.exe (около 2,6 ГБ)" ?

ijne 26 сен в 10:36

https://huggingface.co/ijne/memplua/blob/main/memplua-0.2.0-alpha.4-windows-x64-offline-setup.exe

Поправлю ссылку в README, чтобы она вела прямо на установщик, а не на сайт с кнопкой)

Axell87 26 сен в 10:53

отлично спасибо! Потому что с этими запусками, ошибками в PS короче, муторно все.
Буду сегодня тестировать, большое спасибо!!!

Axell87 26 сен в 12:15

А где-то можно прочитать про базовый функционал? Я вот включаю микрофон, пытаюсь записать звук появляется значок: "Восстанавливаем связь".
Хотел закинуть видео-фрагмент для теста (как-будто с ютуба) в окно: Memory но ничего не происходит, так же пробовал из буфера обмена сделать это же.
Может быть видео презентация есть основ?

Всегда один ответ "Входящие конспекты" и "Все разобрано)

"Обработка знаний" готов к работе но нажать не могу (на вот мозг этот или что это)

Как добавить что-либо во входящие конспекты?

Какое значение надо установить чтобы модель на 100% была в GPU?
Видео попыток: https://disk.yandex.ru/i/lDpoy3KJkvUYwg

Axell87 26 сен в 12:45

а в инкогнито такое

Зарегистрируйтесь на Хабре, чтобы оставить комментарий