Вам не нужна «база знаний» и RAG вам тоже не нужен

Мое первое официальное место работы звучало как «knowledge manager» (что переводилось «менеджер по управлению знаниями»), с тех пор я делал много попыток внедрять разные базы знаний и всякий там knowledge management и вот что могу сказать:

1. Большинство делают ошибку и создают «базу знаний» ради «базы знаний», называется «ловушка коллекционера».

То есть у вас получается красивая база знаний, но абсолютно мертвая, т.к. ей особо никто не пользуется, ценности нет, только расход токенов и времени.

2. Лучшие базы знаний строятся от output, а не от input. То есть от того, что вы оттуда будете извлекать,а не от того, что вы будете туда класть.

Грубо говоря, если я строю базу знаний которая будет каждый день генерировать посты в мой telegram-канал (возможно тогда и база знаний не нужна) — это нормальный подход. А если я строю базу знаний по принципу «вот мои документы, наведи порядок» — это заведомо провал и «ловуша коллекционера».

3. Как только начинаешь делать от output (а не от input), неожиданно окзывается, что база знаний в 80% случаев особенно не не нужна, т.к. там нет ничего такого уникального, чего бы нельзя было найти просто по запросу в интернете.

Короче, внутренняя база знаний практически всегда проигрывает Google/Яндекс (а сейчас ChatGPT) из-за того, что внешние поисковики полнее и круче работают + у пользователей есть привычка ходить туда.

4. Мода на RAG стремительно проходит, этот подход проигрывает практически во всем обычному поиску или поиску по Wiki (подход Андрея Карпатны). Хотя есть, конечно, кейсы, где RAG по-прежнему хорош.

Я ради эксперимента сделал себе базу знаний в виде Wiki + Obsidian (как читалка).

Работает все на md-файлах таким образом:

1. Папка output куда ежедневно прилетают интересные мысли из моих же собственных статей, разные рекламные оферы, идеи продуктов (признаюсь, пока не нашел лучшего применения, чем для генерции контента)

2. Папка input – куда я забрасываю свои статьи, заметки

3. Есть магия claude code – который все это структурирует и перелинковывает, делает wiki, разбивает сложные заметки на мелкие. Иногда базу знаний нужно перетряхивать (по сути перелинковывать)

Вся работа идет в claude code, а просмотр в Obsidian (см. скриншот)

А вам зачем нужен «второй мозг» и всякие там базы знаний?