Курс «Система Райта: от нуля до работающего AI-продукта с оплатой за 10 недель» https://link.makeunion.ru/OY7btn
🚀 Система Райта — то, что не попадает на YouTube.
Получи доступ в закрытый канал (AI-связки, промпты, кейсы) → https://link.makeunion.ru/5wmc9V
📌 Материалы УПОМЯНУТЫЕ в видео:
– Материалы из моих видео: https://link.makeunion.ru/rr0s4h
– Улучшатель промтов: https://link.makeunion.ru/i1JWai
Мои продукты:
– Yoolip AI. Умная аналитика рекламы на маркетплейсах: https://link.makeunion.ru/NoyYN9
– Коннектио. AI-платформа для найма: https://link.makeunion.ru/kWEsDf
В этом видео показываю, как работать с большими данными через Wiki-слой по системе Карпати: не загружать файлы в ChatGPT или Claude каждый раз заново, а один раз очистить, структурировать и связать данные так, чтобы агент находил нужную информацию быстрее, точнее и без лишней траты токенов.
💬 Мои соц сети:
– Telegram: https://t.me/romarayt
– Основной YouTube: https://youtube.com/@romarayt
Таймкоды:
00:00 — Введение
00:57 — Главная идея системы Карпати
01:34 — Как Wiki-слой сохраняет правки и ошибки
02:20 — Пример задачи
03:31 — Создаем проект и загружаем исходные файлы
04:35 — Промпт для создания Wiki-слоя
05:00 — Как агент очищает HTML и превращает данные в Markdown
05:49 — Какие вопросы задать агенту перед сборкой базы
06:43 — Структура Wiki: инструкции, сырые данные, шаблоны
07:46 — Готовая база: папки, данные и Wiki-слой
08:14 — Как открыть базу в Obsidian
08:37 — Как выглядит граф знаний
09:31 — Пример: идеи для постов на основе базы
10:32 — Когда Wiki-слой особенно полезен
10:52 — Пример большой YouTube-системы
11:51 — Бытовой пример: система по здоровью и личным данным
13:27 — Как адаптировать промпт под свою задачу
14:26 — Для каких задач можно использовать Wiki-слой
14:33 — Итог: как повторить систему под себя
Transcript
Введение
0:00 · Самая большая проблема людей, кто до сих пор использует обычный ноутбук LM или же отправляет файлы в чат сча GPT или ClД в том, что и моделям приходится каждый раз читать ваши файлы с нуля. Мало того, что им приходится читать ваши файлы с нуля, их качество поиска информации внутри этих данных, оно, ну, максимально низкое. И лучше всего решение этой проблемы предложил Карпатис. Это один из
0:20 · первых инвесторов Open AI, человек, кто занимался искусственным интеллектом в Tтеesla, а сейчас присоединился к команде Antropic. И он предложил ту систему, которая не требует большого количества времени, работает лучше, чем любой рак слой или же просто загружать файлы в обычной и - модели и будет настолько универсально, что то, что я вам покажу в этом видео, одинаково подойдёт для книги рецептов и для продумывания солостартапа, для создания
0:44 · постов для Telegram и для создания сценариев для видео. Всё это для того, чтобы работать с большими данными и работать максимально эффективно. Меня зовут Ромарейд. Ты на канале Нейропросвещения. Поехали.
Главная идея системы Карпати
0:57 · Основная идея крепатия состоит в том, чтобы не давать нерести каждый раз читать эти файлы заново. Потому что если они загружены в ваш проект в сыром виде, тогда вам постоянно приходится тратить ресурсы для того, чтобы расшифровать PDF-файл, выбрать из него то, что действительно будет полезно. И это в случае, когда, допустим, тот же Chat чат GPT догадается расшифровать PDF-файл и
1:17 · перевести его в текст для того, чтобы использовать информацию из неё. Но мы все знаем, что любая модель с радостью вообще сделает вид, что она прочитала этот файл, но не сделала это. Поэтому то, что я показываю, оно буквально избавляет вас от этих проблем и больше никогда не будет вам врать.
1:33 · Дополнительно с этим у нас нету в памяти таких вещей, как если мы допустили какую-то ошибку или поняли, что ей модель ошибается, сказать ей об этом и чтобы в будущих запросах она это поняла.
Как Wiki-слой сохраняет правки и ошибки
1:43 · Например, я, когда писал заголовки для своих видео в обычном клоде или чаat GPT, каждый раз мне приходилось ему объяснять, что он делает одни и те же ошибки. И как ты не прав инструкции, завтра он снова её допустит, если ты руками не исправишь алгоритм. Сейчас я использую эту систему, которую вам показываю. И про свою YouTube систему я рассказывал в отдельном видео, подсказка будет на экране. Так вот, благодаря тому, что я встроил это в большие данные и создал эту Wiки-систему, у меня буквально на каждую мою правку, то есть условно ты сделал не такой заголовок: “Поправь”. Это будет добавлено в память
2:14 · моего Вики, и уже завтра эта ошибка как минимум будет замечена агентом и больше не допущена. Для того, чтобы показать вам на конкретном примере разницу, давайте возьмём достаточно простую задачу. Мне нужно сделать исследование аудитории. И лучше всего это сделать по комментариям в моём Telegram-канале. Для этого я в Telegram скачал все комментарии за последний месяц. И втором виде они у меня выглядят вот так. То есть это просто неочищенные файлы, большая часть из которых на самом деле даже не сам текст. Большая часть из этих файлов является HTML, теги, дивы и так
Пример задачи
2:44 · далее. И поэтому просто добавив это в чат GPT в тот же самый, как я делал, например, раньше, я должен учесть, что нажав на посмотреть код, как вы видите, большая часть контекст будет сожрана именно кодом. И так, на самом деле, в большом количестве файлов. Вот я делал себе систему по здоровью. Там было ровно то же самое. Большая часть моих файлов - это какие-то пдфки от врачей, куча каких-то исследований. Я обычно выгружаю диалоги с ещё для того, чтобы у меня была полноценная система с моими мыслями. И, ну, то есть понятно, что
3:14 · половина того, что я пишу Клоду и того, что он мне отвечает, вода. И, наверное, только половина из информации хоть как-то годится и вообще только 10% будет действительно полезной. И в модели с чатом мы заставляем его каждый раз смотреть её всё. Поэтому сейчас, чтобы реализовать эту задачу, мы создадим понятную систему папок, из которой и создадим wки слой. Возьмём эти файлы и перейдём в clк. Будем использовать clД cво, но на всякий случай уточню, что для сегодняшней задачи вы можете использовать любую агентную модель.
Создаем проект и загружаем исходные файлы
3:43 · Антигравити, код, кодекс и clд coverр.
3:46 · Это основные. Есть ещё куча локальных и так далее, но мы говорим про то, что действительно хорошо работает. Дальше, что нам нужно будет сделать - это создать здесь новый проект. Для проекта я могу создать либо новую папку, в которой я перенесу все данные, либо использовать текущую. Я предлагаю создать новую. И давай так и назовём данные поца. Здесь я могу сразу добавить файлы, которые будут перекинуты в нашу папку. Но предлагаю начать с нуля, после чего нажать здесь на папку, попасть внутрь её, и после чего мы перенесём
4:15 · отсюда всё, что нам нужно. 3 HTML-файла с выгрузкой данных. Я не буду вам здесь долго объяснять, как работает система Карпать. Ну, именно в теории, согласитесь. Во-первых, никому не имеет смысла знать, как там работают папки.
4:27 · Просто по той причине, что вы не будете их руками делать, их сделает сам агент.
4:32 · Поэтому давайте просто наблюдать за результатом и за тем, как его создать.
Промпт для создания Wiki-слоя
4:35 · Сам прот максимально простой. Здесь замените cво на кодекс и так далее. В остальном всё плюс-минус одинаково.
4:43 · Здесь инпут вы заменяете на свою задачу.
4:46 · И по сути именно в инпутена моя задача для примера. Чуть дальше я покажу вам, как использовать этот промт под любую задачу с помощью улучшателя промнтов. И самим пронтом я тоже поделюсь с вами.
4:56 · Здесь выберем главную модель и нажмём отправить. Что произойдёт дальше? Для начала код коворк очистит весь мусор из файла. Ну там, если это HTML, почистит до MD-файлов. После чего мы получим Markдаун разметку, которая будет разбита по папочкам с данными, которые будет легче находить агенту. Все эти файлы будут подписаны, связаны между собой. И
Как агент очищает HTML и превращает данные в Markdown
5:17 · после чего будет подключён обсидиан слой. Из-за чего, когда мы будем давать агенту задачу, ну, например, там найди какую-то информацию, он будет смотреть не в полных файлах, а в их, во-первых, саморайзере. Во-вторых, будет видеть граф взаимосвязи, и благодаря этому качество ответов будет лучше, токенов будет уходить меньше. Ну и в целом работа изменится над вообще любой
5:38 · простой даже задачей кардинально. От написания постов у меня кардинально работа менялась до каких-то более сложных штук. Ну вот по типу, да, YouTube системы моей на 20 с чем-то тысяч файлов. В случае с коворком он также нас спросит, что именно мы хотим сделать. Давай мы скажем более идеи контента, карту непонимания продуктов и сегменты аудитории. Нажму далее. И здесь просто выбираем рекомендацию для него.
Какие вопросы задать агенту перед сборкой базы
6:01 · Куда положить Виiки? Rф останется на месте. Опять же выбираем просто под папка, вот как оно сейчас есть. И мы видим, что он самостоятельно нам описывает, как именно теперь будет выглядеть наша система. Во-первых, будет построена lm модель понятная lm вики.
6:16 · После чего какая основная задача у нас?
6:19 · Это будет взято из инпута, который совсем скоро покажу, как изменить под вашу задачу. Например, превратить сырой Telegramчат в производственное базнание от аудитории, да, и, соответственно, те самые три задачи, которые мы ему давали.
6:31 · основные вопросы для аналитики. После чего он здесь сразу же, а, смотрит какие-то форматы, да, контента, который есть в наших файлах, и даёт нам то, как будет выглядеть наша база. Давайте немного пройдёмся по ней. Во-первых, есть клод MD. Если вы пользуетесь другими агентными моделями, то это.
Структура Wiki: инструкции, сырые данные, шаблоны
6:50 · Например, в кодексе. И в этом файле у вас будут кастомные инструкции для агента. Здесь мы, кстати, видим, что они ещё, я так понимаю, не созданы. Давай мы перейдём в наш Wiки. Нет, они готовы.
7:00 · Это инструкция для агента по директории, по наименованию файлов и как их наименовывать в будущем для того, чтобы им было легче с ними работать и легче искать. Различные типы страниц для того, чтобы он понимал. Ну и здесь, на самом деле, у нас у всех будет слегка по-разному это выглядеть зависит от задач. Основа будет одна, то, что здесь
7:17 · будет, грубо говоря, навигация, инструкция агенту, как работать с файлами, для того, чтобы все они были по единому шаблону. У нас есть папка с датой, а, есть папка с сырыми данными, то есть вот этими самыми, есть папка с шаблонами, например. Мы здесь можем увидеть, что он сразу для себя шаблоны файлов сделал, опять же, для того, чтобы всё было в едином формате. И после чего идёт слой Вики. То есть здесь у нас все вопросы и так далее, что и создаётся.
7:43 · Сейчас мы это не видим, потому что он ещё доделывает. Мы можем посмотреть, что у нас по факту он уже сказал, что он вытягивает из HTML только полезный контент, который нам и нужен. Итак, у нас готовы наши файлы. Это довольно большая работа. Агенту необходимо один раз проделать для того, чтобы в будущем у нас все данные не требовали какого-то
Готовая база: папки, данные и Wiki-слой
8:03 · большого количества сжигаемых токенов и так далее. Я у нас папка срым материалами, папка с датой, папка с вийки и папка шаблонна. Для того, чтобы лучше теперь понять, как это на самом деле работает, давайте воспользуемся приложением Obsidian. По сути, что делает Obsidian? Это просто визуализатор
Как открыть базу в Obsidian
8:20 · той самой Вики для того, чтобы мы с вами могли её легко посмотреть и легко ориентироваться в файлах, которые там есть, и пользоваться ими для того, чтобы работать с этой базой. Нажимаю здесь открыть и выбираю здесь ту самую нашу папку, которую мне остаётся открыть. И мы увидим тот самый граф знаний, который создан. Несмотря на то, что у нас не самая большая задача, мы видим то, что у нас есть основная, где, соответственно, для агента есть всё необходимое, что,
Как выглядит граф знаний
8:45 · где, как работает, какие темы повторяющиеся, сколько сообщений, сколько авторов. Дальше здесь риски и всё остальное. После чего мы видим все взаимосвязи, например, все вопросы про обучение перед тем, как на него прийти.
8:58 · Если что, кстати, ссылка будет в описании. Стартуем 28 мая, то есть уже вот-вот сейчас доступна скидка. на сайте в таймере в реальном времени показано, когда она заканчивается. И дальше мало того, что вы уже в этих файлах получаете большое количество информации, по сути уже рассортированной, очищенной, подробно описанный, мы можем также перейти в Ики посмотреть, например, датасet профильil, сколько сообщений было, кто самые топовые авторы, какие у них реакции, что они делают, какие темы
9:27 · и так далее. И теперь, когда я буду работать с этими данными, давай даже попробуем, дай мне топ-10 идей для постов. основываясь на данных, которые у тебя есть в этой директории. Это не промт. Я здесь ничего ему дополнительно не даю, не говорю про скилы какие-то и всё остальное. И мы видим итоговый результат. По идее за май в чате 46 человек написали, что их забанили. Я заметил кое-что общее. При том, что на самом деле мы никого не банили. Давай проверим, почему. Вовлечение. А, cloud бан. Всё, я понял, о чём речь. То есть здесь у нас про cl. Список вопросов, которые я больше не буду отвечать в чате. Неплохо.
Пример: идеи для постов на основе базы
10:01 · вашего курса новички. Кодекс обогнал колод. Меня спросили 19 раз, разбираю. В моём чате есть шесть человек, которые сами строят инструмент, что у них общего. Ваш недельный лимит ультать за 2 дня - это не баг. А читатель прислал мне связку из 10ти нейронок за 1.000 руб. в месяц. Я не кодеры за месяц, бла-бла-бла. Ну то есть это идеи, которые теперь действительно основаны на
10:22 · нашем графе знаний. Давай ещё быстро разберёмся с тем, как он может работать в других задачах для того, чтобы было более наглядно. И наконец-то перейдём к настройке промта. На самом деле логика здесь максимально простая. Конечно же, если у вас всего три файла, как было в данном примере, это не так эффективно.
Когда Wiki-слой особенно полезен
10:38 · Но что, если вы берёте не только 10.000 комментариев из вашего Telegram-канала, но и 1.000 видео, их транскрипции, статистика и всё остальное. Я это часто показываю, потому что это действительно моя самая большая Вики. И на её примере как раз-таки можно это рассмотреть. То, что здесь у меня каждое видео, то, что здесь у меня каждый мой пост. Все данные, которые он выясняет, исходя из этого, доступны в данном графе. И когда после чего агент проверяет какие-то идеи
Пример большой YouTube-системы
11:04 · или же смотрит информацию, он не просто ориентируется на файлы. Тут невозможно разобрать файл, тут сырых-то файлов больше 2.000. А я уже не говорю о том, какой здесь дополнительный слой вот этой вот Вики на 20.000 файлов для того, чтобы агенту было легче ориентироваться.
11:18 · Но то качество, с которым после такого графознания агент придумывает заголовки для видео, вот вы часто пишете о том, что здесь заголовки могут быть кликбейтные, так это и круто. Эти заголовки набирают просмотры. Если ориентироваться на цифры, мы невероятно круто делаем свою работу. И канал летит по просмотрам, даже по сравнению с конкурентом. Обложки, которые я лишь докручиваю после, но большая часть работы в идее именно к лоду принадлежит.
11:41 · Сценарий и всё остальное. А раньше мне нужно было постоянно где-то корректировать. Сегодня я даю максимум пару правок. У меня есть итоговое упакованное видео. Это и позволяет делать его так много и так часто. Идём к более бытовому примеру, который я собрал буквально сегодня. У меня долгое время, точно также по чатикам, было распределено там какие-то мои анализы медицинские, здоровье, а мои симптомы каких-то болезней, которые я сам для себя описал для того, чтобы лучше разбираться в том, что происходит с моим здоровьем. Ну, например, у меня проблемы с голосом, и я не могу долго снимать. Я
Бытовой пример: система по здоровью и личным данным
12:10 · быстро устаю, когда я снимаю. И поэтому мне важно постоянно контролировать, чтобы я не потерял голос и на месте его полностью не лишился, а, соответственно, канал лишился автора. И я в какой-то момент решил наконец-то всё это объединить в одну систему. Как итог, из вот таких сырых файлов. Это буквально архив всех чатов, где я общался связанным с моей личной жизненными задачами. То есть, например, что у нас здесь? Я готовился к восхождению на вулкан. Я смотрел, какой рюкзак мне взять, какая еда мне нужна на вершине.
12:37 · Здесь мы можем увидеть, есть мои мастердокументы по сёрфингу, которые я также делаю, потому что в этом документе, например, вы можете увидеть, что у меня были видео по сёрфингу, как я катаюсь. У меня была база, да, основная.
12:49 · Я прогнал клод через кучу видео про сёрфинг, чтобы он узнал, как это нужно делать правильно и так далее. И я и он уже анализировал все мои видео и создал из этого детальный документ, потому как мне нужно работать над собой для того, чтобы улучшить своё катание. Так вот, все эти сырые файлы я накидал сюда, и теперь здесь, начиная от моих предпочтений в еде, заканчивая историей всех моих болезней, аптечкой, которая есть у меня дома там и так далее, для того, чтобы любая проблема, которая у меня будет возникать в моей жизни, то есть рутинные задачи, да, они были выполнены буквально одним запросом в кодекс, либо Clotдка CW, либо OpenCW.
13:22 · Эта директория подвязана везде. Что же, теперь давайте перейдём к доработке улучшателя. Для этого перейдите по ссылке в описании, заберите весь промт, он достаточно большой. Вместе с промтом вы найдёте ссылку на мой улучшатель промтов. Всё это абсолютно бесплатно.
Как адаптировать промпт под свою задачу
13:37 · Соответственно, тут у нас нужно будет поправить только вот этот вот инпут, да, который нужно заменить под свою задачу.
13:43 · Для чего мы будем использовать улучшатель промтов? Смотри, ниже есть промт, по которому ты можешь увидеть, как создаётся викислой с помощью агентной модели. Я хочу, чтобы ты адаптировал его под мою задачу. Конечно же, здесь может быть что угодно. Это не обязательная история про жизнь. Просто действительно то, что каждая из вас может применить сегодня, это кардинально повлияет на вашу жизнь. Вы перестанете думать о каких-то там, ну, объективно банальных вещах, которые бессмысленны, да? А, например, куда поехать в
14:09 · путешествие? Ну, как бы загрузите свои интересы в нейронку, сделайте такой викислой, просто говорите: “Я хочу поехать то в путешествие”, и она за вас будет под ваш интерес. Это такая умная лента вашей жизни, да, умный помощник.
14:20 · Мы все листаем умную ленту запрещённой грамме. Но сделайте из своей жизни такую умную ленту. Это точно полезно каждому.
14:25 · А дальше рабочие задачи, задачи, связанные с контентом, задачи, связанные с бизнесом. Абсолютно всё можно прогнать через эту систему. И вот как итог, у нас улучшенный промт, который вам остаётся просто прогнать точно так же, как я показывал в начале видео. Вернитесь и повторите под свои задачи. Последнее видео доступно здесь по подсказке на экране. Увидимся. M.