AI и графы знаний: открытый проект сообщества EleutherAI
Ответы лежат в тысячах документов, и чтобы найти нужный, их перечитывают днями. Мы построили конвейер, который читает всё и связывает главное в граф: задаёте вопрос - получаете ответ и источник.
Проблема
Целая область науки - и никакой карты.
- Тысячи статей, постов и расшифровок по безопасности AI.
- Цель: найти каждый риск, каждую меру против него и связи между ними.
Что сделали
LLM читают, граф помнит.
- LLM разбирает каждую статью и вытаскивает главные идеи: риски, методы и меры.
- Идеи превращаются в векторы, похожие сливаются.
- Всё связывается в один граф с поиском по смыслу.
- Граф строили в открытом проекте сообщества EleutherAI по безопасности AI: наша часть - конвейер разбора и загрузка в граф.
Что изменилось
- Один вопрос - и граф показывает все меры, связанные с риском, по всей библиотеке.
- Вся библиотека разобрана за вечер вместо месяца по одной статье.
- Код открыт, готовим научную статью.
На чём сделано
- OpenAI
Ещё: Python, векторный поиск и граф знаний, Docker.
Другие кейсы
01Сеть ресторанов
Весь бизнес на одном экране
Деньги жили в пяти системах. Теперь весь бизнес на одном экране каждое утро.
02Платформа под нагрузкой
Десять микросервисов, терабайт в день и единый источник истины
Данные терялись между десятью сервисами. Теперь один поток событий и одна база.
04Mosena
Mosena: закрыли всё сами, от начала до конца
Была идея приложения. Теперь работающий продукт с AI, сделанный от начала до конца.
Давайте расти вместе
Расскажите, что отнимает время и деньги. Ответим в течение рабочего дня и предложим время для звонка.
Первый разговор - 30 минут, бесплатно, и говорит с вами инженер, а не менеджер по продажам. Почта: hello@maglab.app
Кто ответит
Глеб Максимов, основатель MagLab. 8 лет в данных, ML и системах под нагрузкой: стартапы, исследовательские лаборатории, корпорации. LinkedIn