База знаний
NeuralDeep — российская AI-инфраструктура на локальных моделях
NeuralDeep: российская AI-инфраструктура on-prem. Чат с OSS-моделями, OpenAI-совместимое API, браузерный IDE, сеть агентов, RAG-поиск и каталог скиллов.
NeuralDeep — это российский AI-хаб, который держит весь стек на собственных GPU в РФ: чат с открытыми моделями, OpenAI-совместимое API, браузерный AI-IDE, сеть агентов, корпоративный поиск с RAG и каталог скиллов. Всё это работает прямо сейчас, у части продуктов есть бесплатный тариф, а тот же стек команда разворачивает on-premise в контуре заказчика.
Проект ведёт Валера Ковальский — Head of AI, автор Telegram-канала про LLM и инфраструктуру. Раньше большинство знало NeuralDeep по одному только каталогу скиллов, но это лишь одна из шести витрин куда более крупной платформы.
Что такое NeuralDeep
NeuralDeep (neuraldeep.ru) — это AI-инфраструктура, собранная на открытых моделях (gpt-oss-120b, Qwen3.6, BGE/E5-embeddings, Whisper) и развёрнутая на собственных серверах в России. Идея простая: дать доступ к топовым OSS-моделям без VPN, без зарубежных платёжек и без передачи данных за рубеж.
Платформа состоит из двух частей:
- Готовые продукты — ими можно пользоваться прямо сейчас на серверах NeuralDeep, у части есть бесплатный тариф.
- Внедрение в вашем контуре — тот же стек команда разворачивает on-premise: на ваших GPU, с вашими данными, под ваши процессы.
Всё ключевое выложено в open source — на GitHub у проекта более 1 100 звёзд.
Продукты платформы
Шесть витрин закрывают основные сценарии работы с LLM — от чата до сети агентов.
| Продукт | Что делает | Адрес |
| Hub | Свой LLM API на GPU NeuralDeep. OpenAI-совместимый gateway, 10 моделей (gpt-oss-120b, Qwen3.6, e5/bge-embeddings, Whisper). Есть бесплатный тариф | hub.neuraldeep.ru |
| API | Прямой программный доступ к тем же моделям: /v1/chat, /v1/embeddings, /v1/audio. Подключается как OpenAI | api.neuraldeep.ru |
| Coder | Браузерный AI-IDE: opencode-агент в одноразовой Firecracker microVM. Подключаете GitHub, открываете репозиторий и кодите на локальных OSS-моделях | coder.neuraldeep.ru |
| Drift | Self-hosted сеть AI-агентов: Telegram-бот, веб-клиент и OpenAI-совместимое API. Скиллы, расписания, инструменты | drift.neuraldeep.ru |
| Search | Корпоративный поиск и RAG по внутренним данным и веб-источникам. Единый вход через Hub, есть бесплатный тариф | search.neuraldeep.ru |
| skillsBD | Open-source каталог скиллов и MCP-серверов для российских сервисов: Яндекс, 1С, Битрикс, GigaChat, Wildberries. 46+ инструментов | neuraldeep.ru/skills |
Модели и стек
Всё крутится на собственных GPU в РФ, без проксирования в зарубежные облака.
| Категория | Модели и технологии |
| Генеративные LLM | gpt-oss-120b, Qwen3.6 — для чата, кода и агентов |
| Embeddings | BGE, E5 — для поиска, RAG и векторных баз |
| Audio | Whisper — транскрипция, в том числе RU/EN с таймстампами и диаризацией |
| Инфраструктура | LiteLLM, vLLM, FastAPI, Traefik, Firecracker microVM |
Подключение по API
Hub и API совместимы с форматом OpenAI, поэтому подключение сводится к замене base URL и ключа. Работает с opencode, Cursor, Cline, Python SDK и любым клиентом, который умеет в OpenAI API.
from openai import OpenAI
client = OpenAI(
base_url="https://api.neuraldeep.ru/v1", # endpoint NeuralDeep вместо api.openai.com
api_key="<ваш ключ из hub.neuraldeep.ru>",
)
response = client.chat.completions.create(
model="gpt-oss-120b",
messages=[{"role": "user", "content": "Привет!"}],
)
print(response.choices[0].message.content)Доступные эндпоинты — стандартные для OpenAI: /v1/chat/completions, /v1/embeddings, /v1/audio. Ключ выпускается в личном кабинете Hub.
base_url и api_key. Имена моделей при этом меняются на локальные (например, gpt-oss-120b).Тарифы и развёртывание
| Вариант | Что входит | Кому подойдёт |
| Бесплатный тариф | Доступ к Hub, API и Search на серверах NeuralDeep в РФ | Личные проекты, прототипы, знакомство со стеком |
| On-premise | Тот же стек разворачивается на вашем железе, с вашими данными и биллингом по пользователям | Компании с требованиями к безопасности и контролю данных |
Для внедрения в своём контуре команда предлагает четыре направления:
- LLM gateway на ваших GPU — self-hosted OpenAI-совместимый API, multi-tenant, с биллингом и observability. Срок развёртывания — 1–2 недели.
- Корпоративный RAG / поиск — embeddings + reranker + Qdrant или pg-vector, с подключением к Confluence, Bitrix и файловым шарам. Без утечек в облако.
- Кастомный AI-агент — под ваш стек: CRM, базу знаний, документооборот. На проверенных open-source кирпичах (Claude Code, Cursor, MCP).
- Audio / транскрипция on-prem — Whisper на ваших GPU, real-time через WebSocket и batch для архивов.
Open source
NeuralDeep выкладывает в open source инструменты, которыми пользуется сам (github.com/vakovalskii, 1 100+ звёзд).
| Проект | Что делает | GitHub ⭐ |
| KVDesk | Локальный AI-ассистент с виджетами и поддержкой MCP | 326 |
| searcharvester | Self-hosted поиск и markdown-harvester для агентов (SearXNG + FastAPI), Tavily-совместимый | 213 |
| codbash | Браузерный дашборд для сессий Claude Code и Codex: просмотр, поиск, теги, resume | 201 |
| topsha | Локальный AI-агент для простых задач на ПК (gpt-oss, Qwen, GLM) | 147 |
| whisperx-fronted-docker-compose | WhisperX с UI и docker-compose: таймстампы, диаризация, RU/EN из коробки | 66 |
| LocalTaskClaw | Персональный AI-агент, деплой в 3 шага на любой Linux-сервер | 34 |
Каталог скиллов skillsBD
skillsBD (neuraldeep.ru/skills) — open-source каталог скиллов и MCP-серверов для AI-агентов, заточенный под российские сервисы. Скилл — это папка с файлом SKILL.md, который учит агента, как выполнить задачу. Каталог закрывает нишу, которой нет в западных агрегаторах: скиллы для Яндекса, 1С, Битрикса и DaData там просто не найти.
Что внутри каталога
| Характеристика | Описание |
| Количество | 46+ инструментов (скиллы + MCP-серверы) |
| CLI-установщик | npx skillsbd add <owner/repo> — установка одной командой |
| Модерация | Добавление через форму с ревью, авторизация через GitHub OAuth |
| Совместимость | Claude Code, Cursor, Codex, Windsurf, а также GigaCode, Koda, SourceCraft |
| Фокус | Российские сервисы: Яндекс, 1С, Битрикс, GigaChat, Wildberries, DaData |
Ключевые скиллы
| Скилл | Что делает |
| 1С:Предприятие | 65 скиллов для полного цикла разработки на 1С 8.3: XML-форматы, CLI конфигуратора, тестирование |
| Яндекс (Метрика, Вебмастер, Wordstat) | Аналитика, индексация, анализ поисковых запросов через API |
| DaData | Проверка контрагента, валидация адреса, очистка контактов, поиск по справочникам |
| Битрикс24 | Интеграция с CRM Битрикс24, работа с сделками и лидами |
| СберМобайл | Личный кабинет через терминал: остатки, тариф, услуги, бонусы |
Как установить скилл
CLI работает через npx — глобальная установка не нужна. После установки скилл появляется в .claude/skills/ и сразу доступен агенту.
# Установить скилл
npx skillsbd add theYahia/dadata-mcp/dadata-skills
# Найти скиллы в каталоге
npx skillsbd search "яндекс"
# Посмотреть установленные
npx skillsbd listSKILL.md. Скилл — это инструкции для агента, и в нём может быть prompt injection. Плюс каталога skillsBD в том, что всё проходит модерацию, но базовую проверку всё равно делайте сами.Практические сценарии
- Заменить зарубежный LLM-провайдер. Перевести существующий проект на локальные модели в РФ, поменяв base URL и ключ — без VPN и зарубежных платёжек.
- Кодить на локальных моделях. Открыть репозиторий в браузерном Coder и работать с opencode-агентом без установки и без OpenAI/Anthropic.
- Собрать корпоративный поиск. Поднять RAG по внутренним документам через Search или развернуть его on-premise.
- Запустить сеть агентов. Через Drift поднять Telegram-бота и веб-клиент со скиллами и расписаниями на собственных моделях.
- Расширить агентов под RU-сервисы. Поставить скиллы из каталога skillsBD для Яндекса, 1С, Битрикса, Wildberries.
- Транскрибировать аудио on-prem. Расшифровывать совещания и звонки через Whisper, не отдавая записи в облако.
Полезные ссылки
- NeuralDeep: neuraldeep.ru — главная платформы, обзор всех продуктов
- Hub: hub.neuraldeep.ru — чат и LLM API, старт бесплатно
- API: api.neuraldeep.ru — OpenAI-совместимое API
- Каталог скиллов: neuraldeep.ru/skills — skillsBD, навыки и MCP для RU-комьюнити
- GitHub: github.com/vakovalskii — open-source проекты NeuralDeep
- Telegram: t.me/neuraldeep — канал Валеры Ковальского про LLM, агентов и инфраструктуру
По теме
Если соберётесь поднимать локальные модели у себя или в команде и захотите обсудить, с чего начать — пишите в Telegram @pimenov
Если хотите разобрать свою задачу — напишите мне Если хотите разобрать свою задачу — напишите мне.
Можно прийти с идеей, черновым контекстом или уже живой задачей. Помогу быстро понять, где реальный следующий шаг, а где лишний шум.
Обычно хватает 2–3 сообщений, чтобы понять, могу ли я здесь реально помочь и в каком формате лучше двигаться дальше.