pimenov.ai

База знаний

NeuralDeep — российская AI-инфраструктура на локальных моделях

NeuralDeep: российская AI-инфраструктура on-prem. Чат с OSS-моделями, OpenAI-совместимое API, браузерный IDE, сеть агентов, RAG-поиск и каталог скиллов.

Опубликовано

NeuralDeep — это российский AI-хаб, который держит весь стек на собственных GPU в РФ: чат с открытыми моделями, OpenAI-совместимое API, браузерный AI-IDE, сеть агентов, корпоративный поиск с RAG и каталог скиллов. Всё это работает прямо сейчас, у части продуктов есть бесплатный тариф, а тот же стек команда разворачивает on-premise в контуре заказчика.

Проект ведёт Валера Ковальский — Head of AI, автор Telegram-канала про LLM и инфраструктуру. Раньше большинство знало NeuralDeep по одному только каталогу скиллов, но это лишь одна из шести витрин куда более крупной платформы.

📌
Для кого: разработчики, технические директора и команды, которым нужны LLM на своём железе в РФ — без зависимости от зарубежных провайдеров и без утечки данных в чужое облако. Базовое знакомство с API и AI-агентами желательно.

Что такое NeuralDeep

NeuralDeep (neuraldeep.ru) — это AI-инфраструктура, собранная на открытых моделях (gpt-oss-120b, Qwen3.6, BGE/E5-embeddings, Whisper) и развёрнутая на собственных серверах в России. Идея простая: дать доступ к топовым OSS-моделям без VPN, без зарубежных платёжек и без передачи данных за рубеж.

Платформа состоит из двух частей:

  • Готовые продукты — ими можно пользоваться прямо сейчас на серверах NeuralDeep, у части есть бесплатный тариф.
  • Внедрение в вашем контуре — тот же стек команда разворачивает on-premise: на ваших GPU, с вашими данными, под ваши процессы.

Всё ключевое выложено в open source — на GitHub у проекта более 1 100 звёзд.


Продукты платформы

Шесть витрин закрывают основные сценарии работы с LLM — от чата до сети агентов.

ПродуктЧто делаетАдрес
HubСвой LLM API на GPU NeuralDeep. OpenAI-совместимый gateway, 10 моделей (gpt-oss-120b, Qwen3.6, e5/bge-embeddings, Whisper). Есть бесплатный тарифhub.neuraldeep.ru
APIПрямой программный доступ к тем же моделям: /v1/chat, /v1/embeddings, /v1/audio. Подключается как OpenAIapi.neuraldeep.ru
CoderБраузерный AI-IDE: opencode-агент в одноразовой Firecracker microVM. Подключаете GitHub, открываете репозиторий и кодите на локальных OSS-моделяхcoder.neuraldeep.ru
DriftSelf-hosted сеть AI-агентов: Telegram-бот, веб-клиент и OpenAI-совместимое API. Скиллы, расписания, инструментыdrift.neuraldeep.ru
SearchКорпоративный поиск и RAG по внутренним данным и веб-источникам. Единый вход через Hub, есть бесплатный тарифsearch.neuraldeep.ru
skillsBDOpen-source каталог скиллов и MCP-серверов для российских сервисов: Яндекс, 1С, Битрикс, GigaChat, Wildberries. 46+ инструментовneuraldeep.ru/skills
💡
Что объединяет все продукты: один и тот же набор локальных моделей и единый вход через Hub. Авторизовались один раз — и чат, API, IDE, агенты и поиск работают на общем стеке.

Модели и стек

Всё крутится на собственных GPU в РФ, без проксирования в зарубежные облака.

КатегорияМодели и технологии
Генеративные LLMgpt-oss-120b, Qwen3.6 — для чата, кода и агентов
EmbeddingsBGE, E5 — для поиска, RAG и векторных баз
AudioWhisper — транскрипция, в том числе RU/EN с таймстампами и диаризацией
ИнфраструктураLiteLLM, vLLM, FastAPI, Traefik, Firecracker microVM

Подключение по API

Hub и API совместимы с форматом OpenAI, поэтому подключение сводится к замене base URL и ключа. Работает с opencode, Cursor, Cline, Python SDK и любым клиентом, который умеет в OpenAI API.

from openai import OpenAI

client = OpenAI(
    base_url="https://api.neuraldeep.ru/v1",  # endpoint NeuralDeep вместо api.openai.com
    api_key="<ваш ключ из hub.neuraldeep.ru>",
)

response = client.chat.completions.create(
    model="gpt-oss-120b",
    messages=[{"role": "user", "content": "Привет!"}],
)
print(response.choices[0].message.content)

Доступные эндпоинты — стандартные для OpenAI: /v1/chat/completions, /v1/embeddings, /v1/audio. Ключ выпускается в личном кабинете Hub.

💡
Совет: так как формат совместим с OpenAI, миграция существующего проекта обычно занимает пару строк — поменять base_url и api_key. Имена моделей при этом меняются на локальные (например, gpt-oss-120b).

Тарифы и развёртывание

ВариантЧто входитКому подойдёт
Бесплатный тарифДоступ к Hub, API и Search на серверах NeuralDeep в РФЛичные проекты, прототипы, знакомство со стеком
On-premiseТот же стек разворачивается на вашем железе, с вашими данными и биллингом по пользователямКомпании с требованиями к безопасности и контролю данных

Для внедрения в своём контуре команда предлагает четыре направления:

  • LLM gateway на ваших GPU — self-hosted OpenAI-совместимый API, multi-tenant, с биллингом и observability. Срок развёртывания — 1–2 недели.
  • Корпоративный RAG / поиск — embeddings + reranker + Qdrant или pg-vector, с подключением к Confluence, Bitrix и файловым шарам. Без утечек в облако.
  • Кастомный AI-агент — под ваш стек: CRM, базу знаний, документооборот. На проверенных open-source кирпичах (Claude Code, Cursor, MCP).
  • Audio / транскрипция on-prem — Whisper на ваших GPU, real-time через WebSocket и batch для архивов.

Open source

NeuralDeep выкладывает в open source инструменты, которыми пользуется сам (github.com/vakovalskii, 1 100+ звёзд).

ПроектЧто делаетGitHub ⭐
KVDeskЛокальный AI-ассистент с виджетами и поддержкой MCP326
searcharvesterSelf-hosted поиск и markdown-harvester для агентов (SearXNG + FastAPI), Tavily-совместимый213
codbashБраузерный дашборд для сессий Claude Code и Codex: просмотр, поиск, теги, resume201
topshaЛокальный AI-агент для простых задач на ПК (gpt-oss, Qwen, GLM)147
whisperx-fronted-docker-composeWhisperX с UI и docker-compose: таймстампы, диаризация, RU/EN из коробки66
LocalTaskClawПерсональный AI-агент, деплой в 3 шага на любой Linux-сервер34

Каталог скиллов skillsBD

skillsBD (neuraldeep.ru/skills) — open-source каталог скиллов и MCP-серверов для AI-агентов, заточенный под российские сервисы. Скилл — это папка с файлом SKILL.md, который учит агента, как выполнить задачу. Каталог закрывает нишу, которой нет в западных агрегаторах: скиллы для Яндекса, 1С, Битрикса и DaData там просто не найти.

Что внутри каталога

ХарактеристикаОписание
Количество46+ инструментов (скиллы + MCP-серверы)
CLI-установщикnpx skillsbd add <owner/repo> — установка одной командой
МодерацияДобавление через форму с ревью, авторизация через GitHub OAuth
СовместимостьClaude Code, Cursor, Codex, Windsurf, а также GigaCode, Koda, SourceCraft
ФокусРоссийские сервисы: Яндекс, 1С, Битрикс, GigaChat, Wildberries, DaData

Ключевые скиллы

СкиллЧто делает
1С:Предприятие65 скиллов для полного цикла разработки на 1С 8.3: XML-форматы, CLI конфигуратора, тестирование
Яндекс (Метрика, Вебмастер, Wordstat)Аналитика, индексация, анализ поисковых запросов через API
DaDataПроверка контрагента, валидация адреса, очистка контактов, поиск по справочникам
Битрикс24Интеграция с CRM Битрикс24, работа с сделками и лидами
СберМобайлЛичный кабинет через терминал: остатки, тариф, услуги, бонусы

Как установить скилл

CLI работает через npx — глобальная установка не нужна. После установки скилл появляется в .claude/skills/ и сразу доступен агенту.

# Установить скилл
npx skillsbd add theYahia/dadata-mcp/dadata-skills

# Найти скиллы в каталоге
npx skillsbd search "яндекс"

# Посмотреть установленные
npx skillsbd list
⚠️
Перед установкой читайте SKILL.md. Скилл — это инструкции для агента, и в нём может быть prompt injection. Плюс каталога skillsBD в том, что всё проходит модерацию, но базовую проверку всё равно делайте сами.

Практические сценарии

  • Заменить зарубежный LLM-провайдер. Перевести существующий проект на локальные модели в РФ, поменяв base URL и ключ — без VPN и зарубежных платёжек.
  • Кодить на локальных моделях. Открыть репозиторий в браузерном Coder и работать с opencode-агентом без установки и без OpenAI/Anthropic.
  • Собрать корпоративный поиск. Поднять RAG по внутренним документам через Search или развернуть его on-premise.
  • Запустить сеть агентов. Через Drift поднять Telegram-бота и веб-клиент со скиллами и расписаниями на собственных моделях.
  • Расширить агентов под RU-сервисы. Поставить скиллы из каталога skillsBD для Яндекса, 1С, Битрикса, Wildberries.
  • Транскрибировать аудио on-prem. Расшифровывать совещания и звонки через Whisper, не отдавая записи в облако.

Полезные ссылки

  • NeuralDeep: neuraldeep.ru — главная платформы, обзор всех продуктов
  • Hub: hub.neuraldeep.ru — чат и LLM API, старт бесплатно
  • API: api.neuraldeep.ru — OpenAI-совместимое API
  • Каталог скиллов: neuraldeep.ru/skills — skillsBD, навыки и MCP для RU-комьюнити
  • GitHub: github.com/vakovalskii — open-source проекты NeuralDeep
  • Telegram: t.me/neuraldeep — канал Валеры Ковальского про LLM, агентов и инфраструктуру

По теме

Если соберётесь поднимать локальные модели у себя или в команде и захотите обсудить, с чего начать — пишите в Telegram @pimenov