Наконец запустил локальный Qwen в Bionic
Наконец запустил Qwen3.8 27B на Mac mini через LM Studio и Bionic. Почему отказался от тяжёлого контура Codex и какие задачи буду проверять дальше.
Наконец собрался и запустил Bionic с локальным Qwen3.8 27B. Тот случай, когда путь до простого «работает» занял заметно больше времени, чем хотелось бы.
До этого я пытался подключить Qwen к Codex через Codex Router и использовать как полноценную модель. Связка запускалась, но на практике локальная модель получала тяжёлый системный контекст, длинную историю и множество инструментов. Ответа иногда приходилось ждать так долго, что всё выглядело зависшим.
В итоге я решил разделить задачи. Qwen работает на Mac mini M4 с 48 ГБ объединённой памяти. Bionic запущен на MacBook и подключается к модели через LM Studio и LM Link. Первый нормальный тест пройден: короткую заметку Qwen подготовил за 1 минуту 51 секунду.
На скриншоте — тот самый первый ответ. Забавно, что модель рассуждает о собственной установке и заодно показывает границу: просить её можно о многом, но рабочий контур должен соответствовать возможностям локального железа.
Теперь буду постепенно переносить в Bionic разные задачи и смотреть, где локальный Qwen действительно полезен. Без попытки заменить им все облачные модели и весь Codex сразу. Сначала конкретная задача, разумный контекст и проверяемый результат.
Следующий шаг
LM Studio — локальный запуск LLM и агент Bionic
Связанные материалы
Статья: Qwen3.8 на Mac mini M4 Pro: сначала всё сломалось, потом он написал эту статью
Блог: LM Studio Bionic: агент для открытых моделей
База знаний: Ollama или LM Studio: что выбрать для старта с локальными моделями
Если вы тоже подбираете рабочий контур для локальной модели, можно обсудить, какие задачи стоит оставить на своём железе и чем их запускать.
Если захотите обсудить, как это применить у себя или в команде — пишите в Telegram @pimenov
Если хотите разобрать свою задачу — напишите мне Если хотите разобрать свою задачу — напишите мне.
Можно прийти с идеей, черновым контекстом или уже живой задачей. Помогу быстро понять, где реальный следующий шаг, а где лишний шум.
Обычно хватает 2–3 сообщений, чтобы понять, могу ли я здесь реально помочь и в каком формате лучше двигаться дальше.
Дальше по теме
Разработчик Bennett собрал локально изменённую копию ChatGPT для macOS, которая распределяет чаты между несколькими подписками Codex.