Огромная нейросеть на ноутбуке без видеокарты: colibri по шагам
Открытый проект colibri запускает огромные нейросети на обычном компьютере без видеокарты: в памяти держится только та часть модели, которая думает над текущим словом, остальное читается с диска по мере надобности. Ниже что это даёт на деле, какую модель ставить под твой ноутбук, установка по шагам и как подключить к нему свои программы.
Как это работает
Данные из описания проекта на GitHub, 16 октября 2026.
- Большие современные модели устроены как набор экспертов: на каждое слово работает только малая часть.
- colibri держит в оперативной памяти постоянную часть, а нужных экспертов читает с диска, как стрим вместо загрузки целого фильма.
- Написан на чистом C, видеокарта необязательна, работает без интернета после загрузки модели.
- У проекта больше 42 тысяч звёзд на GitHub.
Какую модель ставить: честно про скорость
Модель на 744 миллиарда параметров (GLM-5.2) правда запускается на ноутбуке с 25 ГБ памяти, но отвечает очень медленно: по замеру автора 0,05-0,1 слова в секунду. Это демонстрация, для работы бери модель поменьше.
- 16-20 ГБ памяти: Qwen3.6-35B, загрузка 23 ГБ, около 6 токенов в секунду на процессоре. Это рабочий вариант для чата и текстов.
- 8-18 ГБ памяти и задачи с кодом: Qwen3-Coder-30B, загрузка 19 ГБ.
- 32 ГБ памяти и быстрый SSD: DeepSeek V4 Flash, загрузка 167 ГБ, около 1 токена в секунду.
- Посмотреть все модели против своего компьютера: команда ./start-here.sh --list.
Установка по шагам
Минимум 8 ГБ оперативной памяти и 22 ГБ на диске для самой маленькой модели.
Windows
- На странице проекта нажми Code, затем Download ZIP, распакуй архив.
- Дважды щёлкни START-HERE.bat. Если нет Python, установщик предложит поставить его сам.
Mac
Linux
Подключить свои программы
После запуска colibri печатает адреса, которые понимают программы для OpenAI и Claude.
- Чат в браузере: http://127.0.0.1:8000/
- Адрес для программ под OpenAI: http://127.0.0.1:8000/v1
- Адрес для программ под Claude: http://127.0.0.1:8000
Читать дальше в блоге
Эту тему я разбираю подробно в статье рабочий список нейросетей для контента. Там же лежат остальные разборы про нейросети.
Я собрал систему, по которой обычный человек запускает блог с нуля и набирает аудиторию без съёмок, монтажа и команды. Внутри разбор, с которого стартовал сам.
Открыть разбор: с чего начать→