Подписка на облачного кодинг-агента стоит не так уж дорого. Зачем тогда покупать GPU и запускать модель самому? Вместе с Иваном Опариным из Wildberries разбираемся, какие локальные модели уже годятся для агентной разработки, где они уступают облачным, сколько стоит железо под них и как настраивать их под свою кодовую базу.
А самое главное – дадим подробный гайд по тому, как решить свою первую задачу с помощью агента на локальной модели, и по тому, как внедрить их в свою ежедневную работу.
Хочешь стать главным экспертом по AI в своей команде? Один из лучших способов – перенимать опыт у тех, кто уже внедряет AI и набивает шишки на практике. Вступай в Podlodka AI Engineers Club – закрытое сообщество 800 инженеров c еженедельными воркшопами, активным чатом и огромной базой знаний.
https://podlodka.ai
Реклама. ИП Толстая, ИНН 507503278104, erid: 2SDnjdsfbtg
Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях!
Telegram-чат: https://t.me/podlodka
Telegram-канал: https://t.me/podlodkanews
Twitter-аккаунт: https://twitter.com/PodcastPodlodka
Ведущие в выпуске:
Стас Цыганов, Егор Толстой
Полезные ссылки:
Чат «ИИнтузиаст»
https://t.me/+H3uHM51jCg5mZjAy
Канал «ИИнтузиаст»
https://t.me/byurrer_ru
«Фарш не провернуть» — канал Алексея Фатеева о локальных моделях и инференсе
https://t.me/fuckup_files
«Локальный максимум» — материалы о локальных LLM, инференсе и GPU
https://alesha.pro/
Qwen3.8-27B — основная модель, которую обсуждаем в выпуске
https://huggingface.co/Qwen/Qwen3.8-27B
Qwen3.8-27B — GGUF-квантизации от Unsloth
https://huggingface.co/unsloth/Qwen3.8-27B-GGUF
Qwen3.8-Flash-Next
https://huggingface.co/Qwen/Qwen3.8-Flash-Next
GLM-5.3-Flash
https://huggingface.co/zai-org/GLM-5.3-Flash
DeepSeek V4.1 Flash
https://huggingface.co/deepseek-ai/DeepSeek-V4.1-Flash-1017
Gemma — документация семейства моделей Google
https://ai.google.dev/gemma/docs/core
Unsloth — динамические квантизации моделей
https://unsloth.ai/blog/dynamic-v2
llama.cpp — движок для запуска локальных моделей
https://github.com/ggml-org/llama.cpp
vLLM
https://github.com/vllm-project/vllm
SGLang
https://github.com/sgl-project/sglang
DS4 / DwarfStar — inference-движок от создателя Redis
https://github.com/antirez/ds4
DeepInfer — inference-движок DeepSeek
https://github.com/deepseek-ai/DeepInfer
Mirai
https://trymirai.com/
Uzu — inference-движок Mirai
https://github.com/trymirai/uzu
Coinbase — кейс дообучения Qwen3.5-9B для выявления фрода
https://www.coinbase.com/blog/part-three-owning-intelligence-series
Cross-Model KV Cache Transfer — исследование переноса KV-кэша между моделями
https://arxiv.org/abs/2608.03893
Экспериментальная реализация переноса KV-кэша на vLLM от Алексея Фатеева
https://github.com/alesha-pro/vllm-cross-model-kv
Mostik — передача внутренних состояний между большой и маленькой моделями
https://mostik.ai/read-more
Microsoft — локальные модели и инструменты в Windows и GitHub Copilot
https://commandline.microsoft.com/local-models-sandboxed-tools-github-windows/
Microsoft — гибридный AI в Windows
https://blogs.windows.com/windowsexperience/2026/10/07/building-windows-for-hybrid-intelligence/
Гибридный инференс с клиент-серверным разнесением prefill и decode: архитектура и экономика для клиентов с унифицированной памятью
https://github.com/relux-works/hybrid-inference-paper
Андрей Карпати — о разрыве между использованием чат-ботов и продвинутых агентских систем
https://x.com/karpathy/status/2109361546505966046
Эссе инженера DeepSeek об автоматизации своей работы и открытом интеллекте
https://mp.weixin.qq.com/s/zk0KxuLzhmMJ4LPYW_OHMA
Английский пересказ эссе инженера DeepSeek и перевод в комментариях
https://www.lesswrong.com/posts/o8roRrdisBAjngHJN/a-summary-of-a-viral-chinese-essay-on-what-a-deepseek-kernel
Плейлист
Podlodka Podcast
Подписка на облачного кодинг-агента стоит не так уж дорого. Зачем тогда покупать GPU и запускать модель самому? Вместе с Иваном Опариным из Wildberries разбираемся, какие локальные модели уже годятся...
500 выпусков и девять с половиной лет разговоров про IT – пора проверить, какие из наших убеждений ещё работают. Собрались полным составом, похвастались навайбкоженными проектами и обсудили, как AI из...
Рассказать AI о своих переживаниях бывает проще, чем записаться к психологу: он терпеливо выслушает даже в три часа ночи и, кажется, неплохо вас поймёт. Но достаточно ли этого, чтобы стало лучше? В эт...
Тема стартапов неисчерпаема, и в этот раз мы сосредоточились на самой нервной и драматичной её части — фандрейзинге. Аня Коган, CEO Fitwise и руководитель разработки OpenCV.ai, поделилась искренней ис...
Заказная разработка переживает сложные времена: проектов меньше, клиенты экономят, а AI заставляет пересматривать модель работы. В первой части говорим с Денисом Германенко, СЕО CleverPumpkin. Он расс...
Несколько лет назад никто толком и не знал, что такое RAG, а сейчас трудно себе представить агентскую работу без них. Retrieval augmented generation - что это такое, и почему скрестить LLM с поиском о...
Ещё год назад AI в математике осиливал разве что олимпиадные задачки. Сегодня промпт «сделай научный прорыв» разваливает гипотезу почти тридцатилетней давности, а OpenAI заявляет решение Навье–Стокса...
Иван Талачев, автор и ведущий подкастов «Горящий Бензовоз» и «Один дома», помогает разобраться, как выбирать фильмы без мучительного листания рейтингов, списков и рекомендаций. Обсуждаем трейлеры, чуж...
Вроде код за вас пишет AI, но вы весь день проверяете результаты и к вечеру не можете объяснить, что вообще сделали. Вместе с кандидатом психологических наук Натальей Кисельниковой разбираемся, как по...
Колено хрустнуло, щёлкает плечо? Не спеши бежать к врачу! В этом выпуске с ортопедом-хирургом Львом Кнеллером разбираемся, сколько на самом деле «живут» суставы и от чего зависит их срок службы. Прохо...
Вырастить стейк в биореакторе? Делать котлеты и сосиски из настоящих мышечных тканей, при этом не трогая животных? Звучит как фантастика, но на самом деле это уже реальность. Вопрос как всегда в том,...
Вадим Брилиантов создал и был техлидом Koog – фреймворка для AI-агентов на Kotlin. В выпуске разбираем, что на самом деле отличает агента от чат-бота: цикл, инструменты, память и контекст, и почему ха...
Laravel любят за скорость разработки, ругают за магию и регулярно обвиняют в том, что он плодит жирные контроллеры. Вместе с Аделем Файзрахмановым – автором плагина Laravel Idea для PhpStorm и книги «...
Когда вообще стоит проводить UX-исследование? А когда оно только тратит время и деньги? В этом выпуске разбираемся, в каких случаях ответ уже можно найти в аналитике или саппорте, когда проблема и та...
Elixir часто воспринимают как более дружелюбный синтаксис поверх Erlang, но достаточно ли такого объяснения в 2026 году? Вместе с Данилой Поярковым, разработчиком более 50 open source проектов для El...
В разработке с агентами нам больше всего не хватает контроля за результатом и уверенности в нем. Один из способов их получить – использовать подход Spec-Driven Development, в котором перед тем, как от...
В мире пользовательских интерфейсов каждый год происходят эволюции, а иногда и революции. Терминалы тем временем уже десятки лет как будто бы застыли во времени. Концептуально мало что поменялось, но...
Дмитрий Казаков — ведущий разработчик Krita, opensource-редактора, которым художники рисуют комиксы, концепт-арты и анимацию. Начали с того, чем растровые форматы отличаются от векторных и что на сам...
CAPTCHA давно перестала быть историей про светофоры, пешеходные переходы и кривые буквы. Сегодня это скорее часть антибот-защиты: система оценивает риск, смотрит на сигналы поведения и решает, можно...
AI уже меняет найм: резюме пишутся нейросетями, кандидаты массово откликаются на вакансии, на собеседованиях подсказывают боты, а компании пытаются понять, как теперь отличать сильных людей от сгенери...
Дмитрий Свиридкин — один из немногих инженеров в русскоязычном пространстве, кто регулярно погружается в тонкости низкоуровневых языков программирования. А когда речь заходит об undefined behavior и...
Выступать с докладом и на родном языке – огромный стресс, а на английском с уровнем B1/B2 и уверенностью ниже плинтуса – вообще непередаваемые ощущения. Мы позвали в гости Хади Харири, спикера с каким...
CTF часто выглядит как что-то нишевое и слегка мифологизированное: элитные хакеры, странные задачи, табло, адреналин. С Александром Алексеевым разбираем, что за этим стоит на самом деле. Александр мно...
Кирилл Булатов помогает разрабатывать Zed – редактор кода, написанный на Rust командой, которая раньше делала Atom. Без Electron, без готовых UI-фреймворков: у Zed собственный графический движок GPUI,...
Кирилл Мокевнин – сооснователь онлайн-школы программирования «Хекслет», разработчик с почти двадцатилетним стажем, амбассадор организованного программирования и автор одноимённых YouTube- и Telegram-к...
Австралия – идеальный кандидат для релокации. Английский язык, океан, безопасность, высокий уровень жизни, нормальный work-life balance. В этом выпуске Константин Аксенов, разработчик и многодетный от...
В ряду выпусков про фреймворки пополнение! Разбираемся, правда ли в Django есть все, что нужно для типичного веб-сервиса, и правда ли это лучший выбор для перфекционистов с дедлайнами! А помогает нам...
В этом выпуске вместе с Витой Степановой разбираемся, что такое старение с точки зрения биологии, где сегодня находится наука и какими технологиями уже можно воспользоваться. Обсудили, какие направлен...
Никита Поваров, principal analyst в JetBrains, пришёл, чтобы рассказать об одной из самых коварных ловушек в работе с данными: мы привыкли видеть корреляции, но совершенно не умеем доказывать причинно...
Антон Полухин – член комитета по стандартизации C++, что делает его одним из тех людей, кто решает, каким будет C++ в будущем. При этом Антон пишет на C++ высоконагруженный код каждый день в техплатфо...