Jupyter Agents: новый подход к обучению LLM для Data Science через исполнение кода
Проект переносит фокус с гигантских моделей на дообучение компактных LLM для узкоспециализированных задач анализа данных, что позволяет радикально снизить стоимость инференса в продакшене.
Разработчики представили проект Jupyter Agents — инструмент, позволяющий LLM нативно работать внутри Jupyter Notebook, выполняя код и анализируя данные в режиме реального времени. В отличие от классических IDE-ассистентов, этот агент заточен под Data Science пайплайны, где критически важно видеть цепочку рассуждений (reasoning) в связке с выводом кода. Ключевые аспекты проекта: * Фокус на компактных моделях: Основная цель — дообучение легковесных моделей (в качестве базы взята Qwen3-4B-Thinking-2507) для выполнения сложных агентских задач, с которыми сейчас справляются только тяжелые проприетарные LLM. * Бенчмарк DABStep: Для оценки прогресса используется специализированный набор тестов DABStep, который имитирует реальные задачи анализа данных. Текущие SOTA-модели (включая Claude 3.5 Sonnet) показывают на нем менее 20% точности, что подчеркивает сложность задачи. * Практическая ценность: Создание пайплайна для генерации качественных датасетов под агентские задачи, что позволяет снизить требования к VRAM при сохранении высокой точности инференса. 💡 Где захостить и как запустить: Рассчитать точный VRAM под кванты этой модели, скорость генерации (токенов/сек) и выбрать подходящий сервер с GPU можно у нас на ServerSales в калькуляторе AI-моделей (/ai) или каталоге GPU (/gpu).
Планируете развернуть модель Qwen 3.8-Omni-Flash?
На ServerSales вы можете рассчитать точные требования к VRAM под разные типы квантования (4-bit Q4 / FP8 / FP16), оценить скорость генерации (токенов/сек) и сразу подобрать проверенный сервер с GPU от ведущих провайдеров.
Надежные облачные платформы и серверы в РФ
Крупнейший IaaS-провайдер РФ: облачные VPS, Bare Metal серверы и GPU-кластеры для ИИ.
Скоростные VPS от 299 ₽/мес, почасовая тарификация, готовые образы и GPU RTX 4090 / A100.
Hostkey
GPU RTX 3090 24GB
CPU
8 ядер
RAM
64 ГБ
Диск
500 ГБ NVMe
Канал
1 Гбит/с
GPU
NVIDIA RTX 3090 (24 ГБ GDDR6X)
24 999 ₽/мес
Timeweb Cloud
GPU RTX A5000 24GB
CPU
8 ядер
RAM
64 ГБ
Диск
500 ГБ NVMe
Канал
1 Гбит/с
GPU
NVIDIA RTX A5000 (24 ГБ GDDR6X)
24 999 ₽/мес
Hostkey
GPU RTX 4090 24GB
CPU
16 ядер
RAM
128 ГБ
Диск
1000 ГБ NVMe
Канал
1 Гбит/с
GPU
NVIDIA RTX 4090 (24 ГБ GDDR6X)
32 999 ₽/мес
Ищете точную конфигурацию под ваш бюджет?
Используйте наш интерактивный мастер подбора: рассчитайте точные ресурсы CPU, RAM и диска за 3 шага.