虎嗅

Тестирование DeepSeek V4.1: за 300 миллионов токенов и 14 задач результат оказался даже хуже, чем у предыдущей версии.

原文:DeepSeek V4.1 Flash实测,花3亿token,14组任务,居然比上代贵

Анализ китайских новостей

I. Краткое содержание

Это отчет технологического блогера о результатах тестирования новой версии модели V4.1 Flash от компании DeepSeek, которая только что начала внутреннее тестирование. Новая модель отличается полностью новой архитектурой и нативными мультимодальными возможностями. В опросниках для участников тестирования даже прямо задаются вопросы о том, сможет ли она заменить более продвинутую версию V4 Pro. Блогер сравнил новую версию V4.1 Flash с предыдущей и провел 14 заданий, в ходе которых было потрачено количество ресурсов, эквивалентное 300 миллионам китайских символов. В итоге было обнаружено, что новая модель значительно улучшила свои способности к анализу изображений и визуализации данных. Однако у нее также есть недостатки: она быстро печатает текст, но медленно выполняет более сложные задачи, легко запутывается при работе с длинным контентом, и использование сложных функций оказывается дороже, чем в предыдущей версии. Следовательно, это не совсем идеальное обновление.

II. Понятное объяснение по отдельным аспектам

1. Самое значительное улучшение: наконец появились “собственные глаза” – больше не нужно использовать внешние инструменты для анализа изображений

Предыдущая версия Flash была специализирована исключительно на обработке текстовых данных. Для анализа изображений требовались сторонние инструменты для распознавания текста и обработки изображений, что занимало много времени (десятки секунд или даже минут), и часто приводило к ошибкам (например, не узнавалось содержимое изображений). Версия V4.1 Flash обладает нативными мультимодальными возможностями: она может анализировать изображения за 5–7 секунд и самостоятельно интерпретировать их содержимое. Это существенно ускоряет процесс работы и избавляет от необходимости использования дополнительных инструментов.

2. Скорость работы в 3 раза выше, но почему окончательный результат не такой быстрый?

Скорость ввода текста новой версии V4.1 Flash составляет более 200 китайских символов в секунду, что в 3 раза больше, чем у предыдущей версии. Однако общее время выполнения задач не уменьшилось. Например, при создании простых игр новая версия тратит больше времени на проверку кода и исправление ошибок, чем предыдущая. Это связано с тем, что она самостоятельно проверяет свой код и корректирует ошибки, что увеличивает общее время выполнения задач.

3. Серьезные недостатки в памяти: хорошо справляется с конкретными задачами, но плохо запоминает длинный контент

Преимущества новой версии очевидны, но у нее также есть серьезные недостатки в плане памяти: она хорошо справляется с конкретными задачами, но плохо запоминает длинный текст и детали. Например, при создании визуализаций или написании документов она часто запутывается и допускает ошибки. Это ограничивает ее применимость в задачах, требующих обработки больших объемов информации.

4. Новая версия стала дороже? При сложных задачах она “заказывает помощь целой команде”

Интересно, что при выполнении сложных задач новая версия модели потребляет больше ресурсов и стоит дороже (на 36% больше, чем предыдущая версия). Это связано с тем, что при решении сложных задач она использует несколько вспомогательных алгоритмов, что увеличивает затраты. Однако компания DeepSeek объявила о снижении цен с 10 сентября; цены на часто используемые функции снизятся на 60%, что сделает использование новой версии более экономически выгодным.

В целом, новая версия V4.1 Flash обладает значительными улучшениями, но имеет и серьезные недостатки. Ее применимость в некоторых сферах ограничена, и для работы с длинным и сложным контентом требуются дополнительные усилия.