Microsoft выпустила мультимодальную версию Phi-4

3 мин
Microsoft выпустила мультимодальную версию Phi-4

Microsoft Research анонсировала новую схема в своей линейке компактных языковых моделей — Phi-4-Vision-Reasoning. Это мультимодальная модель, которая не просто распознает изображения, но и способна проводить сложные рассуждения на основе визуальных данных. Главная цель разработчиков заключалась в том, чтобы преодолеть типичные недостатки крупных мультимодальных систем — их медлительность, высокую стоимость использования и сложности при внедрении. Новая модель стремится объединить производительность небольших моделей с аналитическими способностями, ранее доступными только гигантам индустрии.

Индустрия искусственного интеллекта движется в двух, казалось бы, противоположных направлениях. С одной стороны, мы видим гонку за созданием всё более огромных моделей (как GPT-4 или Gemini Ultra), которые требуют колоссальных вычислительных мощностей. Во-вторых, растет спрос на «малые языковые модели», которые можно запускать локально на устройствах пользователей или с минимальными затратами в облаке.

Семейство моделей Phi от Microsoft зарекомендовало себя как лидер в нише компактных решений. Предыдущие версии (Phi-1, Phi-2, Phi-3) показывали удивительно высокие результаты на бенчмарках, несмотря на скромное количество параметров, благодаря использованию синтетических данных высокого качества для обучения. Теперь Microsoft делает следующий шаг, добавляя к этому «визуальный интеллект» и способность к пошаговым рассуждениям.

Performance charts comparing Phi-4-Reasoning-Vision-15B against other models (Kimi-VL, Qwen-3, Gemma-3) on accuracy vs. response time and accuracy vs. completion tokens. Phi-4 stands out as being fast and token-efficient while achieving ~75% accuracy.
Performance charts comparing Phi-4-Reasoning-Vision-15B against other models (Kimi-VL, Qwen-3, Gemma-3) on accuracy vs. response time and accuracy vs. completion tokens. Phi-4 stands out as being fast and token-efficient while achieving ~75% accuracy.

Детали

Ключевая особенность Phi-4-Vision-Reasoning заключается в интеграции двух важных компонентов:

  1. Мультимодальность. Способность модели воспринимать и обрабатывать не только текст, но и изображения. Это критически важно для задач, где требуется аналитика графиков, диаграмм, пользовательских интерфейсов или сцен из реального мира.

  2. Рассуждение. Модель обучена выстраивать логические цепочки. Это не просто выдача наиболее вероятного следующего слова, а попытка имитировать процесс мышления, разбивая сложную задачу на подзадачи.

РАвторы подчеркивают, что объединение этих навыков в компактной архитектуре даёт возможность снизить задержку (latency) при генерации ответов и сделать передовые технологии доступнее для широкого круга разработчиков и компаний.

ААналитика

A physics problem about spring-mass systems, with two diagrams. The model correctly works through the spring constant relationships and arrives at answer B (0.433s).
A physics problem about spring-mass systems, with two diagrams. The model correctly works through the spring constant relationships and arrives at answer B (0.433s).

Появление Phi-4-Vision-Reasoning сигнализирует о важном сдвиге в приоритетах крупных игроков. Если раньше фокус был смещен на «сырую мощь» и объем знаний модели, то теперь на первый план выходят производительность и специализация. Компактные модели с навыками рассуждения открывают дорогу для создания действительно умных агентов, работающих на периферийных устройствах (edge devices) — от смартфонов до промышленных роботов.

Это равным образом решает проблему стоимости. ЗЗапускание огромной модели для каждой задачи часто экономически нецелесообразен. Небольшая, но «умная» модель, способная видеть и думать, может стать идеальным решением для автоматизации рутинных бизнес-процессов, где требуется аналитика документов или визуальный контроль качества.

Перспектива

В ближайшем будущем мы увидим усиление конкуренции в сегменте малых мультимодальных моделей. Успех Phi-4 может подтолкнуть другие лаборатории (например, Google с их Gemma или Meta с Llama) к выпуску аналогичных специализированных версий.

ГОсновной вопрос, который предстоит решить индустрии, — насколько надежными могут быть рассуждения в моделях с ограниченным числом параметров. Если Microsoft удастся доказать, что «небольшой мозг» может рассуждать так же логично, как и крупный, это кардинально изменит архитектуру будущих AI-систем, сместив баланс от облачных вычислений к локальной обработке данных.

Читают сейчас

Энтузиаст запустил DLSS 5 Neural Rendering для обычной веб-камеры

15 минут назад

Энтузиаст запустил DLSS 5 Neural Rendering для обычной веб-камеры

Разработчик под ником jpneagle опубликовал экспериментальный инициатива, который пропускает изображение с обычной веб-камеры через NVIDIA DLSS 5 Neural Rendering в реальном времени. Исходный код демо

16 минут назад

Astra использует рекуррентную глубину — и это осложняет аудит модели

В будущей модели Astra OpenAI использует архитектурный прием recurrent depth, также известный как looped transformer. Вместо того чтобы каждый слой обрабатывать вход один раз, модель многократно прого

Приглашаем обсудить добавление ИИ-агентов в бизнес

28 минут назад

Приглашаем обсудить добавление ИИ-агентов в бизнес

Регистрируйтесь на бесплатный вебинар 10 сентября в 12:00 (мск). Эксперты из Selectel, GlowByte и DataSapience в прямом эфире поговорят про экономику ИИ и растущий тенденция на ИИ-агентов, а также пре

32 минуты назад

СМИ: виртуальный рубль может привести к потере до 100 млрд рублей комиссионных доходов банков и к оттоку 10% пассивов

По информации СМИ, виртуальный рубль может привести к потере до 100 млрд рублей комиссионных доходов банков ежегодно, а равным образом к оттоку 10% пассивов. Кроме того, появление на окупаемость проек

«Бюро 1440»: начато поэтапное добавление спутниковой связи нового поколения на скоростных поездах

1 час назад

«Бюро 1440»: начато поэтапное добавление спутниковой связи нового поколения на скоростных поездах

Российская аэрокосмическая компания «Бюро 1440» (занимается разработкой низкоорбитальной спутниковой группировки и планирует предоставление услуг широкополосной передачи данных с глобальным покрытием,