Apple может интегрировать новую технологию ИИ для обработки изображений в свои смарт-очки

Apple представила FastVLM: модель ИИ для быстрой обработки изображений с минимальными ресурсами. Источник: Meta

По информации источников, конкуренты Meta Ray-Ban от Apple могут быть представлены примерно в 2027 году, вместе с новыми AirPods, оснащенными камерами и функциями на основе искусственного интеллекта.

Что известно

Хотя конкретные детали о виде устройств пока не раскрыты, Apple поделилась новыми разработками в области искусственного интеллекта. В 2023 году команда Apple Machine Learning Research представила MLX — собственную открытую платформу для машинного обучения, разработанную специально для Apple Silicon. Эта платформа позволяет эффективно обучать и выполнять модели локально на устройствах Apple, обеспечивая удобство для разработчиков, работающих с традиционными инструментами для разработки ИИ.

Последним достижением Apple является FastVLM — модель обработки изображений с использованием визуального языка. FastVLM, основанная на MLX, обеспечивает высокую скорость обработки изображений и значительно меньшую потребность в ресурсах по сравнению с подобными моделями.

Apple утверждает, что этот новый подход позволяет достигать оптимального баланса между скоростью, размером модели и точностью.

Модель FastVLM имеет специальный энкодер FastViTHD, разработанный для эффективной работы с высококачественными изображениями, и в 3,2 раза быстрее и в 3,6 раза меньше аналогичных моделей. Это важно для быстрой обработки данных без необходимости обращаться к облачным серверам. В частности, FastVLM может генерировать первые результаты в 85 раз быстрее, чем другие модели, что делает ее идеальной для интеграции в будущие смарт-очки.

FastVLM уже доступна на GitHub, а технические детали можно найти на arXiv для тех, кто хочет больше узнать о новейших разработках Apple в области искусственного интеллекта.

Источник: 9to5Mac