Новая система искусственного интеллекта от Apple ReALM

Исследователи компании Apple разработали новую систему искусственного интеллекта, способную понимать контекст.

Согласно опубликованным документам, эта функция позволяет более естественно взаимодействовать с голосовыми помощниками.

Система получила название Reference Resolution As Language Modeling (ReALM) — «разрешение ссылок как моделирование языков». Она использует LLM для решения проблемы распознавания ссылок, что позволяет ей достичь значительного улучшения производительности по сравнению с существующими методами.

Команда исследователей Apple отметила, что способность понимать контекст, включая ссылки, является ключевой для разговорных ассистентов. Они также подчеркнули важность возможности задавать вопросы о содержимом экрана для обеспечения более удобного использования голосовых помощников.

Для работы с экранными ссылками ReALM использует реконструкцию дисплея с помощью синтаксического анализа объектов на нем и их местоположения для создания текстового представления, передающего визуальную схему.

ИИ-модель была специально разработана для улучшения возможностей Siri путем учета данных на экране и текущих задач. Она категоризирует информацию на три сущности: экранную, разговорную и фоновую.

Согласно исследовательской работе Apple, ИИ-система не уступает по своим возможностям GPT-4. Производительность самой маленькой модели ReALM от Apple сравнима с чат-ботом от OpenAI, а более крупные модели существенно превосходят его.

Напомним, в феврале CEO Apple Тим Кук раскрыл планы корпорации по использованию генеративного ИИ.