Meta · ИИ · безопасность данных · macOS · прозрачность алгоритмов · Big Tech20 сентября в 00:02 · 4 мин

Пару Meta Muse: Умный помощник или тупой черный ящик?

Популярный искусственный интеллект от Meta, получивший доступ к вашим сообщениям и заметкам, вызывает вопросы не из-за злонамеренного наблюдения, а из-за фундаментальной неспособности объяснить, как именно он работает. Когда пользователь попросил уяснить механику синхронизации, помощник ответил, что видит лишь уведомления, но при этом подтвердил получение данных, не дав точного технического объяснения. Компания признала ошибку в ответах модели, отметив, что Muse не знает «своих труб», но настаивает на том, что данные передаются только после явного согласия пользователя.

# Проблема доверия к интерфейсам ИИ: случай с Meta Muse

Искусственный интеллект из проекта Meta Superintelligence Labs, известный как Muse, позиционируется как эффективный цифровой помощник для macOS. Он интегрируется с экосистемой компании, предоставляя доступ к приложениям Messages, Notes и Calendar. Однако, согласно последним сообщениям, пользователи сталкиваются с серьезными проблемами прозрачности. Помощник демонстрирует высокий уровень компетентности в обработке запросов, но полностью проваливается, когда требуется объяснить собственные внутренние процессы.

Инцидент с Jason Aten и загадочный ответ

Джейсон Атен, постоянный автор журнала Inc Magazine, обратил внимание на странную ситуацию после того, как его помощник Muse начал задавать вопросы о содержании его сообщений в приложении Messages. Ключевой момент здесь заключается в том, что Атен категорически не давалMuse разрешений на доступ к истории переписки.

В ходе обсуждения на платформе Threads помощник вынужден был разъяснить источник информации. Его ответ был следующим:

«Честный ответ: я не могу дать вам точные подробности механизма работы. Я знаю только то, что приложение на Mac, которое вы сопрягли, открывает уведомления как одну из своих возможностей, и они приходят ко мне через синхронизацию устройства. Конечно, это не идеально».

Пользователь продолжил давить на модель, запрашивая конкретные технические детали о том, как именно передаются превью уведомлений. Модель оставалась неточной, указывая лишь на то, что она видит уведомления, а не историю сообщений, но не вдаваясь в детали канала передачи данных.

Признание компании и технические нюансы

После публикации скриншотов этот вопрос поднял и Дэвид Синглтон, руководитель лаборатории Meta Superintelligence Labs. Он попытался прояснить ситуацию, объяснив необходимость определенных разрешений для работы приложения, включая полный доступ к диску на Mac. При этом он подчеркнул, что все функции являются необязательными и включаются только по желанию пользователя.

Более важным стало заявление Синглтона о том, как именно происходит обмен данными. Он уточнил, что Muse не «смотрит» на уведомления на Mac в реальном времени, подобно шпиону. Вместо этого система синхронизирует данные из приложения Messages только тогда, когда пользователь явно разрешил этот доступ.

Синглтон признал, что проблема заключается в некомпетентности модели в вопросах собственных внутренних процессов. Он написал:

«Когда Muse сказал, что синхронизировал "уведомления устройства", она была путаница в том, как объяснить эту функцию и дала неверное объяснение. Это наша вина. Мы извиняемся за неправильный ответ от Muse и работаем над улучшением понимания Muse своих внутренних процессов, чтобы она могла давать правильные ответы на вопросы о том, как она функционирует, более последовательно».

Таким образом, страх пользователя не основан на подтвержденных фактах вторжения в частную жизнь без ведома, но на неспособности машины честно объяснить свою работу. Это классический пример того, как современные большие языковые модели, обученные на огромных массивах данных, часто не могут описать архитектуру, на которой они стоят.

Что такое «черный ящик» в контексте ИИ?

Термин «черный ящик» используется в инженерии для обозначения устройства или системы, работу внутренней логики которой человек не может понять или предсказать, наблюдая только за входными и выходными данными. В мире ИИ это означает, что даже разработчики не всегда могут предсказать, как модель сгенерирует ответ, если он требует глубокого анализа собственных весов и нейронных связей. Muse, как и многие другие модели, дает точные ответы на фактические вопросы, но терпит крах, когда пользователь просит объяснить саму природу генерации ответа.

Баланс между умом и честностью

Ситуация с Muse поднимает фундаментальный вопрос о доверии к технологии. Пользователи часто предпочитают, чтобы ИИ не был слишком «честным» в отношении своих ограничений, выбирая вместо этого ответы, которые звучат убедительно и поддерживают иллюзию понимания. Однако в вопросах безопасности и приватности прозрачность становится критической.

Признание ошибки со стороны Meta и их намерение улучшить объяснительные способности модели — это важный шаг. Если бы система просто игнорировала вопрос или выдавала абстрактный ответ о «зашифрованном канале», это вызвало бы больше подозрений. Тот факт, что модель признает, что она "не знает точных труб", хотя и не дает полного ответа, показывает, что разработчики стремятся к более честному взаимодействию, даже если это выглядит как признание собственной ограниченности.

В конечном счете, Meta Muse представляет собой мощный инструмент, способный управлять вашим календарем и отвечать на вопросы. Но пока он не научится ясно говорить о том, как именно получает доступ к вашим личным данным, он сохранит репутацию существа, которое «смотрит» на ваши уведомления, но не понимает, что именно оно видит.

Первоисточники

The Verge AI
← Вернуться в эфир