A Apple não quer que você se preocupe com os recursos de audição do novo Apple Watch

A nova maçã Os Watch Series 12 e Ultra 4 vêm não apenas com melhor monitoramento de condicionamento físico e redução de ruído aprimorada, mas também com uma maneira totalmente nova de ouvir.

A Apple anunciou na quarta-feira que os dois smartwatches vêm com quatro ferramentas opcionais de “inteligência de áudio” que são alimentadas por áudio captado pelos microfones dos relógios. Eles incluem reconhecimento de som e música, um recurso de recapitulação de conversas e “Live Rewind” para que o usuário possa ver uma transcrição de tudo o que foi dito em seu ambiente nos 15 segundos anteriores.

Aparentemente cautelosa de que os recursos possam fazer parecer que as paredes têm ouvidos, a Apple está enfatizando que todos eles são construídos para priorizar a privacidade e a segurança usando a extensa infraestrutura que a empresa desenvolveu para proteger seus outros serviços Apple Intelligence e Siri. À medida que mais e mais desses tipos de recursos são lançados, os anúncios de inteligência de áudio são um lembrete de que as ferramentas alimentadas por IA estão se tornando cada vez mais universais em todas as áreas da computação e da vida.

“Esses recursos não criam ou armazenam gravações de áudio, e o áudio bruto usado para processamento é completamente inacessível aos sistemas operacionais, aplicativos, ao usuário ou à Apple”, escreveu a empresa em um relatório compartilhado com a WIRED.

Os novos recursos do Apple Watch são projetados para processar o máximo possível de dados localmente nos dispositivos, para que dados potencialmente confidenciais não vão para a nuvem. O Reconhecimento de Som, por exemplo, alerta os usuários sobre sons em seu ambiente – incluindo campainhas, sirenes, alarmes ou, digamos, o choro de um bebê – sem enviar quaisquer dados do relógio. As ferramentas que enviam informações para a nuvem pré-processam os dados para que não sejam arquivos de áudio brutos e usam a infraestrutura de computação em nuvem privada da Apple.

A Apple enfatiza que seus recursos no dispositivo para relógios Apple se expandiram graças aos novos chips S11 da empresa. Os chips incluem um espaço especial protegido por memória que a Apple chama de Secure Exclave. Projetado especificamente para dados de sensores, o exclave é um buffer isolado inacessível ao restante do sistema operacional, onde o Apple Watch pode armazenar e processar dados de áudio em um espaço protegido.

Um novo recurso do Shazam “escuta” música e irá gerar uma assinatura de uma música que é armazenada no Secure Exclave. Se o usuário navegar até o Shazam para descobrir qual é a música, a ferramenta enviará essa assinatura – e não um arquivo de áudio – aos servidores do Shazam para identificação. (Shazam é ​​um serviço de propriedade da Apple.) Se o usuário não solicitar a identificação da música, ou assim que o fizer, a assinatura especial será “imediatamente” excluída do relógio.

O recurso de recapitulação, conhecido como Siri Recap, pode ser configurado para ficar ligado o tempo todo e gerar recapitulações de qualquer conversa importante, ou pode receber uma programação para ouvir em determinados horários do dia. Um modelo de IA dedicado determina quando a fala está ocorrendo sem gravar ou transcrever quaisquer dados. Se detectar uma conversa, o áudio vai para um buffer protegido dentro do Secure Exclave no Apple Watch, o relógio o criptografa e o transmite usando o emparelhamento Bluetooth seguro especial da Apple para o Secure Exclave no iPhone de um usuário. Em seguida, o áudio é imediatamente excluído do Apple Watch.

O iPhone usa reconhecimento de fala local e modelos de idioma no dispositivo para transcrever o áudio e, em seguida, gerar uma versão mínima da transcrição que remove elementos não essenciais, como palavras extras e frases repetidas. Em seguida, o áudio bruto também é imediatamente excluído do iPhone. A última etapa no iPhone é um modelo de segurança que “filtra o texto para omitir termos potencialmente prejudiciais”, segundo a Apple. A partir daí, a destilação da conversa é criptografada e o iPhone a envia para o Private Cloud Compute.