Apple:

Audio Intelligence is a brand-new class of Apple Intelligence features that use the microphones of Apple Watch, the power of Apple silicon, and on-device and cloud-based AI models to help you detect sounds, identify music, and stay present and engaged — all while protecting your privacy at every step.

Hartley Charlton:

• Siri Recap: Uses ambient listening to generate high-level notes from conversations, such as takeaways from a team meeting or a parent-teacher conference, producing an Apple Intelligence-generated title, summary, and key points reviewable in the Siri app.
• Live Rewind: Lets users “go back in time for 15 seconds,” transcribing and displaying what was just said in a conversation with a double press of the Digital Crown.
• Shazam: Automatically identifies music playing nearby and surfaces the song title and artist on the Music Recognition widget in the Smart Stack.
• Sound Recognition: Brings sound alerts to Apple Watch for users who are deaf or hard of hearing, listening for sirens, alarms, doorbells, a baby crying, and more, even when their iPhone isn’t nearby.

Lily Hay Newman:

Apple is emphasizing that all of them are built to prioritize privacy and security using the extensive infrastructure the company has developed to protect its other Apple Intelligence and Siri services. As more and more of these types of features debut, though, the audio intelligence announcements are a reminder that AI-powered tools are becoming increasingly universal in all areas of computing and life.

“These features do not create or store audio recordings, and raw audio used for processing is completely inaccessible to the operating systems, apps, the user, or Apple,” the company wrote in a report shared with WIRED.

[…]

Apple emphasizes that its on-device capabilities for Apple watches have expanded thanks to the company’s new S11 chips. The chips include a special memory-protected space that Apple calls the Secure Exclave. Designed specifically for sensor data, the exclave is an isolated buffer that is inaccessible to the rest of the operating system where Apple Watch can hold and process audio data in a protected space.

[…]

To try to mitigate blatant privacy violations, Apple says that the watch produces an audible chime when a watch owner initiates a Live Rewind transcript to alert other people in the area—even if it is on silent mode or paired with headphones. And the features are built to omit or filter out potentially identifying information about speakers. But the sheer scope and breadth of the tools is extremely noteworthy.

Zac Hall:

If you want to really take a deep dive on privacy and the new features, Apple has published an 11-page privacy paper that goes even further.

Previously:

• Apple Watch Ultra 4
• Apple Watch Series 12
• Pebble Index

Update (2026-09-11): Dr. Drang:

Ron Huang introduced a couple of features of the Series 12 and Ultra 4 that struck me as both disturbing and possibly illegal. They certainly seem at odds with Apple’s commitment to privacy.

[…]

I’m sure Apple will argue that there’s no privacy issue because the recordings aren’t being saved. But if there’s a transcription, isn’t that a type of saving?

And then there’s the question of legality. A great variety of law, both in the United States and across the world, concerns the recording of electronic and in-person conversations. I’m sure Apple has considered this, but I have to think some jurisdictions will frown on Live Rewind. If Apple has to defend it, that’s fine. What’s one more squadron of lawyers to Apple? But if an Apple Watch owner has to defend a transcription made innocently—made with Apple’s encouragement, in fact—that seems like an unfair burden. Maybe Apple should indemnify all future Watch buyers from privacy-related legal action.

[…]

The hoops Apple jumped through to avoid certain words is pretty funny. […] You think your watch records the audio around you? No no no. The audio flows into the Secure Enclave, and flowing is definitely not recording because it’s a different word.

Juli Clover:

Live Rewind and other Audio Intelligence features do not generate audio recordings. Audio flows into the Secure Exclave, is processed, and then deleted.

According to Apple, Live Rewind text snippets “disappear permanently” from the Apple Watch approximately 30 seconds after the Apple Watch display dims, unless the info is saved to the Siri app.

Nick Heer:

But good luck explaining that to anyone around you after you read back an exact transcript of what they just said. Apple says they should be sufficiently notified Live Rewind is active because “an audible chime plays from the speaker on your Apple Watch, even if your Apple Watch is on silent or you have headphones connected”, plus the watch plays an animation, but it is not clear to me when this happens. It is not shown in Apple’s video. The impression I get is that Live Rewind is always running in the background and these notifications are only played after you double-click the Digital Crown to look at the text.

This feels like a glimpse of how Apple will market its inevitable wear-anywhere glasses product. I do not think it does enough to assuage privacy concerns. I think normal people will continue to react negatively when you tell them you have been passively recording them because, outside Silicon Valley, that is considered gross and invasive.

Saagar Jha:

I have to admit that the Siri Recap stuff all being “documented” using AI slop is really giving me confidence in the level of care that went into designing this feature

Matt Evans (Hacker News):

I’m frankly surprised Apple even went through with this feature at this time, considering the bans and backlash other AI-powered surveillance wearables are getting.

[…]

Apple is keen to evidence its trustworthiness, with on-device AI and Private Cloud Compute and an insistence that it doesn’t record or log audio and transcripts. However, if people think they’re being discreetly recorded without their permission, it’s possible Apple Watch wearers could experience their own slice of the abuse hurled at Meta Glasses wearers.

Dan Sugalski:

I… y’know, Betteridge’s law does, as always, apply.

Glenn Fleishman:

Given that Apple has to warn of this, it’s the surest sign the features shouldn’t be released in this form. Apple repeats the form of the warning I see regularly at my gym… but apparently it isn’t heeding it.

Jack Brewster:

Just called my HSA provider and upfront they say that calls may be recorded and transcribed by AI and then provide no means of opting out. So of course the person who finally answered says I have to give my social to verify my identity.

Update (2026-09-14): See also: Core Intuition and Steven Aquino.

Hoje, com a revelação dos Apple Watches Series 12 e Ultra 4, a Maçã também anunciou um novo conjunto de recursos chamado Inteligência de Áudio (Audio Intelligence), composto pelas funções Reconhecimento de Som (Sound Recognition), Reconhecimento de Música (Music Recognition), Live Rewind e Siri Recap.

Parte da Apple Intelligence e exclusivas desses novos relógios, essas ferramentas analisam o som ambiente — que, em alguns casos, é captado constantemente — para alertar o usuário sobre sons importantes, ajudá-lo a descobrir o título de músicas, recobrar algo que foi falado nos últimos instantes e revisar anotações sobre as suas principais conversas ao longo do dia, respectivamente.

Por mais bem intencionados que esses recursos possam ser, no entanto, é natural que alguns usuários torçam o nariz para eles — afinal, a ideia de ter um dispositivo monitorando tudo o que você fala (e que falam para você) sem interrupções pode ser um tanto… preocupante, principalmente do ponto de vista da privacidade — um assunto tão abordado pela Apple.

E foi muito provavelmente pensando nessas pessoas que a Apple colocou no ar uma extensa página de suporte que detalha o funcionamento dessas ferramentas, além de explicar quais medidas de segurança foram tomadas para proteger usuários que decidirem ativar essas ferramentas. A empresa também publicou um documento [PDF] que mergulha ainda mais nas minúcias dessas novidades, as quais dependem não só do poder de fogo do novo SiP ¹System in a package, ou sistema em um pacote. S11, como também dos seus recursos de segurança embutidos.

Para início de conversa, a Apple deixa claro que todos esses recursos são completamente opcionais; o Reconhecimento de Som, por exemplo, precisa ser configurado nos Ajustes (Settings) do iPhone, de modo que ele só vem ativado por padrão no Apple Watch caso o recurso equivalente do iOS já tenha sido ativado anteriormente pelo usuário no iPhone. Outras ferramentas, como o Reconhecimento de Música, podem ser ativadas diretamente nos Ajustes do Apple Watch (caso já não tenham sido ativadas anteriormente).

O Live Rewind, por sua vez, entra em cena apenas quando o usuário dá um clique duplo na Digital Crown, mostrando em seguida uma transcrição dos últimos 15 segundos de conversa. Ainda segundo a Apple, o relógio para de gerar essa transcrição assim que o último trecho de conversa é exibido, além de não salvar qualquer texto — a menos que o usuário faça uma pergunta sobre o seu conteúdo para a Siri ou escolha salvá-lo no app da assistente, que é onde estão os ajustes dessa ferramenta.

Disponível na Central de Controle, o Siri Recap pode ser ativado e desativado manualmente a qualquer momento, mas também permite que o usuário defina uma programação com base na hora e/ou localização. A Siri também pode ser barrada de realizar qualquer registro em momentos/lugares específicos.

Trechos de texto do Live Rewind e anotações do Siri Recap podem ser visualizados, editados e apagados a qualquer momento no app da Siri, bem como exportados para apps como o Notas (Notes) e o Diário (Journal). Além disso, apagá-los faz com que eles sumam de todos os seus dispositivos sincronizados — lembrando que a Apple os protege com criptografia de ponta a ponta antes de enviá-los ao iCloud.

Proteções adicionais

Segundo a Apple, em todos esses casos, nenhuma gravação de áudio é gerada ou armazenada no Apple Watch. Em vez disso, o áudio captado pelos microfones passa pelo Secure Exclave do SiP S11 — compartimento isolado por hardware que processa dados de maneira separada do resto do sistema, impedindo que aplicativos, o watchOS, a Apple ou até mesmo o próprio usuário possam acessá-lo.

Os resumos da Siri Recap são gerados pelos chamados Apple Foundation Models no Private Cloud Compute, que não salva nenhuma das informações. As anotações também são apagadas automaticamente pelo app da Siri depois de sete dias, caso o usuário escolha não salvá-las ou exportá-las.

A Apple também garante que esses recursos não identificam ou atribuem locutores nos áudios captados — protegendo, assim, a identidade de pessoas no entorno do usuário. A única particularidade aqui é a Siri Recap, que pode registrar nomes citados no conteúdo da conversa, mesmo sem identificar quem é o locutor ou interlocutor; ele também reconhece e censura “conteúdo potencialmente prejudicial, como linguagem que promove automutilação ou discurso de ódio, e informações confidenciais, como dados financeiros, identificadores governamentais, dados de autenticação e certos identificadores pessoais”.

No caso do Live Rewind, um alerta sonoro é reproduzido sempre que o usuário ativa o recurso, não importa se o Apple Watch está com o modo silencioso ligado ou não. Uma animação em tela cheia também é exibida junto com um indicador de uso do microfone; “Isso serve para alertar as pessoas próximas de que o recurso foi ativado”, explica a empresa.

Dependente do Shazam, o Reconhecimento de Música compartilha apenas uma assinatura acústica, e não o áudio bruto, na hora de processar o áudio captado — algo que acontece nos servidores do serviço. A assinatura acústica, ainda segundo a Apple, é gerada em um buffer seguro no Secure Exclave.

Disponibilidade

Todos esses recursos, como dito, requerem um Apple Watch Series 12 ou um Apple Watch Ultra 4 para funcionar.

Indisponíveis para usuários menores de 13 anos, o Live Rewind e a Siri Recap serão liberados como recursos beta ainda neste ano (inicialmente apenas em inglês). O Reconhecimento de Som e o Reconhecimento de Música serão liberados junto com os novos smartwatches.

Notas de rodapé

• 1
  System in a package, ou sistema em um pacote.