Visual Intelligence

iOS 18.2 traz função de análise de tela com ChatGPT, inspirada no Google

iOS 18.2 integra o ChatGPT à Siri, permitindo análise de tela e descrição de imagens diretamente no iPhone, iPad e Mac, oferecendo uma alternativa ao Visual Intelligence.

Imagem com o iOS 18

Com a chegada do iOS 18.2, a Apple lança uma nova funcionalidade que promete mudar a experiência de usuários de iPhones e iPads. Integrando o ChatGPT à Siri, a atualização permite que dispositivos identifiquem e analisem conteúdos visuais diretamente da tela, oferecendo uma alternativa poderosa ao Visual Intelligence. A novidade, inspirada no recurso “Circle to Search” do Google presente no Pixel 8 Pro, amplia o acesso a essa tecnologia de reconhecimento visual, que antes era restrita ao iPhone 16, para modelos anteriores, como o iPhone 15 Pro, além de iPads e Macs.

Siri e ChatGPT no iOS 18.2: análise visual em tempo real

No iOS 18.2 beta para desenvolvedores, a Siri agora pode acionar o ChatGPT para descrever o conteúdo de qualquer imagem ou tela no dispositivo. Essa função é útil para usuários que precisam de detalhes visuais, como reconhecer edifícios, obras de arte ou até mesmo documentos. Ao solicitar que a Siri identifique um objeto ou construção exibida na tela do iPhone, ela captura automaticamente uma imagem do conteúdo e a envia para os servidores da OpenAI, com o consentimento do usuário.

A partir daí, o ChatGPT analisa a imagem e oferece uma descrição detalhada do que vê. O usuário também pode fazer perguntas adicionais para obter informações mais específicas. Por exemplo, se o ChatGPT identificar um edifício famoso, como o Empire State Building, é possível fazer perguntas sobre a sua história, localização e características arquitetônicas, enriquecendo a interação com o assistente virtual da Apple.

Reconhecimento nativo de tela no futuro

Em uma atualização futura, prevista para o próximo ano, a Siri deverá expandir ainda mais sua capacidade de reconhecer o conteúdo visual. A Apple planeja incorporar inteligência visual nativa ao sistema iOS, o que permitirá à Siri identificar e agir diretamente sobre conteúdos visuais exibidos em qualquer aplicativo. Dessa forma, a assistente poderá realizar tarefas mais complexas, como identificar um produto em uma loja virtual e oferecer links para compra, ou mesmo reconhecer informações em documentos e automatizar ações dentro do sistema.

Essa nova tecnologia promete beneficiar usuários que buscam otimizar suas tarefas diárias, integrando informações visuais com a inteligência do ChatGPT para melhorar a produtividade e a conveniência. Com o avanço dessa tecnologia, a Apple oferece aos usuários uma ferramenta que traz o melhor da Visual Intelligence sem a necessidade de um iPhone 16, democratizando o acesso ao recurso e mantendo a Siri competitiva com assistentes visuais de outras empresas.

Essa evolução demonstra a visão da Apple de transformar o iOS em uma plataforma onde os dispositivos possam entender e interagir com o ambiente do usuário de forma inteligente e proativa.

Acesse a versão completa
Sair da versão mobile