📸Ferramenta transforma print de tela em contexto completo para IA

O desenvolvedor Kitze, criador do app Supermac, lançou um recurso chamado 'backshots' inspirado numa funcionalidade do Codex da OpenAI. A ideia é simples e poderosa: com um atalho, o app tira uma captura de tela da janela aberta no seu Mac, mas não para por aí. Ele também coleta todas as informações de acessibilidade e texto daquela tela, inclusive o conteúdo escondido que você precisaria rolar para ver. --- Depois é só colar tudo no seu agente de IA preferido. Em vez de descrever manualmente o que está vendo na tela, você dá à IA o contexto visual e textual completo de uma vez. Isso resolve um dos problemas mais chatos de trabalhar com IA: explicar o que você está olhando. --- É o tipo de ferramenta que parece pequena, mas muda o fluxo de trabalho. Quanto mais contexto a IA recebe, melhor ela responde. E colar uma imagem anotada é muito mais rápido do que digitar três parágrafos descrevendo um bug na tela.

O desenvolvedor Kitze, criador do app Supermac, lançou um recurso chamado 'backshots' inspirado numa funcionalidade do Codex da OpenAI. A ideia é simples e poderosa: com um atalho, o app tira uma captura de tela da janela aberta no seu Mac, mas não para por aí. Ele também coleta todas as informações de acessibilidade e texto daquela tela, inclusive o conteúdo escondido que você precisaria rolar para ver.
— @thekitze View on X

O recurso "backshots", lançado pelo desenvolvedor Kitze no app Supermac para macOS, elimina a etapa de descrever manualmente o estado de uma interface ao solicitar ajuda de modelos de linguagem. A ferramenta captura não apenas a imagem visível da tela, mas extrai via APIs de acessibilidade do sistema todo o texto estruturado da janela ativa — incluindo conteúdo que exige scroll para ser visualizado.

Como funciona a captura inteligente

Ao contrário de screenshots convencionais ou ferramentas de OCR que processam apenas pixels, o backshots acessa a árvore de elementos de acessibilidade do macOS. Isso significa que o app coleta:

Texto de todos os elementos UI, visíveis ou ocultos na viewport
Hierarquia estruturada dos componentes (botões, campos, menus)
Metadados de acessibilidade que preservam o contexto semântico

A inspiração veio diretamente do Codex da OpenAI, que utiliza contextos similares para compreender e manipular interfaces programaticamente. Kitze adaptou essa abordagem para o uso cotidiano de desenvolvedores e profissionais de suporte.

Por que importa para o fluxo de trabalho com IA

Desenvolvedores brasileiros enfrentam constantemente o problema de traduzir estados visuais complexos em descrições textuais para IAs. Um bug em um dashboard, uma configuração específica de IDE ou um erro de layout exige parágrafos de explicação quando, na prática, uma imagem valeria mais — mas imagens puras carecem de contexto estruturado para LLMs processarem eficientemente.

Com o backshots, o profissional cola no chat do Claude, ChatGPT ou outro agente não uma imagem estática, mas um pacote completo de contexto multimodal: o screenshot para referência visual mais o texto estrutur

backshotsimagemacessibilidadetextocontextokitzeappmacoscapturanão

Mais da mesma edição

@kyleichan

⚛️EUA investem US$ 2 bilhões em computação quântica

O Departamento de Comércio dos Estados Unidos anunciou um investimento de US$ 2 bilhões em computação quântica. Do total, US$ 1 bilhão vai direto para a IBM montar a primeira fábrica de chips quânticos do mundo. O dinheiro vem do CHIPS Act, aquele pacote bilionário que o governo americano criou para trazer a produção de semicondutores de volta ao país. --- Computação quântica é, em termos simples, uma forma radicalmente diferente de processar informação. Enquanto computadores normais trabalham com bits (zeros e uns), os quânticos usam qubits, que podem representar vários estados ao mesmo tempo. Na prática, isso significa resolver em minutos problemas que levariam séculos nos computadores atuais, como simulações de novos remédios ou criptografia. --- O detalhe curioso é que o governo vai comprar participação nas empresas, não apenas dar subsídios a fundo perdido. É uma aposta: se a tecnologia decolar, o contribuinte americano ganha junto. Quem prestou atenção na corrida dos chips de IA já viu esse filme, e agora o enredo se repete no quântico.

@GoogleDeepMind

🔏Google, OpenAI e ElevenLabs vão marcar tudo que IA criar

O Google DeepMind revelou que sua tecnologia de marca d'água digital, chamada SynthID, já carimbou mais de 100 bilhões de conteúdos gerados por IA. Agora, a empresa está levando o sistema para fora de casa: OpenAI, ElevenLabs (famosa por clonagem de voz) e a coreana Kakao vão adotar o SynthID em seus próprios modelos. A Nvidia já tinha aderido antes. --- Funciona assim: toda vez que uma IA gera um texto, imagem, áudio ou vídeo, o SynthID embute uma marca invisível ao olho humano, mas que pode ser detectada por ferramentas específicas. É como uma assinatura escondida que diz 'isto foi feito por máquina'. A ideia é combater desinformação e deepfakes na raiz. --- O fato de concorrentes diretos aceitarem usar a mesma tecnologia é raro e significativo. Sinal de que, pelo menos nesse ponto, a indústria reconhece que transparência não é vantagem competitiva, é sobrevivência. Se vai funcionar na prática ou virar só selo decorativo, o tempo dirá.

@OpenRouter

🚀OpenRouter levanta US$ 113 milhões e mostra explosão no uso de IA

A OpenRouter, uma espécie de 'shopping center' de modelos de IA, fechou uma rodada de investimento de US$ 113 milhões, liderada pela GV Capital. Para quem não conhece: a plataforma funciona como intermediária. Em vez de você se cadastrar em cada empresa de IA separadamente, conecta tudo num lugar só e escolhe qual modelo usar para cada tarefa. --- O número que chama atenção é outro. Em seis meses, o volume semanal de tokens (a unidade básica que a IA processa, pense nisso como 'palavras consumidas') saltou de 5 trilhões para 25 trilhões. Isso não é crescimento, é explosão. Mostra que empresas estão saindo da fase de teste e colocando IA para rodar de verdade, no dia a dia. --- É um termômetro interessante do mercado. Quando o intermediário cresce assim, significa que a demanda do ecossistema inteiro está fervendo. A OpenRouter vira uma peça cada vez mais estratégica, porque quem controla o ponto de distribuição controla muito do jogo.

Receba no seu email

Todo dia, grátis pra sempre.

Assinar newsletter