Brilliant Labs
Brilliant Labs Ltd. · Imagem
O ARGPT for Monocle é o app que liga os óculos AR Monocle, da Brilliant Labs, ao ChatGPT e ao Whisper: você toca, fala e lê a resposta no campo de visão.
Sobre Brilliant Labs
What Is ARGPT for Monocle
O ARGPT for Monocle é o aplicativo móvel que conecta os óculos inteligentes Monocle, da Brilliant Labs, ao ChatGPT e ao Whisper. Você toca na lateral do Monocle, faz uma pergunta em voz alta e a resposta aparece na telinha presa à armação. O app também funciona sozinho como uma janela de chat comum quando você não está com os óculos.
A empresa depois rebatizou o app como Noa da Brilliant, e os dois nomes apontam para a mesma coisa: os repositórios do GitHub continuam com os títulos noa-for-ios e noa-for-android, enquanto a ficha na loja mantém o nome original argpt. O projeto nasce do hábito da Brilliant Labs de lançar hardware aberto, e o código dos dois apps é publicado sob a licença BSD 3-Clause, então dá para ver exatamente como funciona a conexão com o Monocle.
Um limite molda toda a experiência. O ARGPT não traz IA própria. Você coloca a sua própria chave de API da OpenAI, o app repassa a sua voz e as suas perguntas para a OpenAI, e a OpenAI cobra você direto. Isso mantém o app gratuito e aberto, mas também significa que o assistente vale o que valer o modelo que você paga e a conexão que você tem.
Getting Started
- Instale o app no iOS ou no Android. A ficha na App Store traz o nome argpt, e o Google Play usa o pacote xyz.brilliant.argpt.
- Pegue uma chave de API da OpenAI na plataforma da OpenAI. Você precisa de uma conta com cobrança configurada, e a Brilliant Labs sugere limites baixos de gasto, como um teto modesto de 5 dólares e um teto rígido de 10 para uso casual.
- Abra o app e ligue o Monocle. Ao tirá-lo do estojo, ele acorda e se anuncia por Bluetooth. O app pareia com a unidade mais próxima.
- Deixe o app concluir a primeira configuração. Ele envia os scripts Python de que o Monocle precisa, confere as versões de firmware e FPGA e as atualiza se estiverem atrasadas.
- Toque para falar ou digite. Diga uma pergunta pelo Monocle, ou escreva na janela de chat, e a resposta aparece na tela e no app.
Informações do produto
Uma visão rápida dos preços, das plataformas compatíveis e do desempenho de Brilliant Labs.
Ideal para
Os usuários, tarefas e cenários em que esta ferramenta se encaixa melhor.
Usuários
- Curiosos e early adopters que têm o Monocle
- Quem quer um assistente de IA sem as mãos em movimento
- Entusiastas atrás de um assistente de IA para óculos inteligentes
- Desenvolvedores que querem uma referência funcional
Tarefas
- Fazer perguntas rápidas sem usar as mãos
- Traduzir fala para o inglês
- Transformar anotações soltas em mensagens escritas
- Colocar firmware e scripts em dia
Cenários
- Cozinhar seguindo uma receita
- Viajar para um lugar cujo idioma você não fala
- Pedalar ou fazer trilha com as mãos ocupadas
- Parar num museu ou numa galeria
Principais recursos
Fale e leia no seu campo de visão
O ciclo central é simples e é a razão de o app existir. Você toca no Monocle, faz uma pergunta em voz alta e a resposta aparece na tela diante do seu olho. O áudio sai dos óculos para o celular, onde o Whisper transcreve e o ChatGPT escreve a resposta, e o telefone devolve o texto para ser exibido. Transforma um aparelho que você veste num assistente de IA sem as mãos a quem perguntar e de quem receber resposta.
Modos de chat por voz e por texto
O ARGPT funciona de duas maneiras. Pelo Monocle, a sua voz é a entrada e a tela é a saída. Abra o app sozinho e ele se comporta como um cliente comum de ChatGPT, em que você digita com o teclado do celular e lê a conversa na tela. Esse segundo modo importa quando os óculos estão carregando ou você simplesmente os esqueceu em casa.
Tradução com Whisper para o inglês
Ligue a tradução nos ajustes e o app deixa de ser assistente para ser tradutor. Diga algo em outro idioma e o Whisper traduz para o inglês sem entregar a tarefa ao ChatGPT. Ele cobre qualquer idioma que o Whisper suporte, o que torna os óculos úteis em viagem e para ler placas e cardápios que você não decifra. O custo é a direção: a tradução chega ao inglês, não de volta ao outro idioma.
Atualizações automáticas de firmware e scripts
Antes de poder falar com ele, o Monocle precisa do firmware MicroPython, da imagem FPGA e dos scripts Python certos, e o ARGPT carrega tudo para você. Cada vez que os óculos se conectam, o app confere a versão do firmware, depois a da FPGA, depois os scripts, e atualiza o que estiver defasado. O que seria uma tarefa manual e chata vira parte do pareamento.
Use a sua própria chave da OpenAI
O app não tem assinatura porque não tem modelo próprio. Você cola uma chave de API da OpenAI, e o app envia as suas consultas para a OpenAI usando a sua conta e a sua cobrança. Um menu de ajustes deixa você escolher qual modelo GPT usar, então dá para trocar velocidade por capacidade do seu jeito. A Brilliant Labs recomenda tetos de gasto pequenos para que um uso casual não estoure a conta.
Código aberto no iOS e no Android
Os apps de iOS e de Android são publicados no GitHub sob a licença BSD 3-Clause. O de iOS é um projeto SwiftUI e o de Android é nativo, e os repositórios explicam o protocolo Bluetooth que o Monocle fala. Se você quer construir o seu próprio app de AR em vez de usar o de fábrica, esses são um ponto de partida, não uma caixa-preta.
Prós e contras
Prós
- Coloca o ChatGPT no campo de visão do Monocle, então as respostas aparecem sem as mãos em vez de numa tela que você precisa segurar.
- A tradução com Whisper cobre muitos idiomas falados para o inglês, a função que torna os óculos realmente úteis no exterior.
- Os apps de iOS e de Android são de código aberto, então a ligação Bluetooth e a lógica do app podem ser lidas e bifurcadas.
- O app em si não custa nada, e a Brilliant Labs o manteve vivo muito depois do lançamento original do Monocle.
Contras
- Você precisa colocar a sua própria chave de API da OpenAI e pagar à OpenAI pelo uso, então "app grátis" não quer dizer IA grátis.
- Ele só funciona por completo com o hardware Monocle. Sem os óculos, sobra um cliente básico de ChatGPT que você poderia ter em outro lugar.
- A tradução vai só numa direção, para o inglês, então não vai ajudar um anglófono a se fazer entender em outro idioma.
- O áudio de 8 bits e 8 kHz que o Monocle envia alivia a transmissão mas perde faixa dinâmica e capta o ruído de fundo, algo que aparece na precisão da transcrição.
Perguntas frequentes
O ARGPT for Monocle é um app complementar da Brilliant Labs que conecta os seus óculos AR Monocle ao ChatGPT e ao Whisper. Você toca nos óculos, fala e lê a resposta do ChatGPT na tela dentro do seu campo de visão. Hoje ele é vendido como Noa da Brilliant, embora a ficha na loja ainda use o nome argpt.
Conteúdo relacionado
Explore ferramentas, skills e artigos relacionados a Brilliant Labs.
Alternativas a Brilliant Labs
Tractionwave
TractionWave · Imagem · MarketingO TractionWave cria mapas de calor de atenção com IA para anúncios estáticos. Você envia um PNG ou JPG e recebe a atenção prevista, pontos quentes ranqueados e ajustes antes de gastar verba.
Imejis.io
Imejis.io · Imagem · MarketingO Imejis.io é um estúdio de design com IA para agentes e equipes de marketing. Você descreve a imagem com suas palavras, e a ferramenta escreve o texto, monta o layout, adapta para cada tamanho e exporta o arquivo final.
Layoutr
Van Dijk Ontwikkeling · Imagem · IA chinesaLayoutr é uma ferramenta de planta no navegador que coloca seu arquivo em escala real, posiciona móveis em tamanho verdadeiro, mostra a planta em 3D e gera imagens com IA.