A recente vaga de modelos AI e serviços como o ChatGPT vieram demonstrar como os actuais assistentes digitais, como o Google Assistant, Siri, e Alexa, são profundamente limitados e estão ultrapassados. O mais incrível é que isto também permite que uma única pessoa possa demonstrar como as coisas poderiam ser.
Foi exactamente o que Justin Alvey fez com o seu projecto Onju Voice, pegando num Nest Mini, trocando a sua motherboard por outra (com um ESP32-S3) e, utilizando-o em combinação com serviços AI actualmente disponíveis, criando um assistente digital bastante mais evoluído e capaz, como pode ser visto no vídeo que se segue.
I “jailbroke” a Google Nest Mini so that you can run your own LLM’s, agents and voice models.
— Justin Alvey (@justLV) July 18, 2023
Here’s a demo using it to manage all my messages (with help from @onbeeper)
🔊 on, and wait for surprise guest!
I thought hard about how to best tackle this and why, see 🧵 pic.twitter.com/rUBGoM1pO0
Apesar de haver lugar para melhorias, a nível da redução das pausas no processamento dos comandos, é um exemplo que antecipa aquilo que será inevitável nas evoluções dos actuais assistentes digitais. E com a próxima geração de chips mobile a dar ainda mais destaque à execução local de modelos AI, é algo que tem potencial para poder ser feito de forma imediata e sem necessidade de uma ligação permanente à cloud.
Here's one of my modded Google Nest Mini's using @OpenAI function calling to take notes & control 💡
— Justin Alvey (@justLV) August 9, 2023
I’m releasing all code & docs to get this exact demo running yourself, including:
💬 Messages
🏡 Home Assistant integration
📝 Note-takinghttps://t.co/OwD6PeOUVQ pic.twitter.com/qj2M4nk1IE
Para quem não quiser esperar, pode seguir as instruções de como replicar este projecto hoje mesmo.
Sem comentários:
Enviar um comentário (problemas a comentar?)