Robot de bricolage basé sur Raspberry Pi «Saras» combine la parole, la vision et l’autonomie

Le créateur de tous les technologies a construit un robot personnel qui peut déplacer, parler, écouter, répondre et prendre des décisions tout seul. Il s’appelle Saras, et le nom signifie Smart Autonomous Robotic IA System. Il est composé d’un Raspberry Pi, de certains capteurs, d’un câblage, de parties du corps imprimées en 3D, d’un microphone, d’un haut-parleur et de moteurs à courant continu. Il a un système Wake Word, il ne réagit donc pas aux sons aléatoires, tout comme ce que nous voyons dans Alexa ou Google Assistant. L’expression « Hé, Saras » agit comme le déclencheur.

L’écran est simple; Il montre des visages pour indiquer son statut actuel. Cligner un coup d’œil à écouter, parler du visage signifie parler et un visage neutre signifie inactif. Le robot peut écouter et utiliser des modèles d’IA pour formuler des réponses. Il transforme le discours en texte, l’envoie à Chattele modèle de lama localou le Modèle de vision de lave localepuis parle la réponse en utilisant texte vocal. Le robot peut avancer, en arrière, à gauche ou à droite selon les commandes verbales lancées dessus. Il peut essentiellement voir une boîte ou un canapé et se déplacer vers lui sur la commande. Il interprète la commande, identifie l’objet et agit sans tomber sur quoi que ce soit, démontrant détection d’obstacles et raisonnement spatial.

Il a un mode d’autonomie complet où il explore une zone à elle seule et présente un résumé par la suite. Le stockage du historique de la navigation améliore les décisions. Chaque mouvement est enregistré: la direction, la distance des obstacles et ce qui est vu. Ces journaux peuvent être utilisés pour construire un Carte 2D de la maison. Les améliorations futures pourraient inclure un corps plus poli et un mode hors ligne.

Retrouvez l’histoire de Raspberry Pi dans cette vidéo :