Google a annoncé aujourd'hui son nouveau modèle Embedding Gemma 2 qui peut être utilisé pour « organiser, rechercher et connecter des informations directement sur du matériel grand public ». Pour montrer son potentiel, Google a créé une application Mac AI Edge Foresight pour la « prise de notes intelligente ».
Embedding Gemma 2 « peut aider à trouver un clip vidéo spécifique à partir d'un mémo vocal, ou rechercher des heures d'enregistrements audio en fonction d'une requête textuelle, le tout traité par un seul modèle multimodal natif ». Le modèle à 740 millions de paramètres est construit sur l'architecture Gemma 4 et disponible sous licence Apache 2.0. Il est conçu pour fonctionner localement « dans des contraintes de ressources serrées » : avec la quantification, sur un Google Pixel 11 Pro, Embedding Gemma 2 nécessite aussi peu que ~191 Mo de RAM active pour les poids textuels uniquement et ~567 Mo pour le modèle multimodal complet.
La plus grande démonstration est une nouvelle application Mac appelée Google AI Edge Foresight. Pendant les réunions vidéo ou en personne, cette application de prise de notes écoute en arrière-plan afin que vous puissiez simplement « griffonner des puces abrégées pour les choses dont vous voulez vous souvenir ». L'application « enrichit [ces abréviations] en notes soignées en utilisant instantanément la transcription de la réunion ». La transcription et l'audio sont entièrement traités sur votre appareil plutôt que dans le cloud.
Une autre capacité vous permet de « pointer Google AI Edge Foresight vers vos dossiers de projet, documents de référence, diagrammes et calendrier ». Prenant en charge les fichiers locaux et Google Drive, cela vous permet à son tour de poser des questions à l'application et d'obtenir rapidement des informations. Il existe également une capacité d'assistance en direct qui « écoutera et répondra automatiquement aux questions ». Vous pouvez télécharger Google AI Edge Foresight ici.
Source: 9to5Mac · Résumé par HeadlinesBriefing