Découvrez les dernières innovations de Vertex AI : Plus de LLM et un nouvel outil de création d'agents

Un vent de renouveau souffle sur Vertex AI #

L’annonce a été faite lors de l’évènement Next de Google à Las Vegas. Parmi les nouveautés, on retrouve le Gemini 1.5 Pro qui supporte désormais jusqu’à 1 million de tokens en fenêtre contextuelle. Cette mise à jour a été accueillie positivement par les entreprises qui voient en elle une solution pour éviter l’affinage des modèles ou l’utilisation du RAG (retrieval augmented Generation) pour rectifier les réponses du modèle.

Gemini 1.5 Pro a également été amélioré pour traiter les flux audio, y compris la parole et le son des vidéos. Google avance que cette capacité de traitement audio permet aux utilisateurs de bénéficier d’une analyse multimodale et d’obtenir des informations sur le texte, les images, les vidéos et le son. Le modèle Pro prendra également en charge la transcription, qui peut être utilisée pour rechercher du contenu audio et vidéo.

Embellissez vos images avec Imagen 2 et découvrez Codegemma #

Le LLM Imagen 2, présent dans le catalogue de Google Cloud, a également été mis à jour. Il offre désormais des capacités d’édition de photos et la possibilité de créer des vidéos de 4 secondes ou des « images en direct » à partir d’invites textuelles. De plus, une fonction de filigrane numérique a été ajoutée pour marquer les images générées par l’IA. CodeGemma, un modèle léger de la famille propriétaire Gemma, fait aussi partie des nouvelles mises à jour LLM de Vertex AI.

Google a également annoncé qu’il allait permettre aux équipes d’utiliser des LLM dans Google Search ainsi que leurs propres données via Vertex AI. Cette initiative vise à aider les entreprises à obtenir des réponses plus précises de leurs modèles de base. Google précise que l’ancrage dans Google Search peut améliorer de manière significative la précision des réponses.

Des outils performants pour soutenir vos tâches d’apprentissage machine #

Google a étendu les capacités MLops de Vertex AI pour accompagner les entreprises dans leurs tâches d’apprentissage machine. Parmi les nouvelles fonctionnalités, on retrouve Prompt Management qui aide les équipes à expérimenter, migrer et suivre les invites et les paramètres. Google a également ajouté des outils d’évaluation pour évaluer les performances du modèle lors de l’itération de la conception de l’invite.

Google Cloud a étendu la résidence des données stockées au repos pour les API Gemini, Imagen et Embeddings de Vertex AI à 11 nouveaux pays : l’Australie, le Brésil, la Finlande, Hong Kong, l’Inde, Israël, l’Italie, la Pologne, l’Espagne, la Suisse et Taïwan. Cette extension permettra aux utilisateurs de ces pays de bénéficier pleinement des fonctionnalités offertes par Vertex AI.

Un nouvel outil pour créer des agents : l’Agent Builder #

Google Cloud a lancé un outil innovant pour la création d’agents. Baptisé Vertex AI Agent Builder, cet outil basé sur l’IA générative est une combinaison de Vertex AI Search et du portefeuille de produits Conversation de la firme. Il propose une gamme d’outils pour construire plus rapidement des chatbots étayés par les LLM Gemini. L’offre no-code comprend les extensions, les fonctions et les connecteurs de données de Vertex AI.

Google a également ajouté Gemini à son offre de business intelligence, Looker. Cette combinaison offre à la plateforme des capacités d’analyse conversationnelle, de génération de rapports et de formules, LookML et d’assistance à la visualisation, ainsi que de génération automatisée de diapositives Google.