Parmi les annonces au Google Search On, il faut noter deux applications prochaines de MUM. La première concerne la recherche dans les vidéos. La seconde la recherche visuelle.
MUM est un modèle de langage préentrainé, de la même famille que BERT ou GPT-3. Quand Google l’a présenté, il a insisté sur son caractère multimodal. C’est à dire que le modèle numérique obtenu concerne aussi bien le texte qu’on trouve dans les pages web que le contenu de type images ou video.
Pour en savoir plus sur MUM, vous pouvez lire notre article sur le sujet :
Une première application dans les videos en anglais d’ici quelques semaines
Google a déclaré qu’ils peuvent maintenant mieux comprendre le contenu des vidéos grâce à MUM.
Pour le moment, la première application consiste à identifier les différents sujets évoqués dans une vidéo, même s’ils ne sont pas clairement mentionnés. Et Google annonce que dans quelques semaines, ils vont lancer une fonctionnalité présentant des videos sur des thématiques proches (related topics) basés sur la compréhension du contenu (aussi bien les images que le son).
Cette fonctionnalité devrait d’abord enrichir Youtube pour ensuite apparaître sur les SERPs également.
Google LENS va aussi embarquer des applications de MUM
Google a annoncé avoir ajouté une série d’améliorations à Google Lens tirée du modèle MUM.
Si vous voyez un motif qui vous plait sur une chemise et que vous utilisez son image dans une recherche visuelle de Google Lens, vous pouvez dorénavant ajouter du texte à vos recherches et répondre à des questions sur ce que vous voyez. Si vous souhaitez plutôt acheter des chaussettes avec ce motif, alors la nouvelle expérience avec Lens enrichie par MUM vous permettra de faire exactement cela.
C’est assez bluffant !
Rappelons ici que Google Lens fera son apparition sur Chrome dans peu de temps, ainsi que l’application iOS Google Search.
https://www.seroundtable.com/google-search-on-announcements-32169.html