Google heeft een grote uitbreiding aangekondigd van zijn Project Mariner AI-systeem, waarmee de computerbesturingsmogelijkheden via de Gemini API en Vertex AI beschikbaar worden voor ontwikkelaars.
Project Mariner, dat eind 2024 voor het eerst werd onthuld, is Google's ambitieuze poging om de interactie tussen gebruikers en digitale interfaces te transformeren met behulp van AI-agenten. Het systeem kan informatie op een computerscherm begrijpen en interpreteren, waaronder tekst, afbeeldingen, code en webformulieren, en vervolgens zelfstandig websites navigeren en complexe taken uitvoeren.
De nieuwste versie van Project Mariner is aanzienlijk verbeterd en draait nu op virtuele machines in de cloud, vergelijkbaar met agenten van OpenAI en Amazon. Dankzij deze cloudgebaseerde aanpak kunnen gebruikers aan andere projecten werken terwijl Project Mariner op de achtergrond taken uitvoert, tot wel tien verschillende operaties tegelijk—een forse verbetering ten opzichte van de eerdere versie die in de browser draaide.
Verschillende bedrijven verkennen de mogelijkheden van Project Mariner al, waaronder automatiseringsspecialisten Automation Anywhere en UiPath, evenals Browserbase, Autotab, The Interaction Company en Cartwheel. Deze vroege gebruikers benutten de technologie om complexe, webgebaseerde workflows te automatiseren die voorheen veel menselijke tussenkomst vereisten.
Google heeft bovendien geavanceerde beveiligingsmaatregelen geïmplementeerd om te beschermen tegen bedreigingen zoals indirecte prompt-injecties, waarbij kwaadaardige instructies kunnen worden verborgen in data die door AI-modellen wordt opgehaald. Volgens Google hebben deze beveiligingsverbeteringen de beschermingsgraad van Gemini tijdens het gebruik van tools aanzienlijk verhoogd, waardoor Gemini 2.5 de veiligste modelreeks van het bedrijf tot nu toe is.
Een bredere toegang voor ontwikkelaars tot de mogelijkheden van Project Mariner staat gepland voor deze zomer, wat mogelijk een revolutie teweegbrengt in de manier waarop ontwikkelaars AI-toepassingen bouwen die computerinterfaces kunnen besturen en ermee kunnen interageren. De technologie wordt ook geïntegreerd in de AI-modus van Google Zoeken, waar het aanvankelijk taken zal uitvoeren zoals het kopen van tickets voor evenementen, het reserveren van restaurants en het plannen van lokale afspraken.