Hark présente Handoff, un agent qui exécute des tâches dans le navigateur

Après avoir levé 700 millions de dollars en mai, la startup Hark a annoncé aujourd’hui Handoff, un agent capable d’automatiser diverses tâches sur Internet. Selon ixbt.com, cette nouvelle technologie peut gérer efficacement des pages web et exécuter de manière autonome les commandes des utilisateurs, ce qui devrait intensifier la concurrence sur le marché de l’intelligence artificielle. TechCrunch.com rapporte .

Selon les représentants de Hark, l’agent Handoff peut naviguer sans difficulté sur des ressources web complexes comme Target, Walmart, OpenTable et LinkedIn, même lorsqu’elles ne disposent pas d’interfaces API officielles. Le logiciel analyse la structure des sites et les informations visuelles afin de déterminer lui-même quand cliquer sur un bouton ou où saisir des données.

Fonctionnalités et principe de fonctionnement

L’idée principale de cette solution ressemble à celle de nombreux agents de navigateur déjà disponibles. L’utilisateur donne une commande simple, puis le système exécute le reste du processus. Notamment :

• Commander un repas ou un café
• Réserver des billets de voyage
• Déposer une demande de retour de produits
• Acheter des articles essentiels du quotidien
• Réserver une table au restaurant
• Collecter des informations à partir de différentes sources

Dans une vidéo publiée par le directeur général de l’entreprise, Brett Adcock, l’assistant effectue une tâche consistant à composer un bouquet de fleurs spéciales selon la demande d’un utilisateur. Même des conditions imprécises, dépendant du choix du fleuriste, sont prises en compte. Toutefois, la vidéo ne montrant qu’une partie du processus, il est impossible d’évaluer pleinement son efficacité.

Approche technique et concurrence

Hark a indiqué utiliser, pour la version actuelle, un modèle ayant suivi un post-entraînement et prévoir de passer à une phase complète de pré-entraînement d’ici la fin de l’année. Cette approche permet d’améliorer plus rapidement le pipeline de données, l’infrastructure et les méthodes. Selon l’entreprise, contrairement aux grands modèles de langage traditionnels (LLM), qui prédisent le token suivant, son modèle peut anticiper les actions suivantes, comme les mouvements de la souris ou du clavier.

Google, OpenAI et Anthropic, ainsi que des startups financées par le capital-risque comme Browser Use, Polar, Strawberry et Aside, travaillent actuellement activement sur des agents capables d’exécuter des tâches sur ordinateur. Hark affirme que son agent Handoff fonctionne plus rapidement que ceux de ses concurrents et coûte moins cher que les autres modèles.

La startup a ouvert une liste d’attente pour sa plateforme et prévoit de la rendre accessible au grand public d’ici la fin de l’été.