StepFun dévoile le StepX Neo, le premier smartphone « agentique » au monde doté d'un assistant IA fonctionnant hors ligne

L'entreprise chinoise d'intelligence artificielle (IA) StepFun a dévoilé lundi le StepX Neo, présenté comme le premier smartphone grand public doté de capacités d'IA « agentique ». Fondée en 2023 par d'anciens cadres de Microsoft, la société affirme que son premier produit matériel grand public intègre un agent d'IA capable d'accomplir des tâches complexes en plusieurs étapes à travers différentes applications, avec une intervention minimale de l'utilisateur. L'appareil est propulsé par le modèle de fondation propriétaire « Step Edge » et fonctionne sous « Step AOS », le système d'exploitation personnalisé de l'entreprise. StepFun indique que le StepX Neo prend en charge la traduction en temps réel dans 32 langues tout en s'intégrant à plusieurs services tiers populaires.

L'expérience d'IA agentique sur le StepX Neo
L'un des points forts du StepX Neo de StepFun est son assistant IA propriétaire, baptisé Step Amoo (selon Wall Street China). Contrairement à un chatbot autonome classique, cet assistant est, selon l'entreprise, intégré directement au système d'exploitation. Il est conçu pour exécuter des flux de travail impliquant diverses applications, fonctions système et services web, le tout à partir de quelques commandes simples en langage naturel.

À titre d'exemple, l'entreprise a indiqué que les utilisateurs peuvent demander au téléphone d'organiser un voyage complet ; l'agent d'IA est alors capable de rechercher des vols, de recommander des hébergements, d'effectuer des réservations, de gérer les détails du voyage et d'enregistrer l'itinéraire, le tout sans que l'utilisateur ait besoin de basculer manuellement d'une application à l'autre. Le système est également censé être capable de comprendre les préférences de l'utilisateur au fil du temps.

Pour les voyageurs fréquents, le StepX Neo intègre des fonctionnalités d'IA, notamment la traduction de conversations en temps réel. StepFun affirme que l'appareil peut traduire des conversations en direct, des appels téléphoniques, des messages texte et du texte capturé via le viseur de l'appareil photo, le tout dans 32 langues et dialectes régionaux pris en charge.

De plus, il permet de consulter les horaires des transports locaux, de recommander des attractions à proximité, d'accéder à des itinéraires enregistrés hors ligne, de rappeler aux utilisateurs l'enregistrement des vols, d'indiquer les exigences en matière de visa et même d'aider à la préparation des documents de douane.

L'ensemble repose sur Step AOS. Il s'agit d'un système d'exploitation « agentique » conçu sur mesure ; loin de se contenter d'ajouter une couche d'IA à Android, il intègre des portions de la pile logicielle entièrement reconstruites à partir de composants Android, Linux et RTOS. Ce système d'exploitation s'appuie sur ce que l'entreprise appelle un « moteur de capacités atomiques ». Il est conçu pour simplifier les fonctions de l'appareil — communication, applications, fichiers et outils système — en utilisant la norme MCP (Model Context Protocol). Selon StepFun, cela permet à l'agent d'IA de combiner plusieurs fonctions pour accomplir une tâche de manière autonome.

La pile logicielle intègre également une interface utilisateur naturelle (NUI) qui combine les entrées vocales et visuelles tout en apprenant le comportement de l'utilisateur au fil du temps. Le traitement par IA s'effectue directement sur l'appareil, en s'appuyant sur un modèle de base propriétaire présenté comme étant spécifiquement optimisé pour les smartphones. L'entreprise affirme que ce modèle surpasse les modèles d'IA en périphérie (edge ​​AI) concurrents dans 29 tests de référence ; elle n'a toutefois pas encore dévoilé quels tests ont été utilisés pour mesurer ces performances.

StepFun a noué des partenariats avec plusieurs grandes plateformes chinoises telles que Ctrip, Alipay, Didi, Meituan, WPS Office et CapCut, ce qui permettrait à l'agent d'IA d'accomplir davantage de fonctions au-delà du téléphone lui-même.