Seriez-vous prêt à ce qu'une caméra soit pointée vers vous pour réduire la latence ?
Prospectif : Nvidia et AMD utilisent l'IA depuis un certain temps déjà pour réduire le décalage d'entrée. Un nouveau brevet de Sony utilise également l’intelligence artificielle pour réduire la latence, mais de manière très inhabituelle : la technologie est combinée à une caméra pour prédire à l’avance les pressions sur les boutons.
Le brevet en question, intitulé WO2025010132 – TIMED INPUT/ACTION RELEASE, a été repéré par Tech4Gamers. Il décrit l'utilisation de l'apprentissage automatique pour prédire les mouvements d'un joueur avant qu'il ne les termine, ce qui pourrait théoriquement réduire le décalage d'entrée.
Le modèle d’IA et un capteur externe tel qu’une caméra fonctionneraient en tandem. La caméra surveille les doigts des joueurs pour voir sur quel bouton vous êtes sur le point d'appuyer et l'IA utilise ces données pour apprendre les mouvements des joueurs. Essentiellement, il pourrait enregistrer une pression sur un bouton avant que le joueur n’appuie, ce qui devrait réduire la latence.
Le système pourrait également détecter les mouvements incomplets du contrôleur et déterminer l'action prévue du joueur, en la complétant en son nom.
« Il peut y avoir une latence entre l'action de saisie de l'utilisateur et le traitement et l'exécution ultérieurs de la commande par le système », écrit Sony. « Cela entraîne à son tour un retard dans l'exécution de la commande et des conséquences inattendues dans le jeu lui-même. »
Une alternative possible à la perspective légèrement effrayante d'avoir une caméra constamment pointée vers vos doigts est d'intégrer le capteur dans les boutons du contrôleur eux-mêmes, leur permettant potentiellement d'enregistrer lorsqu'un chiffre survole.
La majorité des brevets ne deviennent pas de véritables produits, il n'y a donc aucune garantie que celui-ci dépassera un jour le stade de la planification. Cependant, Sony a reçu de nombreux éloges pour les excellents contrôleurs DualSense de la PS5, il pourrait donc vouloir quelque chose d'aussi impressionnant dans la PlayStation 6. De plus, l'introduction de la PlayStation Spectral Super Resolution (PSSR) dans la PS5 Pro introduit une infime quantité de latence ( environ 2 ms), que Sony pourrait vouloir aborder dans ses futures consoles.
Nvidia a défendu la technologie de réduction de la latence avec sa technologie Reflex. La dernière version, Reflex 2, dévoilée au CES, utilise également l'IA prédictive pour réduire la latence – de 75 %, selon Nvidia.
Bien que Reflex 2 continue de synchroniser les tâches CPU et GPU, il introduit également une fonctionnalité appelée Frame Warp. Cela met à jour les images rendues en fonction des entrées de souris les plus récentes juste avant leur affichage. Lorsque le GPU restitue une image, le CPU calcule la position de la caméra de l'image suivante en utilisant les dernières données d'entrée. Frame Warp modifie ensuite l'image actuelle pour refléter cette position mise à jour, garantissant ainsi que les actions à l'écran correspondent plus étroitement aux entrées du joueur. Le processus implique une technique d'inpainting prédictive qui utilise les données de couleur et de profondeur des images précédentes pour combler les lacunes créées lors de la déformation de l'image.
Titre : Rohan
