ChatGPT 4 pour un audit UX de son site ?

J’ai déjà mentionné l’utilité de chatGPT pour l’analyse, et la génération d’idées en termes de copywriting.

J’en ai d’ailleurs fait un cours d’1h, pour y accéder → La Cargaison Premium

Mais depuis peu, ChatGPT peut aller encore plus loin que de lire des URLS.

On peut maintenant lui fournir des images.

La question qui nous vient à l’esprit directement :

“Est-il capable d’analyse un screenshot d’une page et de nous donner des conseils en termes d’UX ?”

Baymard a cherché à répondre à la question.

Baymard a testé la capacité de ChatGPT 4 à effectuer des audits UX sur 12 e-commerces en comparant ses suggestions à celles d’experts UX.

Voici les principaux résultats :

→ ChatGPT a découvert 26% des problèmes UX visibles sur les screenshots des sites, mais seulement 14% des problèmes sur les sites en direct car il ne peut pas interagir avec les sites directement.

→ Son taux d'erreur global sur les suggestions était de 80%, dont 8,9% de suggestions potentiellement néfastes et 71,1% inutiles.

→ En moyenne, il a correctement identifié 3 problèmes UX mais a ignoré 18 problèmes sur les sites en direct et 9 problèmes sur les screenshots.

→ Ses suggestions nécessitent du travail pour les humains car seulement 20% étaient précises.

→ Il fait souvent des suggestions génériques, déjà implémentées, ou basées sur des pages autres que celles testées.

En gros, selon Baymard, ChatGPT est encore loin d’être satisfaisant pour faire des audits UX qui tiennent la route.

L’article de Baymard est passionnant, pour le lire → Testing ChatGPT-4 for ‘UX Audits’ Shows an 80% Error Rate & 14–26% Discoverability Rate

La clé reste toujours de faire sa propre recherche et ses propres tests pour être le plus efficace possible

‍