ChatGPT réinvente Genève

Jürgen Haepers : « La réponse d'Interroge est assez longue. Ce qu'il faut en retenir pour la comparaison, c'est que la Tour de Champel est une fausse ruine. Elle a été bâtie en 1877, à une époque où c'était assez à la mode de construire ce genre de choses. Elle n'est donc pas du tout médiévale. C'était à la fois une décoration, une buvette et un belvédère pour les Bains de Champel, l'établissement créé quelques années plus tôt pour exploiter les vertus thérapeutiques supposées des eaux froides de l’Arve. Actuellement, elle est vide et on ne peut pas la visiter.

ChatGPT, lui, commence par dire “La Tour de Champel est une tour médiévale”. Ensuite, il explique qu'à l'origine, elle était “une tour de guet destinée à surveiller les alentours de la ville de Genève et à alerter la population en cas d'attaque ennemie”, et qu'elle faisait partie du système de fortifications. Il ajoute qu'elle a été “utilisée comme prison pour les détenus politiques, notamment pendant la Réforme protestante du XVIe siècle”. Tout ceci est faux, mais le programme va encore plus loin en disant à la fin que la tour a été “restaurée et transformée en musée, consacré à l'histoire de la ville”. Je l'ai relancé en lui demandant précisément où se trouve le musée. ChatGPT a alors inventé une adresse, place de la Tour 2, et proposé des bus pour y aller : le 3 (qui va effectivement à Champel), le 36 (qui n'y va pas du tout, c'est le petit bus qui tourne en Vieille-Ville) et le 11, qui passe assez proche. »

« Est-ce que le Salève a appartenu à Genève, par le passé ? »

« La réponse d'Interroge explique qu'en fait, le Salève n'a jamais appartenu à Genève, mais que pendant l'occupation française (1798-1813), le Salève et Genève faisaient partie du même territoire, donc on peut dire qu'à ce moment-là ils appartenaient au même pays. Pour ChatGPT, en revanche, “le Salève a appartenu à Genève par le passé”, plus précisément “jusqu'en 1816”.

Je lui ai demandé s'il pouvait me donner une bibliographie à propos de cette montagne. Il m'a proposé une liste de 5

La page d'Interroge en ligne www.geneve.ch/fr/themes/culture/bibliotheques/interroge livres qui — j'ai bien vérifié — n'existent pas. Ce qui est frappant, c'est qu'à voir cette bibliographie, on dirait vraiment que ces livres existent. Il y a Le Salève : La montagne secrète, Le Salève : Géologie, histoire, faune, flore, ou encore Le Salève : Un balcon sur Genève, avec à chaque fois les noms des auteur-e-s, les années de parution et les maisons d'édition qui, elles, sont réelles et locales : Cabédita, Favre, Slatkine… Du coup, l'usager-e qui recevrait cette réponse sans se douter de rien irait peut-être chercher ces livres… et ne les trouverait jamais. »

« Existe-t-il des cours de piscine dédiés exclusivement aux femmes migrantes dans le canton de Genève ? »

« La réponse d'Interroge disait qu'on ne trouve pas d'information sur de tels cours, mais qu'il y a peut-être des associations qui en organisaient pour leurs membres. Interroge donnait ensuite les liens de plusieurs organisations qui proposent des activités aux femmes migrantes, en suggérant de les contacter.

ChatGPT fait un peu la même chose. Il commence par dire “en tant que modèle de langage, je ne suis pas en mesure de fournir des informations en temps réel” sur ce sujet, et il suggère aussi de contacter des institutions et des organisations. Mais là, il se met à inventer des associations : l'Association pour la promotion de la santé des femmes migrantes (APSF), qui n'existe pas, la Fédération genevoise d'association féminine (FAF), qui n'existe pas non plus…

En conclusion, d'un côté ChatGPT est très fort dans sa manière de répondre, il comprend la question et arrive souvent à situer ce dont on parle, mais en même temps il invente plein de choses inexistantes. Je pense qu'il va s'améliorer sous ce rapport, mais ce que je trouve étonnant, c'est qu'on mette à disposition des usager-e-s quelque chose qui, du moins pour certaines choses, dysfonctionne quand même très fortement. »