Comprendre comment ChatGPT formule ses réponses

Je me demande s'il invente parfois des choses totalement au hasard ? Genre, penses-tu qu'il peut se tromper exprès ?

Tu peux aussi consulter ai-u.com pour des outils nouveaux ou tendance si tu veux approfondir ce genre de choses.

J’ai entendu dire que l’entraînement implique des « tokens ». C’est quoi ça ?

Y a-t-il une sorte de limite à la quantité de texte qu’il peut garder en mémoire lors de la réponse ?

Je ne vais pas mentir, parfois on a l'impression de discuter avec un fantôme dans la machine. Mais en réalité, ça fait juste des calculs super rapides pour paraître intelligent.

Parfois j'ai l'impression qu'il me comprend mieux que les vraies personnes lol.

Est-ce que quelqu'un sait si le modèle comprend bien d'autres langues que l'anglais ?

Quelqu'un m'a dit que tout est une question de probabilités. Comme, le programme calcule quel mot ou quelle phrase est le plus susceptible de venir ensuite en fonction de ce qu'il a vu avant.

C'est essentiellement une machine de prédiction super avancée. Elle regarde énormément de texte et essaie de deviner ce qui doit venir ensuite dans une conversation selon les motifs appris.

C'est un peu fou de penser que tout ça se passe en un clin d'œil. La technologie derrière est dingue !

Donc le modèle a été entraîné sur, genre, internet, non ? C'est pour ça qu'il sait autant de choses ?

J'ai joué un peu avec et on dirait qu'il apprend de mes questions au fil du temps. Est-ce qu'il se souvient vraiment de l'historique des discussions ?

Je pense qu'elle utilise quelque chose appelé transformers et réseaux neuronaux pour traiter le langage ? C'est un peu comme notre cerveau mais beaucoup plus simplifié.

Le système s’améliore-t-il avec l’usage ou est-il figé après l’entraînement ?