Par Frédéric Alexandre , Inria On voit passer beaucoup d’avis sur ChatGPT, mais finalement, qu’en sait-on ? Juste que c’est un réseau de neurones artificiels avec des milliards de paramètres, capable de tenir une discussion de haut niveau, mais aussi de tomber dans des pièges grossiers tendus par des internautes facétieux. On nous parle beaucoup de lui mais on en sait finalement très peu sur son fonctionnement. Je vous propose donc de présenter les mécanismes principaux sur lesquels ChatGPT repose et de montrer ainsi que, si le résultat est parfois impressionnant, ses mécanismes élémentaires sont astucieux mais pas vraiment nouveaux. Pour ce faire, passons en revue les différents termes du sigle « ChatGPT ». T comme transformer Un « transformer » est un réseau de neurones qui bénéficie du même algorithme d’apprentissage que les réseaux profonds ( deep networks ), qui a déjà fait ses preuves pour l’entraînement de grosses architectures. Il bénéficie également de deux caractéristi
En débarquant sur le marché de la téléphonie mobile la semaine dernière, Free Mobile a fait l'effet d'un tremblement de terre. Et l'onde de choc n'est, semble-t-il, pas près de s'arrêter, tant du côté des consommateurs que de celui des opérateurs. Ces derniers avaient bien sûr anticipé l'arrivée du 4e opérateur - qu'ils avaient tenté de circonscrire en vain - en lançant des offres low cost de 10 à 20 % moins chères que leurs forfaits classiques et sans engagement : Sosh chez Orange, séries Red chez SFR et B and You chez Bouygues Telecom. Mais les deux forfaits de Free - 19,99 €pour du tout illimité et 2 € pour 1 heure d'appels et 60 SMS par mois - ont fait l'effet d'un coup de bambou. Depuis, les trois opérateurs historiques ont « ajusté » leurs tarifs… mais qui restent - à services équivalents - plus chers que Free. Les petits opérateurs mobiles virtuels (les MVNO qui louent le réseau d'un des trois grands) se sont alignés en proposant d