Andrej Karpathy, ehemaliger KI-Experte bei Tesla, programmiert GPT von Anfang bis Ende in dem Youtube Video. Programmiersprache ist Python.
(KI Anmerkung: In dem ursprünglichen Paper von 2017 wurde die Transformer-Architektur vorgestellt, die das Verständnis für komplexe Aufgaben und das Erstellen von Texten revolutioniert hat. Seitdem wurde GPT-3 entwickelt, ein Nachfolger der Transformer-Architektur, der das Verfassen von Text auf ein völlig neues Level gehoben hat. GPT-3 kann Textsequenzen vervollständigen und hat die Fähigkeit, auf natürliche Weise zu schreiben, was es zu einem sehr mächtigen Tool macht. GPT-3 kann auch in vielen anderen Anwendungsbereichen eingesetzt werden, wie z.B. beim Erstellen von Code oder bei der Lösung komplexer Probleme.)