Das Konzept kann als Text-to-Code beschrieben werden oder wie Microsoft es nennt: User on the Loop. Durch ChatGPT kann ein User dadurch einen Roboter programmieren und damit einen generierten Ablauf auslösen. Ein Beispiel dafür ist: „Suche aus den farbigen Bausteinen die farblich passenden Bausteine heraus und erstelle das Microsoft-Logo“. Aus dem gelernten Wissen weiß ChatGPT, wie das Windows-Logo aussieht und greift dann nach den farblich passendem Material, um es passend anzuordnen (siehe Video).
Neue Möglichkeiten
Das eröffnet ganz neue Möglichkeiten für die Demokratisierung der Roboter und schafft ganz neue Anwendungsfälle für Roboter im B2C-Bereich (End-Consumer). Auch Home Assistent Systeme können davon profitieren, da sie Steuerung der Roboter per Spracheingabe erfolgt.
Eingabe versus Real World
Microsoft zeigt in diesem Video, wie ChatGPT die Übersetzung von der Eingabe zur Abbildung in der realen Welt funktioniert und wo ChatGPT aktuell noch limitiert ist.
Ready to start?
Das Paper von Microsoft zu ChatGPT ist eher experimenteller Natur. Es beschreibt einige Design-Prinzipien für ChatGPT in der Robotik. Bis ChatGPT in der Robotik den großen Durchbruch erlebt, wird es also noch eine Weile dauern (Stand: 02/2023). Link zum Paper.
]]>