{"id":8792,"date":"2023-03-11T11:17:31","date_gmt":"2023-03-11T11:17:31","guid":{"rendered":"https:\/\/www.maschinenethik.net\/?p=8792"},"modified":"2023-03-11T13:15:33","modified_gmt":"2023-03-11T13:15:33","slug":"chatgpt-fuer-die-robotik","status":"publish","type":"post","link":"https:\/\/www.maschinenethik.net\/?p=8792","title":{"rendered":"Sprachmodelle f\u00fcr Roboterarme"},"content":{"rendered":"<p>Forscher von Google und der TU Berlin haben am 6. M\u00e4rz 2023 ein verk\u00f6rpertes, multimodales Sprachmodell mit dem Namen PaLM-E vorgestellt, das virtuelle und physische Welt verbindet. So kann man per Spracheingabe einen Haushaltsroboter steuern und ihn dazu bringen, bestimmte Gegenst\u00e4nde zu holen oder andere T\u00e4tigkeiten zu verrichten. Der Prompt kann dabei vom Benutzer spontan aus seiner eigenen Beobachtung der Umwelt abgeleitet werden. Die Idee der PaLM-E-Architektur besteht laut <a href=\"https:\/\/palm-e.github.io\/\" target=\"_blank\" rel=\"noopener\">Projektwebsite<\/a> darin, kontinuierliche, verk\u00f6rperte Beobachtungen wie Bilder, Zustandseinsch\u00e4tzungen oder andere Sensormodalit\u00e4ten in den Spracheinbettungsraum eines vortrainierten Sprachmodells zu integrieren. Im Beispielvideo lautet die Instruktion in deutscher \u00dcbersetzung: &#8222;Bring mir die Reischips aus der Schublade&#8220;. Golem schreibt in einem <a href=\"https:\/\/www.golem.de\/news\/palm-e-google-stellt-seine-kuenstliche-intelligenz-vor-2303-172540.html\" target=\"_blank\" rel=\"noopener\">Artikel<\/a>: &#8222;Dazu analysiert Palm-E die Daten der Roboterkamera, ohne dass eine vorverarbeitete Szenendarstellung erforderlich ist. Damit entf\u00e4llt die Notwendigkeit, dass ein Mensch die Daten vorverarbeitet oder kommentiert, was eine autonomere Robotersteuerung erm\u00f6glicht.&#8220; (Golem, 10. M\u00e4rz 2023) Im Video f\u00e4hrt der Roboter &#8211; ein Roboterarm auf einer mobilen Plattform, ganz \u00e4hnlich wie <a href=\"https:\/\/arxiv.org\/abs\/2004.04374\" target=\"_blank\" rel=\"noopener\">Lio<\/a> &#8211; zur Schublade und entnimmt ihr die Packung. In dem <a href=\"https:\/\/www.microsoft.com\/en-us\/research\/uploads\/prod\/2023\/02\/ChatGPT___Robotics.pdf\" target=\"_blank\" rel=\"noopener\">Paper<\/a> &#8222;ChatGPT for Robotics: Design Principles and Model Abilities&#8220; von Microsoft-Forschern wird eine \u00e4hnliche Strategie verfolgt, wobei ChatGPT verwendet wird, das wiederum auf GPT-3 basiert. Das Paper zu PaLM-E kann <a href=\"https:\/\/palm-e.github.io\/assets\/palm-e.pdf\" target=\"_blank\" rel=\"noopener\">hier<\/a> heruntergeladen werden.<\/p>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"alignnone size-full wp-image-8800\" src=\"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png\" alt=\"\" width=\"788\" height=\"853\" srcset=\"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png 788w, https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm-277x300.png 277w, https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm-768x831.png 768w\" sizes=\"auto, (max-width: 767px) 89vw, (max-width: 1000px) 54vw, (max-width: 1071px) 543px, 580px\" \/><\/p>\n<p>Abb.: \u00dcber Sprachmodelle kann man Roboterarme steuern<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Forscher von Google und der TU Berlin haben am 6. M\u00e4rz 2023 ein verk\u00f6rpertes, multimodales Sprachmodell mit dem Namen PaLM-E vorgestellt, das virtuelle und physische Welt verbindet. So kann man per Spracheingabe einen Haushaltsroboter steuern und ihn dazu bringen, bestimmte Gegenst\u00e4nde zu holen oder andere T\u00e4tigkeiten zu verrichten. Der Prompt kann dabei vom Benutzer spontan &hellip; <\/p>\n<p class=\"link-more\"><a href=\"https:\/\/www.maschinenethik.net\/?p=8792\" class=\"more-link\"><span class=\"screen-reader-text\">\u201eSprachmodelle f\u00fcr Roboterarme\u201c <\/span>weiterlesen<\/a><\/p>\n","protected":false},"author":3,"featured_media":0,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[886,1154],"tags":[1394,190,1423,1422,22,1421],"class_list":["post-8792","post","type-post","status-publish","format-standard","hentry","category-kuenstliche-intelligenz","category-robotik","tag-chatgpt","tag-google","tag-palm-e","tag-palm-e-architektur","tag-robotik","tag-tu-berlin"],"yoast_head":"<!-- This site is optimized with the Yoast SEO plugin v27.8 - https:\/\/yoast.com\/product\/yoast-seo-wordpress\/ -->\n<title>Sprachmodelle f\u00fcr Roboterarme - maschinenethik.net<\/title>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/www.maschinenethik.net\/?p=8792\" \/>\n<meta property=\"og:locale\" content=\"de_DE\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Sprachmodelle f\u00fcr Roboterarme - maschinenethik.net\" \/>\n<meta property=\"og:description\" content=\"Forscher von Google und der TU Berlin haben am 6. M\u00e4rz 2023 ein verk\u00f6rpertes, multimodales Sprachmodell mit dem Namen PaLM-E vorgestellt, das virtuelle und physische Welt verbindet. So kann man per Spracheingabe einen Haushaltsroboter steuern und ihn dazu bringen, bestimmte Gegenst\u00e4nde zu holen oder andere T\u00e4tigkeiten zu verrichten. Der Prompt kann dabei vom Benutzer spontan &hellip; \u201eSprachmodelle f\u00fcr Roboterarme\u201c weiterlesen\" \/>\n<meta property=\"og:url\" content=\"https:\/\/www.maschinenethik.net\/?p=8792\" \/>\n<meta property=\"og:site_name\" content=\"maschinenethik.net\" \/>\n<meta property=\"article:published_time\" content=\"2023-03-11T11:17:31+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2023-03-11T13:15:33+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png\" \/>\n<meta name=\"author\" content=\"bendelo\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:label1\" content=\"Verfasst von\" \/>\n\t<meta name=\"twitter:data1\" content=\"bendelo\" \/>\n\t<meta name=\"twitter:label2\" content=\"Gesch\u00e4tzte Lesezeit\" \/>\n\t<meta name=\"twitter:data2\" content=\"1\u00a0Minute\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\\\/\\\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#article\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792\"},\"author\":{\"name\":\"bendelo\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/#\\\/schema\\\/person\\\/8bb3eb6ac670c6232634a22d062cae95\"},\"headline\":\"Sprachmodelle f\u00fcr Roboterarme\",\"datePublished\":\"2023-03-11T11:17:31+00:00\",\"dateModified\":\"2023-03-11T13:15:33+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792\"},\"wordCount\":220,\"image\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#primaryimage\"},\"thumbnailUrl\":\"https:\\\/\\\/www.maschinenethik.net\\\/wp-content\\\/uploads\\\/2023\\\/03\\\/Robot_Arm.png\",\"keywords\":[\"ChatGPT\",\"Google\",\"PaLM-E\",\"PaLM-E-Architektur\",\"Robotik\",\"TU Berlin\"],\"articleSection\":[\"K\u00fcnstliche Intelligenz\",\"Robotik\"],\"inLanguage\":\"de\"},{\"@type\":\"WebPage\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792\",\"url\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792\",\"name\":\"Sprachmodelle f\u00fcr Roboterarme - maschinenethik.net\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#primaryimage\"},\"image\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#primaryimage\"},\"thumbnailUrl\":\"https:\\\/\\\/www.maschinenethik.net\\\/wp-content\\\/uploads\\\/2023\\\/03\\\/Robot_Arm.png\",\"datePublished\":\"2023-03-11T11:17:31+00:00\",\"dateModified\":\"2023-03-11T13:15:33+00:00\",\"author\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/#\\\/schema\\\/person\\\/8bb3eb6ac670c6232634a22d062cae95\"},\"breadcrumb\":{\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#breadcrumb\"},\"inLanguage\":\"de\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"de\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#primaryimage\",\"url\":\"https:\\\/\\\/www.maschinenethik.net\\\/wp-content\\\/uploads\\\/2023\\\/03\\\/Robot_Arm.png\",\"contentUrl\":\"https:\\\/\\\/www.maschinenethik.net\\\/wp-content\\\/uploads\\\/2023\\\/03\\\/Robot_Arm.png\",\"width\":788,\"height\":853},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/?p=8792#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Startseite\",\"item\":\"https:\\\/\\\/www.maschinenethik.net\\\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Sprachmodelle f\u00fcr Roboterarme\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/#website\",\"url\":\"https:\\\/\\\/www.maschinenethik.net\\\/\",\"name\":\"maschinenethik.net\",\"description\":\"VON OLIVER BENDEL\",\"alternateName\":\"Maschinenethik\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\\\/\\\/www.maschinenethik.net\\\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"de\"},{\"@type\":\"Person\",\"@id\":\"https:\\\/\\\/www.maschinenethik.net\\\/#\\\/schema\\\/person\\\/8bb3eb6ac670c6232634a22d062cae95\",\"name\":\"bendelo\",\"url\":\"https:\\\/\\\/www.maschinenethik.net\\\/?author=3\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Sprachmodelle f\u00fcr Roboterarme - maschinenethik.net","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/www.maschinenethik.net\/?p=8792","og_locale":"de_DE","og_type":"article","og_title":"Sprachmodelle f\u00fcr Roboterarme - maschinenethik.net","og_description":"Forscher von Google und der TU Berlin haben am 6. M\u00e4rz 2023 ein verk\u00f6rpertes, multimodales Sprachmodell mit dem Namen PaLM-E vorgestellt, das virtuelle und physische Welt verbindet. So kann man per Spracheingabe einen Haushaltsroboter steuern und ihn dazu bringen, bestimmte Gegenst\u00e4nde zu holen oder andere T\u00e4tigkeiten zu verrichten. Der Prompt kann dabei vom Benutzer spontan &hellip; \u201eSprachmodelle f\u00fcr Roboterarme\u201c weiterlesen","og_url":"https:\/\/www.maschinenethik.net\/?p=8792","og_site_name":"maschinenethik.net","article_published_time":"2023-03-11T11:17:31+00:00","article_modified_time":"2023-03-11T13:15:33+00:00","og_image":[{"url":"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png","type":"","width":"","height":""}],"author":"bendelo","twitter_card":"summary_large_image","twitter_misc":{"Verfasst von":"bendelo","Gesch\u00e4tzte Lesezeit":"1\u00a0Minute"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/www.maschinenethik.net\/?p=8792#article","isPartOf":{"@id":"https:\/\/www.maschinenethik.net\/?p=8792"},"author":{"name":"bendelo","@id":"https:\/\/www.maschinenethik.net\/#\/schema\/person\/8bb3eb6ac670c6232634a22d062cae95"},"headline":"Sprachmodelle f\u00fcr Roboterarme","datePublished":"2023-03-11T11:17:31+00:00","dateModified":"2023-03-11T13:15:33+00:00","mainEntityOfPage":{"@id":"https:\/\/www.maschinenethik.net\/?p=8792"},"wordCount":220,"image":{"@id":"https:\/\/www.maschinenethik.net\/?p=8792#primaryimage"},"thumbnailUrl":"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png","keywords":["ChatGPT","Google","PaLM-E","PaLM-E-Architektur","Robotik","TU Berlin"],"articleSection":["K\u00fcnstliche Intelligenz","Robotik"],"inLanguage":"de"},{"@type":"WebPage","@id":"https:\/\/www.maschinenethik.net\/?p=8792","url":"https:\/\/www.maschinenethik.net\/?p=8792","name":"Sprachmodelle f\u00fcr Roboterarme - maschinenethik.net","isPartOf":{"@id":"https:\/\/www.maschinenethik.net\/#website"},"primaryImageOfPage":{"@id":"https:\/\/www.maschinenethik.net\/?p=8792#primaryimage"},"image":{"@id":"https:\/\/www.maschinenethik.net\/?p=8792#primaryimage"},"thumbnailUrl":"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png","datePublished":"2023-03-11T11:17:31+00:00","dateModified":"2023-03-11T13:15:33+00:00","author":{"@id":"https:\/\/www.maschinenethik.net\/#\/schema\/person\/8bb3eb6ac670c6232634a22d062cae95"},"breadcrumb":{"@id":"https:\/\/www.maschinenethik.net\/?p=8792#breadcrumb"},"inLanguage":"de","potentialAction":[{"@type":"ReadAction","target":["https:\/\/www.maschinenethik.net\/?p=8792"]}]},{"@type":"ImageObject","inLanguage":"de","@id":"https:\/\/www.maschinenethik.net\/?p=8792#primaryimage","url":"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png","contentUrl":"https:\/\/www.maschinenethik.net\/wp-content\/uploads\/2023\/03\/Robot_Arm.png","width":788,"height":853},{"@type":"BreadcrumbList","@id":"https:\/\/www.maschinenethik.net\/?p=8792#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Startseite","item":"https:\/\/www.maschinenethik.net\/"},{"@type":"ListItem","position":2,"name":"Sprachmodelle f\u00fcr Roboterarme"}]},{"@type":"WebSite","@id":"https:\/\/www.maschinenethik.net\/#website","url":"https:\/\/www.maschinenethik.net\/","name":"maschinenethik.net","description":"VON OLIVER BENDEL","alternateName":"Maschinenethik","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/www.maschinenethik.net\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"de"},{"@type":"Person","@id":"https:\/\/www.maschinenethik.net\/#\/schema\/person\/8bb3eb6ac670c6232634a22d062cae95","name":"bendelo","url":"https:\/\/www.maschinenethik.net\/?author=3"}]}},"_links":{"self":[{"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=\/wp\/v2\/posts\/8792","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=\/wp\/v2\/users\/3"}],"replies":[{"embeddable":true,"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=8792"}],"version-history":[{"count":7,"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=\/wp\/v2\/posts\/8792\/revisions"}],"predecessor-version":[{"id":8803,"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=\/wp\/v2\/posts\/8792\/revisions\/8803"}],"wp:attachment":[{"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=8792"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=8792"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.maschinenethik.net\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=8792"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}