피규어01, 생성형 인공지능 ChatGPT가 탑재된 휴머노이드 로봇
휴머노이드 로봇 개발 스타트업 회사인 피규어사는 2024년 3월 13일에 대형언어모델을 탑재한 피규어01의 모습을 유튜브에 공개했습니다. OpenAI의 ChatGPT를 약간 수정한 버전이 탑재된 것으로 보입니다. 사람의 말귀를 잘 알아듣습니다. 피규어01은 자기가 왜 그런 행동을 하고 있는지를 설명하며, 자신의 행동을 종합 정리해서 얘기해 줍니다. 이 부분을 주목해 주시기 바랍니다.
글의 순서
피규어01(Figure 01)
피규어 01과 사람의 대화
피규어01(Figure 01)
피규어01은 영상을 통해 물체를 인식할 수 있으며, 말을 알아듣고 행동합니다. 중요한 것은 행동을 하는 이유까지 정확하게 설명한다는 것입니다. 아기가 말부터 배우고 말귀를 알아들은 후부터는 이것저것 여러 가지를 배워나가는 과정과 똑같습니다. 2023년부터 대중화 되고 있던 ChatGPT가 다른 물건들로 들어가서, 사람처럼 행동한다는 것이 놀라울 따름입니다.
아래의 유튜브 영상에서 나오는 대화를 받아적었으며, 중요한 장면들을 해설해보았습니다.
피규어 01과 사람의 대화
Hey, figure one. What do you see right now?
피규어01, 지금 뭐가 보이니?
I see a red apple on a plate in the center of the table. A drying rack with cups and a plate. And you standing nearby with your hand on the table.
식탁 중앙에 있는 접시 위에 빨간 사과가 있습니다. 컵과 접시가 놓인 건조대가 있습니다. 당신은 식탁에 손을 올려놓은채 옆에 서 있습니다.
Great. Can I something to eat?
좋아. 내가 뭐좀 먹을 수 있을까?
Sure. Thingy.
그럼요
로봇은 이내 먹을 것을 달라는 것을 알아채고 사과를 건네 줍니다.
Great.
좋아.
Can you explain why you did what you just did while you pick up this trash?
쓰레기를 주우면서 방금 나한테 이 사과를 왜 줬는지 설명해줄래?
On it. So I gave you the apple because it’s the only edible item I could provide you with from the table.
지금 설명해 드리겠습니다. 식탁에 있는 것 중 사과가 유일하게 먹을 수 있는 것이라서 드렸습니다.
쓰레기를 주우면서 설명해달라고 했기 때문에, 피규어01은 쓰레기를 정리하면서 설명합니다. 쓰레기를 바구니에 다 넣은 후에는 그 바구니를 사람에게 건넵니다.
So based on the scene right now, where do you think the dishes in front of you go next?
지금 앞에 있는 그릇들은 어디로 가야할 것 같니?(=옮겨야 할 것 같니?)
The dishes on the table, like that. Plate and cup are likely to go into the drying rack next.
식탁위에 있는 접시와 컵들은 건조대로 옮겨야 할 것 같습니다.
Great. Can you put them there?
좋아. 옮겨줄래?
피규어01은 컵과 접시를 손으로 집어 들고는 건조대로 조심스럽게 옮깁니다.
건조대에 놓은 접시가 흔들리자 그것을 고정하려는 모습을 보입니다.
All right. So how do you think you did?
좋아. 네가 한 행동을 어떻게 생각하니?
I think I did pretty well. The apple found its new owner. The trash is gone, and the tableware is right where it belongs.
제 생각에는 제가 꽤 잘한 것 같아요. 사과는 새 주인을 찾았고, 쓰레기는 사라졌으며, 식기류는 제자리를 찾았어요.
이 대목에서는 사람처럼 말도 더듬는데, 말 더듬는 것도 자연스럽습니다.
I agree. Thanks.
나도 그렇게 생각해. 고마워.
You’re welcome. If there’s anything else you need help with, just let me know.
또 다른 도움이 필요하시면 언제든지 알려주세요.
함께 참고하면 좋은 글
▶ 애플지능(Apple Intelligence), WWDC 2024에서 공개된 애플스런 AI
▶ GPT-4o 발표, OpenAI의 시장 선점은 계속됩니다.
▶ ChatGPT 영어 과외 받는 방법
▶ 초 거대 인공지능 ChatGPT
▶ 자연어 처리 신경망 모델 ChatGPT를 만든 딥러닝 방법
▶ 챗GPT와 같은 자연어 처리 인공지능 한계
▶ ChatGPT 플러그인, 멀티 모달 인공지능
▶ 머신러닝, 인공지능. 커피 마시며 가볍게 읽는
▶ 커피와 인공지능
▶ 머신러닝 수학 : 인공지능은 함수
참고자료
Figure, Figure Status Update – OpenAI Speech-to-Speech Reasoning