Profile
| 항목 | 내용 |
|---|---|
| 현직 | Generalist AI 공동창업자 & CEO |
| 이전 | Google DeepMind Senior Research Scientist |
| PhD | MIT (Computer Science) |
| 지도교수 | Russ Tedrake |
핵심 기여
- Dense Object Nets: 물체의 dense visual descriptors 학습 (CoRL 2018 Best Paper)
- PaLM-E: Embodied Multimodal Language Model 공동 저자
- RT-2: Vision-Language-Action Models 공동 저자
- Generalist AI 창업: 범용 로봇 지능 개발 스타트업 설립 (2024)
Research Timeline
MIT PhD (2019 졸업)
Russ Tedrake 지도
| Year | Work | Impact |
|---|---|---|
| 2018 | Dense Object Nets | CoRL 2018 Best Paper Award |
| 2019 | PhD 논문: “Dense Visual Learning for Robot Manipulation” | MIT 졸업 |
Google DeepMind (2019-2024)
Senior Research Scientist
| Year | Work | Impact |
|---|---|---|
| 2020 | Self-Supervised Correspondence | IEEE RA-L Best Paper Award |
| 2023 | PaLM-E | Embodied Multimodal Language Model |
| 2023 | RT-2 | Vision-Language-Action Models |
| 2023 | Socratic Models | ICLR 2023 |
Generalist AI (2024-present)
공동창업자 & CEO
| Year | Work | Impact |
|---|---|---|
| 2024 | Generalist AI 공동창업 | Andy Zeng, Andrew Barry와 함께 설립 |
| 2025 | NVentures 투자 유치 | Nvidia 지원 |
Major Publications
Dense Descriptors
- Dense Object Nets (CoRL 2018) - Best Paper Award
- Self-Supervised Correspondence in Visuomotor Policy Learning (IEEE RA-L 2020) - Best Paper Award
Large Language Models + Robotics
- PaLM-E: An Embodied Multimodal Language Model (2023)
- RT-2: Vision-Language-Action Models (2023)
- Socratic Models: Composing Zero-Shot Multimodal Reasoning with Language (ICLR 2023)
- Code as Policies: Language Model Programs for Embodied Control
Other Notable Works
- DeepSDF (CVPR 2019 Best Paper Finalist)
- Scaling Up and Distilling Down: Language-Guided Robot Skill Acquisition
Key Ideas
Dense Object Nets (2018)
핵심: 물체의 모든 픽셀에 대해 일관된 descriptor 학습
특징:
- 시점 변화에 불변
- 물체 인스턴스 간 대응
- Self-supervised 학습
응용:
- 로봇 grasping
- 물체 재배치
- 조작 태스크영향:
- CoRL 2018 Best Paper Award 수상
- 로봇 시각 표현 학습의 핵심 연구
- Dense correspondence의 로봇 적용 선구
Awards
- CoRL 2018 Best Paper Award - Dense Object Nets
- IEEE RA-L 2020 Best Paper Award - Self-Supervised Correspondence
- CVPR 2019 Best Paper Finalist - DeepSDF
Generalist AI
2024년 Google DeepMind를 떠나 Andy Zeng, Andrew Barry와 함께 Generalist AI를 공동 창업했다.
공동창업자
- Pete Florence (CEO) - Google DeepMind 출신
- Andy Zeng (Chief Scientist) - Google DeepMind 출신
- Andrew Barry (CTO) - Boston Dynamics 출신
미션
범용 로봇(General-Purpose Robots) 실현을 목표로 한다. 데이터, 모델, 하드웨어의 교차점에서 새로운 접근을 시도한다.