SmolVLA란?
작지만 강력함
SmolVLA는 21억 개의 파라미터를 가진 최첨단 시각-언어-행동(VLA) 모델로, 실제 로보틱스 작업에서 뛰어난 성능을 발휘하도록 설계되었습니다.
고효율
소비자용 GPU에 최적화되어 NVIDIA RTX 3090과 같은 접근 가능한 하드웨어에서 실시간 작동을 가능하게 하는 인상적인 추론 속도를 달성합니다.
개방적이고 접근 가능함
Hugging Face에서 개발하고 오픈 소스로 공개한 SmolVLA는 로보틱스 연구의 민주화를 목표로 하며, 고급 VLA 기술을 모두가 이용할 수 있도록 합니다.
실행 모습 보기
실제 환경에서 다양한 작업을 수행하며 그 능력을 보여주는 SmolVLA를 시청하세요.
SmolVLA 개요
커뮤니티 DIY 로봇 비디오
🚀 SmolVLA 소개
SmolVLA는 Hugging Face가 개발한 4억 5천만 개의 파라미터만을 가진 획기적인 Vision-Language-Action(VLA) 모델입니다. 소비자급 하드웨어에서 비용 효율적인 배포를 위해 신중하게 설계되어 고급 로봇 기술을 더 많은 개발자와 애호가들이 이용할 수 있게 합니다.
오픈 커뮤니티 LeRobot 데이터셋으로 훈련된 SmolVLA는 대규모 독점 모델과 동등하거나 더 우수한 성능으로 오픈 소스 협업의 힘을 진정으로 구현합니다.
공식 연구 논문
기술적 세부 사항에 대한 심층적인 내용은 공식 연구 논문을 읽어보세요. 모델 아키텍처, 훈련 방법론, 성능 벤치마크에 대한 포괄적인 정보를 제공합니다.
🛠️ 빠른 시작 가이드
📋 모델 개요
SmolVLA는 저렴하고 효율적인 로봇공학을 위해 설계된 4억 5천만 파라미터 vision-language-action 모델입니다. 경쟁력 있는 성능을 유지하면서 소비자 하드웨어에서 실행되도록 최적화되어 있습니다.
1. 환경 설정
계속하기 전에 문서의 설치 가이드에 따라 환경을 적절히 설정해야 합니다.
git clone https://github.com/huggingface/lerobot.git
cd lerobot
pip install -e ".[smolvla]"2. 사전 훈련된 모델 로드
SmolVLA를 경험하는 가장 빠른 방법은 Hugging Face에서 사전 훈련된 모델을 직접 로드하는 것입니다.
from lerobot.common.policies.smolvla.modeling_smolvla import SmolVLAPolicy
policy = SmolVLAPolicy.from_pretrained("lerobot/smolvla_base")3. 사전 훈련된 모델 미세 조정
특정 사용 사례에 맞게 SmolVLA를 미세 조정할 수 있습니다. 자세한 내용은 문서를 참조하세요.
# 구성 파일 준비
config_path = "path/to/your/config.yaml"
# 훈련 시작
python lerobot/scripts/train.py \
--config-path $config_path \
--resume-from lerobot/smolvla_base4. 모델 평가
다양한 로봇 작업에서 모델을 테스트하세요.
python lerobot/scripts/eval.py \
--policy-path outputs/train/smolvla/checkpoints/last \
--env-name aloha_sim_insertion_human📊 추가 리소스
🤝 커뮤니티 미세 조정 모델
커뮤니티가 구축한 놀라운 애플리케이션을 발견하세요! 이러한 29개의 미세 조정 모델은 다양한 로봇 작업에서 SmolVLA의 다재다능함을 보여줍니다.
🧄 마늘 처리
hannanasko/smolvla_so_100_garlic
🚗 몬스터 트럭 픽업
GhostScientist/smolvla_please_pick_up_the_monster_truck
📝 화이트보드 & 자전거 라이트
danielkorth/smolvla-whiteboard-and-bike-light
📊 훈련 데이터셋 탐색기
SmolVLA는 고품질 Open-X-Embodiment (OXE) 데이터셋으로 훈련되었습니다. 훈련 데이터 탐색:
📦 데이터셋 통계
- 총 궤적: 1.4M+
- 로봇 플랫폼: 10+개의 다양한 구현
- 작업: 픽 앤 플레이스, 조작, 내비게이션
- 데이터 형식: LeRobot 호환
커뮤니티 쇼케이스
커뮤니티가 SmolVLA를 새롭고 흥미로운 애플리케이션에 어떻게 활용하고 적용하는지 확인해 보세요.
리소스
❓ 자주 묻는 질문
LeRobot 로봇 팔에서 SmolVLA를 사용할 때 자주 묻는 질문에 대한 답변입니다.