· 톺아보기

이야기

샤오펑, 과거-현재-미래를 추론하는 자율주행AI 발표

iterator · · 수정

조회 2,598 · 공감 1 · 댓글 18

cc019e1c-3057-4c02-b384-7a97fb0c1524.png

중국의 전기차/로봇 기업 샤오펑에서 AI 기술의 새로운 진화를 발표하였는데 기존 발표했던 피지컬AI에 시간 알고리즘이 추가되면서 AI가 스스로 과거-현재-미래를 추론할 수 있게 되었다고 합니다.



bb5f5cff-68c6-4118-8a10-028cc3ae6a06.jpg

d4c34868-aaf5-47a4-92a1-9642737e297b.png

우선 infini-VLA라는 모델을 도입하면서 현재로부터 30초 이전의 상황까지 기억할 수 있게 되었습니다.

이것에 대한 기술적 설명도 있었는데 각 프레임별로 시각토큰과 문자토큰이 하나씩 누적되고 최종적으로는 100만개 이상의 토큰이 infini-VLA에 입력되어 실시간 주행 궤적을 예측하게 된다고 합니다.



cc88ad67-dbfb-448f-b4ab-266b4b18eb60.png

이에 따라 쌓이는 많은 토큰을 실시간으로 처리하기 위해 자기회귀 추론과 샤오펑이 자체 개발한 피지컬AI 월드 모델을 통해 전체 응답 속도를 300% 향상시켰다고 합니다.



ede6738b-3989-4e62-91d8-6867a9a538ec.png

099f6501-690f-4967-8a1e-cc9a75b0ea62.png

X-Foresight / Flow Matching 알고리즘을 통해 최대 6초 이후의 상황을 예측하여 효과적인 행동을 선택할 수 있게 되었다고 합니다.



260d33c3-fe2b-4302-9a6a-5ad1ec00b092.png

9665d60e-3c89-4b45-a1c8-4b7452781296.png

그리고 MoT 아키텍처라는 것도 발표하였는데 MoT는 트랜스포머들의 혼합(Mixture of Transformers)으로 트랜스포머 아키텍처의 한 형태인데 MoT는 전체 트랜스포머를 다양한 시나리오에 특화된 전문가로 만든다고 합니다.

이를 통해 단일 모델을 사용하여 시나리오 간 전환을 원활하게 할 수 있으며, 결과적으로 배포를 간소화할 수 있다고 합니다.

그 결과 샤오펑에서 개발하고 있는 자율주행 자동차와 휴머노이드 로봇은 하나의 모델로 구동된다고 합니다.


이번 샤오펑의 발표를 요약하면

시간 알고리즘: 과거-현재-미래를 통해 세상을 추론할 수 있습니다.

월드 모델: 2D-3D-4D를 통해 정적인 평면에서 역동적으로 변화하는 세계를 이해합니다. 

방법론: 모델-데이터-시뮬레이션을 통해 이론에서 엔지니어링 구현까지 나아갑니다. 

운반체: 차량-로봇, 단일 기반으로 완벽한 변환이 가능합니다. 

라고 할 수 있습니다.


참고로 이 기능들은 다음달에 출시되는 신형 차에 우선적으로 탑재되고 이후 다른 차량들에 순차적으로 업데이트가 진행된다고 합니다.

증류버전도 올해 내로 제공되고 2~3년전에 출시되었던 엔비디아 오린 프로세서가 탑재된 차량도 내년 상반기중 업데이트를 지원하겠다고 약속하였습니다.


이번 발표가 거의 학술회 같은 분위기로 꾸며져서 더 많은 내용이 있었으나 AI에 대한 이해가 부족하거니와 언어의 압박으로 주요 부분만 챙겨봤네요 -.-

AI에 대해 관심이 많거나 스터디를 하시는 분들은 이번 발표회 영상을 보시면 상당히 도움이 될만한 부분들이 많을거라 생각합니다.


테슬라의 FSD V14가 40초 이전 상황을 기억하고 주행에 참조하는걸로 알고 있는데 중국 업체가 진짜로 테슬라 턱밑까지 쫓아온게 느껴지네요.

댓글 18

  1. 힝힝이 ·
    쟈네들만 딴 세상 사는듯 ㅠ
  2. iterator ·
    @힝힝이님 국내 업체가 쓸만한 AI를 만들때쯤 되면 쟤들은 저 멀리 가있을 것 같습니다.
  3. 방송부서 ·
    현실적인 자율 주행의 가장 큰 걸림돌은 운전 책임이 차주에게 있나? 제조사에게 있나? 부분같습니다.
    제조사가 전적으로 책임 안 진다면 운전보조일뿐 자율주행은 제조사의 주장일뿐이라 여겨집니다.

    그리고 현행 철도마냥 철도 건널목 무단 횡단 천만원, 운행관련 장비 임의 조작 5백만원같이 엄격한 벌금으로 변수도 최소화 시켜야 될 것 같습니다.
  4. iterator ·
    @방송부서님 중국은 최근 법규 정비가 끝나서 자율주행차가 법규위반하면 전적으로 제조사 책임이라고 명시하였습니다.
    판도 깔아줬고 법규도 정비되었으니 자율주행차가 다닐 일만 남았죠.
  5. 세설 · · 공감 1
    @방송부서님
    이게 우리나라 사람들의 사고방식 같아요
    완벽하지도 못할거면서 완벽한 걸 만들어내지도 못할거면서 완벽할 때까지는 조금 미루자?

    요즘 제 생각이 그렇더라고요
  6. 방송부서 · · 공감 2
    @세설님
    누구나 공평하게 사람 목숨은 한개이니 오히려 신중하고 보수적으로 접근하는게 오히려 보편적인 생각이 아닐까? 생각이 듭니다.

    더구나 인간이 직접 운전하는 난이도가 비행기 이착륙 수준으로 매우 어려운 것도 아닌 일상적인 평범한 일 중 하나라 그런지 제가 볼때 기계에게 굳지 운전대를 전적으로 맡길려는 부분도 참으로 이상한 일 같습니다.
  7. 무임승차 ·
    @세설님
    책임자 잡아서 효수 시켜야 최소한의 분이 풀리니까 그렇지요.

    과학기술도 실패하면 돈 안줘서 말려버리는 사회이고.

    선진국이면 선진국일수록 사고에 대한 대처방안 요구사항이 높다보니 더더욱 지연될 수 있습니다.

    답답할 정도로 보수적으로 나오니..
  8. 리누 · · 공감 1
    @방송부서님

    보수적이려면 FSD v14 Lite보다 운전 못하는 사람들 면허를 발급해주면 안됐었죠.

    사람은 훨씬 운전능력이 떨어지고 도로에 위협이 되어도 방치하는데, 쓰고 싶은 사람들이 제조사가 아닌 내가 책임지면서라도 쓰고 싶다는 의견은 위험하다는 판단을 받는게 좀 이상해 보입니다.

    사실 더 불완전한 오토파일럿이나 HDA 같은건 잘만 쓰면서요
  9. 리누 ·
    샤오펑은 대놓고 테슬라 자율주행 전략을 따라가고 있죠. 그게 가능한 환경이니 그렇게 하는 것일테고, 저는 유망하게 봅니다. 중국을 벗어나서 잘 할 수 있느냐가 관건이겠네요.
  10. iterator ·
    @리누님 거기에 대한 발표도 있었는데 지금 중국에서 돌리고 있는 모델을 갖고 독일에서 돌려보니 큰 문제 없이 잘 돌아갔다고 합니다.
    물론 자잘한 법규의 차이는 별도로 학습시켜야 하겠지만 DCAS 준비가 다 되어 있다고 자신있게 말할 정도니 유럽에서 DCAS가 시행되면 샤오펑이 가장 먼저 서비스할 것 같습니다.
  11. Harugun ·
    @리누님 사오펑이 곧 유럽 수출 차량에 자율주행 적용한다고 하니 지켜보면 알수 있겠죠.
    개인적으로 가장 흥미있는 부분중 하나이기도 하네요.
  12. 리릿 ·
    @iterator님
    그게 생각보다 쉽진 않을겁니다.
    예를 들자면 한국의 FSD14.2는 미국보다 버전이 뒤쳐져있는 상태인데 언제 14.3올라갈지 모르고,
    한국에서 정말 삽질 많이 합니다.

    그 중에 치명적인게, 신호 처리에서 오류가 많습니다. 신호등을 제대로 못봐요.
    FSDV14를 작년 11월부터 쓸 수 있던걸로 아는데... 거의 1년 지난 지금도... 그렇죠.
    제일 흔한게 황색 점멸등을 적색 점멸로 착각해서 냅다 급정거해서 사고 유발 + 차가 출발안함;;;이고요.
    V14라이트는 더 심하죠. 어제만해도 좌회전 신호 끝나니 그냥 차가 출발해서 제가 개입해 멈춘적이 있네요. ㅋ

    자잘한.. 이게 너무 치명적인겁니다. 신호등 색상과 구조가 조금 달라서 구분을 잘못하는, 별거아닌 건데 그게 야기하는 결과는 너무나도 치명적이죠.
    너무 별거 아닌 것처럼 말씀하셔서요;;;
  13. iterator ·
    @리릿님 99%에서 100% 되는게 그렇게 어려워서 다들 AI로 그 난리들을 피우는데 다시 보니 별거 아닌것처럼 써놨네요 -.-
    샤오펑이 DCAS 서비스를 완벽하게 준비했으면 좋겠습니다.
  14. 영술 ·
    샤오펑은 기술개발이나 발표는 많이 하는것 같은데, 판매량은 또 아주많진 않아 대중의 관심은 덜한가? 싶기도 하고.. 잘 하고 있는건지 모르겠네요.
  15. iterator ·
    @영술님 스스로를 AI 기업이라고 칭할 정도로 자동차보다 AI 개발에 공을 더 들이더군요.
    매출만 봐도 최근 폭스바겐에 전기차/자율주행 기술을 라이센스 한게 꽤나 쏠쏠하다고 합니다.
    샤오펑 자체는 자율주행에서 테슬라와 동등, 그 이상의 성과를 보여야 판매량이 늘어나지 않을까 싶습니다.
  16. 라면라면 ·
    아직 적자의 늪을 벗어나지 못했지만 그레도 테슬라 다음 2등은 샤오펑으로 보입니다.
    국내 출시 중국차중 기대되는 회사중 한곳입니다. 나머지 한군덴는 샤오미.
  17. iterator ·
    @라면라면님 샤오미도 최근 1년 가까이 기존 차량의 자율주행 업데이트도 미뤄가면서 개발에 몰두한 결과 결국 E2E 자율주행을 완성했다고 합니다.
    진짜 샤오펑, 샤오미가 국내에 진출하자마자 자율주행을 쓸 수 있는 자동차가 될까 두려울 정도네요.
  18. 도기맨 ·
    올해 8월까지 테슬라를 따라잡겠다고 하더니 그것은 실패했나 보군요.
    그래도 발전 속도 보면 얼마 안 남은 것 같습니다

굴러간당 최근 글

굴러간당 목록 더 보기