토요타가 운전자와 마치 사람처럼 대화하면서 운전을 도와주는 AI 자동차 시스템을 개발했다. 이 시스템은 운전자가 "지금 속도가 적당해?" 하고 물으면 주변 상황을 보고 "비가 오니까 조금 더 천천히 가는 게 좋겠어요"라고 대답해준다. 기존 자동차가 미리 정해진 규칙대로만 작동했다면, 이번에 만든 시스템은 실제 상황을 보고 판단해서 운전자에게 맞춤 조언을 해준다.

사람처럼 보고 듣고 말하는 자동차 AI의 비밀

이 시스템의 이름은 'SC-ADAS'로, 마치 사람의 뇌처럼 4개 부분으로 나뉘어 일한다. 첫 번째는 운전자가 하는 말을 알아듣는 부분이다. "속도 줄여줘"라고 말하면 이를 정확히 이해한다. 두 번째는 자동차 앞 카메라로 도로 상황을 보는 부분이다. 비가 오는지, 차가 많은지, 도심인지 고속도로인지를 파악한다. 세 번째는 이 정보들을 종합해서 운전자에게 해줄 말을 만드는 부분이다. 네 번째는 운전자가 "그래, 그렇게 해줘"라고 하면 실제로 자동차를 조작하는 부분이다. 토요타 연구진은 이 모든 과정에 챗GPT로 유명한 GPT-4 AI를 사용했다고 밝혔다.

실제 테스트에서 운전자가 "이 길에서 몇 킬로로 가는 게 안전할까?"라고 물으면, 시스템이 카메라로 주변을 보고 "지금 도심이고 차도 적당히 있으니까 시속 60킬로 정도가 좋겠어요. 속도를 맞춰드릴까요?"라고 대답했다.

날씨 보고 속도 추천하는 똑똑한 판단력

연구팀이 여러 상황에서 테스트한 결과, 이 AI는 정말 사람처럼 상황을 판단했다. 고속도로에서는 맑은 날 시속 100킬로를 추천했지만, 비가 오면 60킬로, 안개가 끼면 50킬로로 낮춰 추천했다. 도심에서는 맑은 날도 70킬로, 비나 안개가 끼면 30킬로까지 줄이라고 조언했다. 이는 자동차가 단순히 속도계만 보는 게 아니라, 실제로 눈으로 보듯이 상황을 파악한다는 뜻이다. 기존 자동차들이 "앞차와 거리 10미터면 속도 줄이기" 같은 단순한 규칙만 따랐다면, 이 시스템은 "비가 와서 미끄러우니까 더 조심스럽게 가자" 같은 종합적 판단을 한다.

너무 똑똑해서 생긴 문제, 답변이 11초나 걸린다

하지만 이렇게 똑똑한 만큼 문제도 있다. 가장 큰 문제는 답변이 너무 느리다는 것이다. 단순한 대화는 3초 만에 답하지만, 카메라로 주변을 보고 판단해야 하는 질문은 11초나 걸렸다. 운전 중에 11초는 꽤 긴 시간이다. 또 다른 문제는 대화를 오래 할수록 AI가 기억해야 할 내용이 늘어나서 처리 비용이 계속 올라간다는 점이다. 마치 사람이 긴 대화 내용을 다 기억하려고 하면 머리가 아픈 것처럼, AI도 비슷한 문제가 있다.

연구진은 또 같은 장소에서 같은 질문을 해도 미묘하게 다른 답을 하는 경우가 있다고 밝혔다. 이는 AI가 매번 조금씩 다르게 상황을 해석하기 때문이다.

실제 자동차에 들어가려면 더 가벼워져야

토요타 연구진은 이 시스템을 실제 자동차에 넣으려면 몇 가지를 더 개선해야 한다고 했다. 우선 응답 속도를 훨씬 빠르게 만들어야 한다. 지금은 인터넷으로 외부 AI 서버에 연결해서 답을 받는데, 이를 자동차 안에 직접 넣는 방법을 연구 중이다.

또 과거 대화 내용을 똑똑하게 정리해서 기억 용량 문제도 해결해야 한다. 가장 중요한 것은 실제 도로에서 안전하게 작동하는지 확인하는 일이다. 지금은 컴퓨터 시뮬레이션에서만 테스트했기 때문이다.

연구진은 "AI가 사람처럼 대화하면서 상황을 보고 판단해서 운전을 도와주는 시스템이 실제로 가능하다는 것을 보여줬다"며 "앞으로 더 발전시켜서 정말 유용한 AI 자동차를 만들겠다"고 밝혔다.

FAQ

Q: 이 AI 자동차는 언제쯤 살 수 있나요?

A: 아직 연구 단계라 정확한 출시일은 정해지지 않았습니다. 응답 속도를 빠르게 하고 안전성을 충분히 검증한 후에야 실제 자동차에 적용될 예정입니다.

Q: 11초씩 기다려야 한다면 운전하기 불편하지 않나요?

A: 맞습니다. 현재 가장 큰 문제점이 느린 응답 속도입니다. 연구진은 AI를 자동차에 직접 설치하고 시스템을 가볍게 만들어서 이 문제를 해결하려고 합니다.

Q: 기존 자동차 안전장치와 뭐가 다른가요?

A: 기존 시스템은 정해진 규칙대로만 작동하지만, 이 AI는 실제 상황을 보고 판단해서 조언해 줍니다. 운전자와 대화도 할 수 있어서 훨씬 더 유연하고 똑똑합니다.

해당 기사에 인용된 논문 원문은 arvix에서 확인 가능하다.

논문 명: Scene-Aware Conversational ADAS with Generative AI for Real-Time Driver Assistance

이미지 출처: Scene-Aware Conversational ADAS with Generative AI for Real-Time Driver Assistance

해당 기사는 챗GPT와 클로드를 활용해 작성되었습니다.