๐ก ๋ณธ ๋ฌธ์๋ ๋์์ธ๋ ์ด์ฑ์ง๊ต์๋์ '[MODUPOP×PaperShop] ์์จ์ฃผํ ์ฐ์ ์ํ๊ณ์ ์ฃผ์ ๊ธฐ์ ์๊ฐ' ์ธ๋ฏธ๋์ ๋ฐํ์ผ๋ก ์์ฑํ ๊ธ์ด๋ ์ฐธ๊ณ ํ์๊ธฐ ๋ฐ๋๋๋ค.
Intro
๋ชจ๋์ ์ฐ๊ตฌ์ ์ฐจ์์์ ๊ตญ์ ํํ์ ๋ ผ๋ฌธ ํฌ๊ณ ์ ๊ฒ์ฌ๋น ์ต๋ 200๋ง์ ์ง์ํด์ค.
ADLab: ์์จ์ฃผํ ๋ชจ๋น๋ฆฌํฐ๋ฅผ ์ฐ๊ตฌํ๋ ์ฐ๊ตฌ์ค
- Vision Based Perception
- Path Planning ์๊ณ ๋ฆฌ์ฆ ๋ถ์ ๋ฐ ๊ฐ๋ฐ
- End to End Learning ๊ด๋ จ ์ฐ๊ตฌ
- ๋ฐ์ดํฐ์ ๊ตฌ์ถ, Fine Tunning ๋ฑ
๋ค์ํ ๊ธฐ์์ฌ๊ฐ ์์ผ๋ฉฐ, ์ฐ๊ตฌ ์ต๋ํ ํ์ฉํ๋ ๊ฒ์ ๋ชฉํ๋ก.
์ค๊ตญ์ด ๋งค์ฐ ์ํจ. L4 Level์ ์์จ์ฃผํ ํ์ฌ์ ๊ธฐ์ ์ด ์๋นํ ๋์ผ๋ฉฐ, ์ฌ์ ํ๋ฅผ ํ๊ณ ์๋ ํ์ฌ๋ ๋ง์.
- Waymo๋ ์ ํํ ์ง์ ๊ธฐ๋ฐ ์ด์ ์ผ๋ก ์ฝ๋๋ง์ด ๋ถ๋๋ฝ์ง ์์ ๋ฐ๋ฉด์, Tesla๋ Vision ๊ธฐ๋ฐ์ผ๋ก ๋ถ๋๋ฝ๊ฒ ์ด์ ํจ.
- Waymo๋ ๊ณ ์๋๋ก๊ฐ ์๋ HD Map์ด ์๋ ๋จ๊ฑฐ๋ฆฌ๋ง ์ด๋ ๊ฐ๋ฅํ๋, Tesla๋ Map dependency๊ฐ ๋ฎ์ Scalability๊ฐ ๋์.
์ค๊ตญ์ด ํ์ฌ ๋งค์ฐ ์ํ๊ณ ์์. ์ค๊ตญ์ ์ด์ ๋์ด๋๊ฐ ๋์ ๊ฒ์ ๊ณ ๋ คํ๋ฉด ํ ๊ตญ๊ฐ์ ์ ์ฉํ๋ฉด ๋ ์ฐ์ํ ์ฑ๋ฅ์ด ๊ฐ๋ฅํ ๊ฒ์ผ๋ก ์์
Tesla๋ ๋งต์ด ์๊ธฐ์ micro Map์ ๋ง๋ค์ด์ ์์ฉํ์ง๋ง, Waymo๋ HDMap์ ๊ตฌ์ถํ ํ ํ์ฉํจ
HW ์ฑ๋ฅ์ด ๋ฐ์ถฐ์ค์ผ ์ข์ ์ฑ๋ฅ์ ์๊ณ ๋ฆฌ์ฆ์ ์ฌ์ฉํ ์ ์์ผ๋, HW ์ฐ์ฐ ๋ฅ๋ ฅ์ด ์ค์ํจ.
์ฌํด์ CES์ ์ฃผ ํ ๋ง๊ฐ SDV์ผ ์ ๋๋ก ์ํํธ์จ์ด ํ๋ ํผ ๊ฐ๋ฐ์ด ์ค์ํจ.
๋ค์ํ ํ ์คํฌ๊ฐ ์กด์ฌํ๋ฉฐ ์ต๊ทผ์๋ ์ด๋ฅผ End2End Learning์ผ๋ก ํ๋ ค๊ณ ๋ ธ๋ ฅํ๋ ์ค.
์ฐ๊ตฌ ๊ฒฐ๊ณผ๋ฌผ
LiDAR๋ง์ผ๋ก๋ ์ฑ๋ฅ์ด ๊ทธ๋ฆฌ ์ข์ง ์์. ๊ทธ ์ค Jitter๋ก ์ฝ๊ฐ ๋ณ์ด๋ฅผ ์ฃผ๋ ๊ฒ์ด ์ฑ๋ฅ์ด ์ข์์ก์ผ๋ ๊ทธ๋ฅ ์ข์์ง์ง ์์.
Transformer๋ณด๋ค ์คํ๋ ค BiFPN, PFPN์ ์ฑ๋ฅ์ด ์ข๊ฒ ๋์ด.
์ฃผํ์๋๋ A*๊ฐ ๊ฐ์ฅ ๋น ๋ฅด๋, RRT*๊ฐ ์ฐจ๋์์ ์ฌ์ฉํ๊ธฐ์๋ ๊ฐ์ฅ ์์ ์
Neural View Transformer & Image Encoder ์ต์ ํ ํ๋ ๊ณผ์ ์ ์ค์ ์ ์ผ๋ก.
InternImage-T Backbone์ด ์ฑ๋ฅ์ด ๊ฐ์ฅ ์ฐ์ํ์ผ๋, Crosswalk์์ ์ฑ๋ฅ์ด ์ข์ง ์์.
End to End Learning ๊ตฌํ ๋ฐ ์ต์ ํ๋ฅผ ์ํ ๊ณํ์ ํ๊ณ ์์.
ํ๊ธฐ
์๋ BEV ์ชฝ์ ๊ด์ฌ์ ๊ฐ์ง๊ณ ์์์ผ๋ฉฐ 3D OD ์ชฝ ์ฐ๊ตฌ๋ฅผ ์งํ์ค์ด์๋๋ฐ, ์ด๋ฒ์ NVIDIA-Autonomous Driving Lab(ADLab)์ด ๊ฐ์ค๋๋ค๋ ์์์ ๋ฃ๊ณ ์ธ๋ฏธ๋ ์ ์ฒญ๊ณผ ํจ๊ป ๋ฉ์ ์ฒญ์ ํ์๋ค. ๊ฒฐ๋ก ์ ์ผ๋ก๋ ๋ฉ ๋ด์์ ์งง์์๊ฐ์ ๊ฝค๋ ์๋ฏธ์๋ ์ฐ๊ตฌ๋ฅผ ํ ์ ์์ ๊ฒ ๊ฐ์๋ค. ํ๋ถ์ฐ๊ตฌ์๊ณผ ๋ณํํ๋ ค๋ฉด ๋ง์ด ํ๋ค๊ฒ ์ง๋ง, ์์ฌ ์งํ์ ์๊ฐํ๊ณ ์์ผ๋ ๋์ฑ ์ด์ฌํ ์ฐธ์ฌํด๋ด์ผ๊ฒ ๋ค.