Post

RailSem19 ํ›‘์–ด๋ณด๊ธฐ

RailSem19 ํ›‘์–ด๋ณด๊ธฐ

๐Ÿš† ์„œ๋ก : ์ž์œจ์ฃผํ–‰ ์‹œ๋Œ€, ์ฒ ๋„๋Š” ์™œ ์—ฐ๊ตฌ๊ฐ€ ๋ถ€์กฑํ• ๊นŒ?

1

์˜ค๋Š˜๋‚  ์ž์œจ์ฃผํ–‰ ๊ธฐ์ˆ ์€ ๋น ๋ฅด๊ฒŒ ๋ฐœ์ „ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.
์ž๋™์ฐจ ๋ถ„์•ผ์—์„œ๋Š” Tesla, Waymo, NVIDIA ๋“ฑ์˜ ๊ธฐ์—…๋“ค์ด ๋”ฅ๋Ÿฌ๋‹์„ ํ™œ์šฉํ•ด ์ฐจ๋Ÿ‰์ด ์Šค์Šค๋กœ ์ฃผ๋ณ€์„ ์ธ์‹ํ•˜๊ณ  ํŒ๋‹จํ•˜๋Š” ๊ธฐ์ˆ ์„ ์—ฐ๊ตฌํ•˜๊ณ  ์žˆ์ฃ .
ํ•˜์ง€๋งŒ, ์ฒ ๋„์™€ ํŠธ๋žจ(๋…ธ๋ฉด ์ „์ฐจ) ํ™˜๊ฒฝ์—์„œ์˜ ์ž์œจ์ฃผํ–‰ ์—ฐ๊ตฌ๋Š” ์™œ ๋ถ€์กฑํ• ๊นŒ์š”? ๐Ÿค”

๐Ÿš— ๊ธฐ์กด ์ž์œจ์ฃผํ–‰ ์—ฐ๊ตฌ์˜ ํ•œ๊ณ„

  • ๊ธฐ์กด์˜ ์ž์œจ์ฃผํ–‰ ์—ฐ๊ตฌ๋Š” ๋Œ€๋ถ€๋ถ„ ๋„๋กœ ํ™˜๊ฒฝ์„ ๊ธฐ๋ฐ˜์œผ๋กœ ํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.
  • ์ฒ ๋„์™€ ํŠธ๋žจ์€ ์ „์šฉ ์„ ๋กœ๋ฅผ ์ด์šฉํ•˜๊ธฐ ๋•Œ๋ฌธ์— ๊ธฐ์กด์˜ ์ž๋™์ฐจ์šฉ ์ž์œจ์ฃผํ–‰ ๋ชจ๋ธ์„ ๊ทธ๋Œ€๋กœ ์ ์šฉํ•˜๊ธฐ ์–ด๋ ต์Šต๋‹ˆ๋‹ค.
  • ์ฒ ๋„ ํ™˜๊ฒฝ์—์„œ๋Š” ์‹ ํ˜ธ๋“ฑ, ํ”Œ๋žซํผ, ๊ต์ฐจ๋กœ, ์ฒ ๋กœ ์ „ํ™˜๊ธฐ(switch), ์„ ๋กœ ์œ ์ง€๋ณด์ˆ˜ ์š”์†Œ ๋“ฑ ์ฐจ๋Ÿ‰ ํ™˜๊ฒฝ๊ณผ๋Š” ๋‹ค๋ฅธ ๋ณต์žกํ•œ ์š”์†Œ๊ฐ€ ๋งŽ์Šต๋‹ˆ๋‹ค.

๐Ÿš‰ ์ฒ ๋„ ์—ฐ๊ตฌ์˜ ๋ถ€์กฑํ•œ ์ด์œ 

  1. ์ฒ ๋„ ์ „์šฉ ๋ฐ์ดํ„ฐ ๋ถ€์กฑ ๐Ÿ›ค๏ธ
    • ๊ธฐ์กด ๋„๋กœ ๋ฐ์ดํ„ฐ์…‹(์˜ˆ: Cityscapes, KITTI, COCO)์—์„œ๋Š” ์ฒ ๋„ ๊ด€๋ จ ๋ฐ์ดํ„ฐ๊ฐ€ ๊ฑฐ์˜ ์—†์Œ
  2. ์ฒ ๋„ ํ™˜๊ฒฝ ํŠนํ™” AI ๋ชจ๋ธ ๋ถ€์žฌ ๐Ÿง 
    • ์ฒ ๋„ ์ „์šฉ ์‹ ํ˜ธ, ์ „ํ™˜๊ธฐ, ํ”Œ๋žซํผ์„ ์ธ์‹ํ•˜๋Š” ๋งž์ถคํ˜• ๋”ฅ๋Ÿฌ๋‹ ๋ชจ๋ธ์ด ํ•„์š”
  3. ์ฒ ๋„ ์•ˆ์ „์„ฑ ์š”๊ตฌ์‚ฌํ•ญ ๐Ÿšฆ
    • ์ฒ ๋„๋Š” ๋Œ€ํ˜• ์‚ฌ๊ณ ๊ฐ€ ๋ฐœ์ƒํ•  ์œ„ํ—˜์ด ์ปค์„œ ๋†’์€ ์‹ ๋ขฐ์„ฑ์ด ์š”๊ตฌ๋จ

๐ŸŽฏ RailSem19์ด ํ•ด๊ฒฐ์ฑ…์ด ๋  ์ˆ˜ ์žˆ์„๊นŒ?
โžก๏ธ ๋ฐ”๋กœ, RailSem19 ๋ฐ์ดํ„ฐ์…‹์ด ์ฒ ๋„ ํ™˜๊ฒฝ์„ ์œ„ํ•œ ์ตœ์ดˆ์˜ ์˜๋ฏธ๋ก ์  ๋ฐ์ดํ„ฐ์…‹(Semantic Dataset)์œผ๋กœ ๋“ฑ์žฅํ•œ ์ด์œ ์ž…๋‹ˆ๋‹ค! ๐ŸŽ‰


๐Ÿ” RailSem19์ด๋ž€? (What is RailSem19?)

๐Ÿ“Œ RailSem19 ๋ฐ์ดํ„ฐ์…‹ ๊ฐœ์š”

RailSem19์€ ์ฒ ๋„ ๋ฐ ํŠธ๋žจ ํ™˜๊ฒฝ์—์„œ ์˜๋ฏธ๋ก ์  ์žฅ๋ฉด ์ดํ•ด(Semantic Scene Understanding)๋ฅผ ์—ฐ๊ตฌํ•˜๊ธฐ ์œ„ํ•ด ๊ฐœ๋ฐœ๋œ ๋ฐ์ดํ„ฐ์…‹์ž…๋‹ˆ๋‹ค.
๐Ÿš† ์ฒ ๋„ ์ „์šฉ ์˜๋ฏธ๋ก ์  ๋ถ„ํ•  ๋ฐ์ดํ„ฐ์…‹์œผ๋กœ, 8,500์žฅ์˜ ๊ณ ํ•ด์ƒ๋„ ์ด๋ฏธ์ง€๋ฅผ ํฌํ•จํ•˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

ํ•ญ๋ชฉ์„ค๋ช…
์ถœ์‹œ ์—ฐ๋„2019๋…„ (CVPR Workshop 2019 ๋ฐœํ‘œ)
์ œ์ž‘ ๊ธฐ๊ด€Austrian Institute of Technology (AIT)
์ด๋ฏธ์ง€ ์ˆ˜8,500์žฅ (์šด์ „์„ ์‹œ์ )
ํ•ด์ƒ๋„1280 ร— 720 ~ 1920 ร— 1080 (HD)
์ดฌ์˜ ํ™˜๊ฒฝ38๊ฐœ ๋„์‹œ, ๋‹ค์–‘ํ•œ ๋‚ ์”จ, ๊ณ„์ ˆ, ์กฐ๋ช… ํฌํ•จ
์ฃผ์š” ๊ฐ์ฒด์ฒ ๋„ ์„ ๋กœ, ํŠธ๋žจ, ์‹ ํ˜ธ๋“ฑ, ์ „ํ™˜๊ธฐ, ํ”Œ๋žซํผ, ์ฒ ๋„ ํ‘œ์ง€ํŒ ๋“ฑ
๋ผ๋ฒจ๋ง ๋ฐฉ์‹ํ”ฝ์…€ ๋‹จ์œ„ ์˜๋ฏธ๋ก ์  ๋ผ๋ฒจ๋ง(Dense Segmentation) + ๊ธฐํ•˜ํ•™์  ๊ฐ์ฒด ๋ผ๋ฒจ๋ง(Geometric Annotations)

๐Ÿš€ RailSem19์˜ ํ•ต์‹ฌ ๋ชฉํ‘œ:

  1. ๐Ÿš‰ ์ฒ ๋„ ๋ฐ ํŠธ๋žจ ํ™˜๊ฒฝ์˜ ์ž์œจ์ฃผํ–‰ ์—ฐ๊ตฌ ์ง€์›
  2. ๐Ÿ—๏ธ ๊ธฐ์กด ๋„๋กœ ์ค‘์‹ฌ ๋ฐ์ดํ„ฐ์…‹์˜ ๊ณต๋ฐฑ ๋ณด์™„
  3. ๐Ÿง  ์ฒ ๋„ ํŠนํ™” ๋”ฅ๋Ÿฌ๋‹ ๋ชจ๋ธ ํ•™์Šต ๊ธฐ๋ฐ˜ ์ œ๊ณต

1


๐ŸŽจ RailSem19์˜ ๋ผ๋ฒจ๋ง ๊ตฌ์กฐ

RailSem19์€ ๊ฐ์ฒด ์ค‘์‹ฌ ๋ผ๋ฒจ๋ง + ํ”ฝ์…€ ๋‹จ์œ„ ์˜๋ฏธ๋ก ์  ๋ผ๋ฒจ๋ง์„ ์กฐํ•ฉํ•˜์—ฌ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค.
๐Ÿ’ก Cityscapes ๋ฐ์ดํ„ฐ์…‹๊ณผ ํ˜ธํ™˜ ๊ฐ€๋Šฅํ•˜๋„๋ก ์„ค๊ณ„๋˜์—ˆ์œผ๋ฉฐ, ์ฒ ๋„ ํ™˜๊ฒฝ์„ ๋ฐ˜์˜ํ•œ ์ƒˆ๋กœ์šด ํด๋ž˜์Šค๋ฅผ ์ถ”๊ฐ€ํ–ˆ์Šต๋‹ˆ๋‹ค.

1

1๏ธโƒฃ ๊ฐ์ฒด ์ค‘์‹ฌ ๋ผ๋ฒจ๋ง (Geometric Annotation)

๐Ÿ“ ์ฒ ๋„ ๊ด€๋ จ ์ฃผ์š” ๊ฐ์ฒด๋ฅผ ๋ฐ”์šด๋”ฉ ๋ฐ•์Šค, ํด๋ฆฌ๊ณค, ์Šคํ”Œ๋ผ์ธ์œผ๋กœ ๋ผ๋ฒจ๋ง

๊ฐ์ฒด ์œ ํ˜•๋ผ๋ฒจ ์ด๋ฆ„์ˆ˜๋Ÿ‰๋ผ๋ฒจ๋ง ํ˜•ํƒœ
๐Ÿš† ์ฒ ๋„ ์š”์†ŒRail (๋ ˆ์ผ)58,322๊ฐœ์Šคํ”Œ๋ผ์ธ(Spline)
๐Ÿš‰ ์ฒ ๋„ ์ฐจ๋Ÿ‰Train-car (๊ธฐ์ฐจ, ํŠธ๋žจ)1,951๊ฐœํด๋ฆฌ๊ณค(Polygon)
โš™๏ธ ์ฒ ๋„ ์ „ํ™˜๊ธฐSwitch-left (์ขŒ์ธก ์ „ํ™˜๊ธฐ)1,965๊ฐœ๋ฐ”์šด๋”ฉ ๋ฐ•์Šค(BBox)
๐Ÿ›‘ ์ฒ ๋„ ์‹ ํ˜ธTrack-sign-front (์ „๋ฉด ์ฒ ๋„ ํ‘œ์ง€ํŒ)7,404๊ฐœ๋ฐ”์šด๋”ฉ ๋ฐ•์Šค(BBox)

2๏ธโƒฃ ํ”ฝ์…€ ๋‹จ์œ„ ์˜๋ฏธ๋ก ์  ๋ผ๋ฒจ๋ง (Dense Segmentation)

๐Ÿ“ Cityscapes 19๊ฐœ ํด๋ž˜์Šค + RailSem19 ์ฒ ๋„ ํŠนํ™” ํด๋ž˜์Šค ์ถ”๊ฐ€

RailSem19 ๋ผ๋ฒจCityscapes ๋ผ๋ฒจ ๋งคํ•‘ํ‰๊ท  ํ”ฝ์…€ ๋น„์œจ (%)ํ”„๋ ˆ์ž„ ํฌํ•จ ๋น„์œจ (%)
Road (๋„๋กœ)Road5.2%48.1%
Rail-track (์ฒ ๋„ ์„ ๋กœ)Rail-track5.9%86.2%
Trackbed (์ฒ ๋„ ๋…ธ๋ฐ˜)-10.3%87.6%
Rail-raised (๊ณ ๊ฐ€ ์ฒ ๋„)-3.4%87.2%
Rail-embedded (๋„๋กœ ๋‚ด ์ฒ ๋„ ์„ ๋กœ)-1.5%14.6%

๐Ÿšฆ ์ฒ ๋„ ํ™˜๊ฒฝ ํŠนํ™” ๋ผ๋ฒจ์ด ํฌํ•จ๋˜์–ด ๊ธฐ์กด ๋„๋กœ ๋ฐ์ดํ„ฐ์…‹์—์„œ ๋ถ€์กฑํ–ˆ๋˜ ๋ถ€๋ถ„์„ ๋ณด์™„ํ•ฉ๋‹ˆ๋‹ค!


๐Ÿค– AI ๋ชจ๋ธ ํ•™์Šต์„ ์œ„ํ•œ RailSem19์˜ ํ™œ์šฉ ๊ฐ€๋Šฅ์„ฑ

1

RailSem19์€ ๋‹ค์–‘ํ•œ AI ๋ชจ๋ธ ๊ฐœ๋ฐœ๊ณผ ์—ฐ๊ตฌ์— ํ™œ์šฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค:

1๏ธโƒฃ ์ฒ ๋„ ํ™˜๊ฒฝ์—์„œ์˜ ์˜๋ฏธ๋ก ์  ๋ถ„ํ• (Semantic Segmentation) ๋ชจ๋ธ ๊ฐœ๋ฐœ

  • ์ฒ ๋„ ์„ ๋กœ, ๋…ธ๋ฐ˜, ํ”Œ๋žซํผ ๋“ฑ์„ ์ •ํ™•ํ•˜๊ฒŒ ๊ตฌ๋ถ„ํ•˜๋Š” ๋”ฅ๋Ÿฌ๋‹ ๋ชจ๋ธ ํ•™์Šต
  • DeepLabV3+, PSPNet, UNet ๋“ฑ์˜ ๋ชจ๋ธ์— ์ ์šฉ ๊ฐ€๋Šฅ

2๏ธโƒฃ ์ฒ ๋„ ์ฐจ๋Ÿ‰ ๋ฐ ์ธํ”„๋ผ ์ž๋™ ํƒ์ง€(Object Detection)

  • ๋‹ค์–‘ํ•œ ๊ธฐ์ฐจ, ํŠธ๋žจ, ์œ ์ง€๋ณด์ˆ˜ ์ฐจ๋Ÿ‰ ๋“ฑ์„ ์ธ์‹ํ•˜๋Š” ๋ชจ๋ธ ๊ฐœ๋ฐœ
  • YOLO, Faster R-CNN, SSD ๋“ฑ์˜ ๊ฐ์ฒด ํƒ์ง€ ์•Œ๊ณ ๋ฆฌ์ฆ˜ ํ•™์Šต ๋ฐ์ดํ„ฐ๋กœ ํ™œ์šฉ

3๏ธโƒฃ ์ฒ ๋„ ์‹ ํ˜ธ ๋ฐ ํ‘œ์ง€ํŒ ์ธ์‹(Computer Vision ๊ธฐ๋ฐ˜ ๋ถ„์„)

  • ์ฒ ๋„ ํŠนํ™” ์‹ ํ˜ธ๋“ฑ, ํ‘œ์ง€ํŒ, ๊ฒฝ๊ณ  ์‚ฌ์ธ ๋“ฑ ์ธ์‹ ๋ชจ๋ธ ๊ฐœ๋ฐœ
  • ์ฒ ๋„ ๊ทœ์ œ ์ค€์ˆ˜ ๋ฐ ์•ˆ์ „ ์šดํ–‰์„ ์œ„ํ•œ ํ•ต์‹ฌ ๊ธฐ์ˆ 

4๏ธโƒฃ ์ž์œจ์ฃผํ–‰ ๊ธฐ์ฐจ ๋ฐ ํŠธ๋žจ์˜ ์•ˆ์ „์„ฑ ํ–ฅ์ƒ์„ ์œ„ํ•œ ์—ฐ๊ตฌ

  • ์‹ค์‹œ๊ฐ„ ์„ ๋กœ ์ƒํƒœ ๋ชจ๋‹ˆํ„ฐ๋ง ๋ฐ ์žฅ์• ๋ฌผ ๊ฐ์ง€ ์‹œ์Šคํ…œ ๊ฐœ๋ฐœ
  • ์ฒ ๋„-๋„๋กœ ๊ต์ฐจ ์ง€์ ์—์„œ์˜ ์•ˆ์ „ํ•œ ์ฃผํ–‰ ๊ฒฐ์ • ๋ชจ๋ธ ํ•™์Šต

5๏ธโƒฃ ๋„๋กœ-์ฒ ๋„ ํ˜ผํ•ฉ ํ™˜๊ฒฝ ์ธ์‹ ๋ชจ๋ธ ๊ฐœ๋ฐœ

  • Cityscapes์™€ RailSem19์„ ๊ฒฐํ•ฉํ•œ ํ•˜์ด๋ธŒ๋ฆฌ๋“œ ํ•™์Šต์œผ๋กœ ๋„๋กœ-์ฒ ๋„ ์ „์ด ์˜์—ญ ์ธ์‹
  • ๊ฒฝ์ „์ฒ , ํŠธ๋žจ ๋“ฑ ๋„๋กœ์™€ ์ฒ ๋„๋ฅผ ๋ชจ๋‘ ์ฃผํ–‰ํ•˜๋Š” ์ฐจ๋Ÿ‰์„ ์œ„ํ•œ AI ๋ชจ๋ธ ๊ฐœ๋ฐœ

๐Ÿ’ก RailSem19์„ ํ™œ์šฉํ•˜๋ฉด ๋”ฅ๋Ÿฌ๋‹ ๊ธฐ๋ฐ˜์˜ ์ฒ ๋„ ์ „์šฉ AI ๋ชจ๋ธ์„ ํ•™์Šตํ•˜๊ณ  ์ฒ ๋„-๋„๋กœ ์œตํ•ฉ ์—ฐ๊ตฌ๋ฅผ ์ง„ํ–‰ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค


๐ŸŽฏ ๊ฒฐ๋ก : RailSem19์ด ๊ฐ€์ ธ์˜ฌ ๋ณ€ํ™”๋Š”?

๐Ÿš‰ RailSem19์€ ์ฒ ๋„ ํ™˜๊ฒฝ์—์„œ ์ž์œจ์ฃผํ–‰ ์—ฐ๊ตฌ๋ฅผ ์œ„ํ•œ ์ตœ์ดˆ์˜ ์˜๋ฏธ๋ก ์  ๋ฐ์ดํ„ฐ์…‹์ž…๋‹ˆ๋‹ค!
๐Ÿšฆ ์ฒ ๋„ ์‹ ํ˜ธ, ํŠธ๋žจ, ์ „ํ™˜๊ธฐ ๋“ฑ ๊ธฐ์กด ๋ฐ์ดํ„ฐ์…‹์— ์—†๋Š” ์š”์†Œ๋“ค์„ ํฌํ•จํ•˜์—ฌ ์ฒ ๋„ ์—ฐ๊ตฌ์˜ ๊ณต๋ฐฑ์„ ๋ฉ”์›๋‹ˆ๋‹ค.
๐Ÿ“Š Cityscapes ๋“ฑ ๊ธฐ์กด ๋„๋กœ ๋ฐ์ดํ„ฐ์™€ ๊ฒฐํ•ฉํ•˜์—ฌ ๋” ์ •๋ฐ€ํ•œ ์ž์œจ์ฃผํ–‰ ์—ฐ๊ตฌ๊ฐ€ ๊ฐ€๋Šฅํ•ฉ๋‹ˆ๋‹ค.

๐Ÿ”œ ๋ฏธ๋ž˜ ์—ฐ๊ตฌ ๋ฐฉํ–ฅ:

โœ… ์ฒ ๋„-๋„๋กœ ์œตํ•ฉ ํ™˜๊ฒฝ์—์„œ AI ๋ชจ๋ธ ํ•™์Šต

  • ๊ฒฝ์ „์ฒ , ํŠธ๋žจ ๋“ฑ ๋„๋กœ์™€ ์ฒ ๋„๋ฅผ ๋ชจ๋‘ ์ด์šฉํ•˜๋Š” ๊ตํ†ต์ˆ˜๋‹จ ์—ฐ๊ตฌ
  • ๋„์‹œ ๊ตํ†ต ์‹œ์Šคํ…œ์˜ ํ†ตํ•ฉ์  ์ž์œจ์ฃผํ–‰ ์†”๋ฃจ์…˜ ๊ฐœ๋ฐœ

โœ… ์ฒ ๋„ ์œ ์ง€๋ณด์ˆ˜ ๋ฐ ์‚ฌ๊ณ  ์˜ˆ๋ฐฉ์„ ์œ„ํ•œ ์ธ๊ณต์ง€๋Šฅ ์‹œ์Šคํ…œ ๊ฐœ๋ฐœ

  • ์„ ๋กœ ๊ฒฐํ•จ, ๋งˆ๋ชจ, ์ด๋ฌผ์งˆ ํƒ์ง€ ์‹œ์Šคํ…œ
  • ์œ„ํ—˜ ์ƒํ™ฉ ์˜ˆ์ธก ๋ฐ ์‚ฌ์ „ ๋Œ€์‘ ๋ชจ๋ธ ๊ฐœ๋ฐœ

โœ… ์ฆ๊ฐ• ํ˜„์‹ค(AR) ๋ฐ ์‹œ๋ฎฌ๋ ˆ์ด์…˜ ํ™˜๊ฒฝ์—์„œ์˜ ์‘์šฉ

  • ์ฒ ๋„ ์šด์ „์ž ํ›ˆ๋ จ์šฉ ์‹œ๋ฎฌ๋ ˆ์ดํ„ฐ ๊ฐœ๋ฐœ
  • ์‹ค์ œ ํ™˜๊ฒฝ ๋ฐ์ดํ„ฐ ๊ธฐ๋ฐ˜ ๊ฐ€์ƒ ํ›ˆ๋ จ ์‹œ์Šคํ…œ ๊ตฌ์ถ•

โœ… ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ์ฒ ๋„ ์ธ์‹ ์‹œ์Šคํ…œ ์—ฐ๊ตฌ

  • ์นด๋ฉ”๋ผ, ๋ผ์ด๋‹ค, ๋ ˆ์ด๋” ๋“ฑ ๋‹ค์–‘ํ•œ ์„ผ์„œ ์œตํ•ฉ ์—ฐ๊ตฌ
  • ์•…์ฒœํ›„, ์•ผ๊ฐ„ ๋“ฑ ์—ด์•…ํ•œ ํ™˜๊ฒฝ์—์„œ๋„ ์ž‘๋™ํ•˜๋Š” ๊ฐ•์ธํ•œ ์ธ์‹ ์‹œ์Šคํ…œ ๊ฐœ๋ฐœ

๐Ÿš€ ์ด์ œ RailSem19์œผ๋กœ ์ฒ ๋„ ์ž์œจ์ฃผํ–‰์˜ ๋ฏธ๋ž˜๋ฅผ ์—ฐ๊ตฌํ•ด๋ณผ๊นŒ์š”? ๐Ÿ˜Š

This post is licensed under CC BY 4.0 by the author.