Depth estimation and segmentation from street view using digital map

• 발행기관: 한국컴퓨터게임학회
• 저자명: 박준석(Joonsuk PARK) 박준(Jun PARK)
• 간행물 정보: 『한국컴퓨터게임학회논문지』제33권 4호, 50~57쪽, 전체 8쪽
• 주제분류: 공학 > 컴퓨터학
• 파일형태: PDF
• 발행일자: 2020.12.30

국문 초록

게임에서 배경은 단지 공간적 구성 요소뿐만 아니라 사용자에게 게임 속에서 몰입감을 높여주는 요소이다. 때문에 실제 도심을 모델로 한 배경의 일부 게임들이 인기를 끌고 있다. 도심을 배경으로 하는 게임의 배경은 만드는데 많은 인력과 시간을 필요로 하기 때문에 제작하기 힘들다. 한편 스트리트 뷰와 같은 서비스와 간단한 룰을 이용해서 가상의 체험을 제공해주는 게임들도 존재한다. 스트리트 뷰를 기반으로 배경에서 중요 요소인 건물을 살려 사용자의 몰입감을 높이고 실제에 기반한 맵을 만들 수 있다면 매우 유용할 것이다. 일반적으로 게임에서 깊이 맵은 빛과 그림자 셰이딩 또는 높이 맵으로 지형을 구성하는데 활용된다. 우리는 이 깊이 맵을 스트리트 뷰에 적용하고자 한다. 우리는 이 연구에서 수치지도를 이용해 간단하고 저비용의 깊이 추정 알고리즘을 실험하고자 한다. 건물에 대한 위치 및 메타데이터는 수치지도로 부터 획득하여 깊이 추정을 진행하였다. 스트리트 뷰에 깊이 정보를 더하여 배경 요소에 중요한 건물을 강조하고 또한 건물과 지면, 하늘을 분리하였다. 디지털 지도와 메타 데이터를 기반으로 한 스트리트 뷰 연구는 다양한 방법으로 활용 될 수 있다.

영문 초록

In the game, the background is not only a spatial element, but also an element that increases game immersion by giving the story a probability. For this reason, some games with a background modeled on an actual city center are gaining popularity, through games, players can experience places that they cannot visit in real life. It is difficult to create a game set in the city center because it requires a lot of manpower and time to produce background. On the other hand, there are also games that provide virtual experiences to users using services such as Street View and simple rules. It will be very useful if you can create a map based on reality and increase the user s immersion by utilizing the building that is an important element in the background based on Street View. Usually in games, depth maps are used for lighting and shadow generation, or constructing terrain like height maps. We are going to apply a depth map to street view. In this study, we intend to experiment with a simple and low-cost depth estimation algorithm using a digital map. The location and metadata of the building were acquired from the digital map and the depth was estimated. We added depth information to Street View to highlight important buildings as background elements and separate buildings, ground, and sky. Street view studies based on digital maps and metadata can be used in a variety of ways, such as building 3D maps and advertising based on building planes.

목차

1. Introduction

2. Methods

3. Conclusion

Acknowledgement

Reference

키워드

Street View Depth Map Panorama Image