드론은 사람이 직접 탑승하지 않고 조종하여 비행이 가능한 무인 항공기이다. 최근 드론의 보급화로 인해 기존의 목적인 군사용보다 다양한 산업 분야에 도입되며, 운송, 소방, 안전 등의 분야에서 인공지능 기술과 융합하여 활용되고 있다. 드론이 활용됨에 따라 정확한 데이터 수집을 위해 드론에 장착 가능한 고성능 카메라의 필요성도 증가하고 있다. 이와 함께 컴퓨팅 파워와 GPU의 발전으로 인공지능은 컴퓨터 비전, 자연어 처리, 사물 인터넷 등의 분야에서 빠르게 발전하고 있다. 특히 컴퓨터 비전의 객체 탐지 분야는 많은 발전을 이루었으며 의료, 농업, 안전 등 많은 분야에서 활용되고 있다. 이에 드론으로 촬영한 고해상도 데이터를 분석하기 위한 기술의 필요성이 증가하며, 드론으로 촬영한 고해상도 데이터셋이 등장하고 있다. 기존 이미지 분석에 많이 사용되는 PASCAL VOC, MS COCO 데이터셋은 단일 객체로 구성된 데이터가 60%이며 평균 2, 3개의 객체로 구성되어 있다. 또한 객체는 객체를 구성하는 픽셀 수에 따라 소형, 중형, 대형으로 구분된다. 공중에서 촬영된 고해상도 이미지 데이터는 객체가 적은 픽셀수로 구성되어 있고, 고밀도 분포 및 중첩의 특징을 갖는다. 기존의 객체 탐지 모델로 고해상도 이미지 분석 시, 학습된 객체의 크기가 다르기 때문에 특징점이 다르고 분석 이미지의 해상도가 달라 객체 탐지 정확도가 떨어진다. 이에 본 논문에서는 중점을 활용하는 이미지 슬라이싱 기법과 DIoU(Distance Intersection over Union) 기반의 NMS(Non-Maximum Suppression)를 적용한 중점 연결 기반 이미지 슬라이싱 기법을 제안한다. 실험 결과 중점 연결 기반 이미지 슬라이싱 기법은 이미지 슬라이싱 기법을 적용하지 않았을 경우보다 mAP50과 mAP@[0.5:0.95]가 각각 10%, 4% 향상되었으며, 기존의 이미지 슬라이싱 기법 보다는 1% 향상되었다. 또한 기존 이미지 슬라이싱 기법과 비교하여 대형 객체의 mAP@[0.5:0.95]의 경우 8% 향상되었다. 또한 DIoU 기반의 NMS를 적용하였을 때, 기존의 NMS를 사용하는 객체 탐지 모델 보다 mAP 성능이 2% 향상되었다. 이를 통해 기존 이미지 슬라이싱 기법 적용 시, 중형 및 대형 객체의 탐지 정확도 감소 문제와 함께 고해상도 이미지에서의 고밀도 분포 및 중첩된 객체의 탐지 정확도 감소 문제를 해결했다.
A drone is an unmanned aerial vehicle that can fly by controlling without a person directly boarding it. Due to the recent spread of drones, it has been introduced in a variety of industries than for military purposes, and is being used in combination with artificial intelligence technology in areas such as transportation, fire fighting, and safety. As drones are used, the need for high-performance cameras that can be mounted on drones for accurate data collection is also increasing. Along with the development of computing power and GPU, artificial intelligence is rapidly developing in fields such as computer vision, natural language processing, and the Internet of Things. In particular, the field of object detection in computer vision has made a lot of progress and is used in many fields such as medical care, agriculture, and safety. As a result, the need for technology to analyze high-resolution data photographed by drones is increasing, and high-resolution datasets photographed by drones are emerging. The PASCAL VOC and MS COCO datasets, which are widely used for existing image analysis, have 60% of data consisting of a single object and consist of an average of two or three objects. In addition, objects are divided into small, medium, and large according to the number of pixels constituting the object. High-resolution image data captured from the air consists of objects with fewer pixels and has characteristics of high-density distribution and overlap. When analyzing high-resolution images using conventional object detection models, the varying sizes of trained objects and differences in resolution of analyzed images result in decreased object detection accuracy. In this paper, we propose an improved image slicing technique that utilizes focal points and applies DIoU (Distance Intersection over Union)-based Non-Maximum Suppression (NMS) to address this issue. Experimental results show that the improved image slicing technique achieved a 10% and 4% increase in mAP50 and mAP@[0.5:0.95] respectively compared to not applying image slicing, and a 1% improvement over the existing image slicing technique. Additionally, compared to the existing image slicing technique, the mAP@[0.5:0.95] for large objects increased by 8%. Furthermore, when applying DIoU-based NMS, the mAP performance improved by 2% compared to using the conventional NMS in object detection models.
These results solve the problem of reducing the detection accuracy of medium and large objects, as well as the problem of reducing the detection accuracy of high-density distribution and the detection accuracy of overlapping objects in high-resolution images when applying existing image slicing techniques.
목차
제 1 장 서론 11.1 연구 배경 및 목적 11.2 논문의 구성 7제 2 장 관련연구 82.1 객체 탐지 모델 82.1.1 YOLO 102.1.2 TPH-YOLOv5 112.1.3 YOLO-X 122.1.4 Faster R-CNN 132.1.5 Mask R-CNN 142.1.6 RRNet 152.2 이미지 후처리 기법 172.2.1 Intersection over Union 172.2.2 Non-Maximum Suppression 192.3 이미지 슬라이싱 212.3.1 Slicing Aided Hyper Inference 21제 3 장 제안 기법 233.1 중점 연결 기반 이미지 슬라이싱 기법 243.2 DIoU 기반 NMS 기법 26제 4 장 실험 및 결과 294.1 실험개요 294.1.1 데이터셋 294.1.2 실험 환경 304.2 실험 방법 314.3 성능평가지표 324.4 실험 결과 35제 5 장 결론 및 향후 연구 40