드론에 “지능형 눈” 부여하기”

스테레오 비전 보정 기술 공개

드론이 나무, 건물 및 기타 장애물을 정확하게 피하면서 하늘을 자율적으로 비행할 때 궁금한 점이 있으신가요? 세상을 “보는” 방법?
그 해답은 종종 한 쌍의 작은 스테레오 카메라에 있습니다. 사람의 눈과 마찬가지로 드론은 두 대의 카메라를 통해 깊이를 인식하며, 이 기능의 핵심에는 다음과 같은 중요한 프로세스가 있습니다. 스테레오 비전 보정.

---

스테레오 비전 보정이란 무엇인가요?

도수가 잘못된 안경을 착용하면 세상이 흐릿하고 왜곡되어 보인다고 상상해 보세요. 드론의 스테레오 비전 시스템도 마찬가지로 “처방전 조정”이 필요합니다. 이 조정 과정을 캘리브레이션이라고 합니다.

스테레오 보정에 따라 각 카메라의 고유한 속성 및 그들 사이의 정확한 공간 관계, 를 사용하면 두 대의 카메라가 사람의 눈처럼 함께 작동하여 깊이를 정확하게 인식할 수 있습니다.

기본적으로 캘리브레이션은 세 가지 주요 문제를 해결합니다:

• 렌즈 왜곡: 펀하우스 거울이 이미지를 왜곡하는 것처럼 카메라 렌즈도 왜곡을 일으킵니다.

• 내재적 및 외재적 매개변수: 초점 거리, 이미지 중심, 드론에서 각 카메라의 장착 위치 결정하기

• 스테레오 지오메트리: 두 카메라 사이의 상대적 위치 및 방향 정밀 측정

---

스테레오 보정의 세 가지 핵심 단계

1단계: 단안 카메라 보정 - 각 “눈” 이해하기”

캘리브레이션은 각 카메라에서 개별적으로 시작됩니다. 엔지니어는 흑백 바둑판 무늬 를 카메라 앞에 배치합니다. 이 바둑판은 자처럼 작동하여 시스템이 이미지 좌표와 실제 좌표 사이의 관계를 설정하는 데 도움을 줍니다.

드론이나 바둑판이 움직일 때 카메라는 다양한 각도에서 수십 개의 이미지를 캡처합니다. 알고리즘은 이러한 이미지에서 코너 포인트가 어떻게 이동하는지 분석하여 계산합니다:

• 초점 거리: 시야 및 이미지 배율을 결정합니다.

• 광학 센터: 이미지의 진정한 중심

• 왜곡 계수: 다음을 포함한 렌즈 왜곡 정량화

  • 방사형 왜곡 (직선을 곡선으로 만들기)

  • 접선 왜곡 (이미지 왜곡 발생)

---

2단계: 스테레오 보정 - 두 눈 정렬하기

두 카메라가 개별적으로 보정되면 다음과 같이 해야 합니다. 한 쌍으로 정렬. 스테레오 시스템은 동일한 바둑판의 이미지를 동시에 캡처하고 알고리즘이 왼쪽과 오른쪽 이미지의 차이를 분석하여 계산합니다:

• 회전 매트릭스: 두 카메라의 각도 차이

• 번역 벡터: 정확한 거리와 방향

이러한 매개변수는 깊이 정확도에 직접적인 영향을 미치기 때문에 매우 중요합니다. 사람의 시각과 마찬가지로 두 눈이 같은 물체에 초점을 맞추지 못하면 뇌(이 경우 알고리즘)가 거리를 정확하게 판단할 수 없습니다.

---

3단계: 스테레오 정류 - 깊이 계산 간소화

정밀한 스테레오 파라미터를 사용하더라도 직접 3D 계산은 복잡할 수 있습니다. 스테레오 정류 는 두 이미지를 효과적으로 “직선화”하여 이상적인 구성으로 정렬합니다.

수정 후

• 두 카메라의 이미지 평면이 동일 평면이 됩니다.

• 해당 픽셀 행이 완벽하게 정렬됩니다.

결과적으로 동일한 개체가 동일한 수평선 를 사용하여 이후의 깊이 계산을 크게 간소화할 수 있습니다.

---

드론 스테레오 캘리브레이션의 고유한 과제

드론의 스테레오 보정에는 몇 가지 고유한 과제가 있습니다:

• 진동: 기내 진동으로 인해 카메라 위치가 약간 변동될 수 있습니다.

• 온도 변화: 열 변화로 인해 미묘한 구조적 변형이 발생할 수 있습니다.

• 제한된 기준선: 소형 드론 설계로 카메라 간격이 제한되어 깊이 인식 범위 감소

이러한 문제를 해결하기 위해 최신 캘리브레이션 기술이 발전했습니다:

• 온라인 보정: 비행 중 지속적인 모니터링 및 조정

• 온도 보정: 열 변화에 따른 자동 파라미터 보정

• 멀티 스케일 보정: 다양한 거리 범위에 대해 서로 다른 보정 매개변수 사용

---

보정 후: 깊이 인식 활성화

보정이 완료되면 드론의 스테레오 비전 시스템은 사람의 시각과 매우 유사하게 깊이를 인식할 수 있습니다. 두 카메라가 동일한 장면을 캡처하면 동일한 물체가 왼쪽과 오른쪽 이미지에서 약간 다른 위치에 나타납니다. 이 차이를 불균형.

시스템은 보정 파라미터와 삼각 측량 원리를 사용하여 각 픽셀의 깊이를 계산합니다:

깊이=초점 거리×기준선 간격\text{뎁스} = \frac{\text{초점 거리} \times \text{Baseline}}{\text{Disparity}}깊이=불균형초점 거리×기준선​

여기에서 기준선-두 카메라 사이의 거리는 보정 중에 정확하게 결정되는 중요한 매개 변수입니다.

---

실무에서의 캘리브레이션: 정확성이 가장 중요합니다

실제 애플리케이션에서 캘리브레이션 정확도는 다음과 같은 신뢰성을 직접적으로 결정합니다. 장애물 회피 및 내비게이션. 작은 보정 오류라도 먼 거리에서는 상당한 깊이 부정확성이 발생할 수 있습니다.

따라서 일반적으로 전문적인 드론 캘리브레이션이 필요합니다:

• 고정밀 캘리브레이션 보드

• 엄격하게 통제되는 환경(조명, 온도 등)

• 여러 번의 캘리브레이션을 실행하여 평균 결과를 도출하여 신뢰성 향상

• 특히 충격이나 큰 온도 변화 후에는 주기적으로 재보정해야 합니다.

---

앞으로의 전망

드론 애플리케이션이 계속 확장됨에 따라 스테레오 비전 보정 기술도 빠르게 발전하고 있습니다. 다음과 같은 새로운 접근 방식이 등장하고 있습니다. 자체 보정 그리고 딥러닝 기반 보정 는 프로세스를 더욱 자동화하고 강력하게 만들고 있습니다.

미래에는 드론이 비행 중에 동적으로 스스로를 보정하여 복잡하고 변화하는 환경에 실시간으로 적응할 수 있게 될 것입니다.

스테레오 비전 보정은 종종 보이지 않지만 안전하고 정밀한 드론 작동의 초석입니다. 이러한 세심한 계산을 통해 드론은 3차원 세계를 인식하는 데 필요한 “지능적인 눈'을 갖게 되어 모든 잠재적 위험을 지능적으로 피하면서 하늘을 자유롭게 날아다닐 수 있습니다.