사진 한 장에서 삼각형 메시까지, TaoFlowForge가 점과 면을 만드는 순서
안녕하세요. 3D프린팅·CNC·다양한 소재 전문 플랫폼 기업 아이컨택입니다.
TaoFlowForge는 사진 한 장을 입력받아 점의 위치를 거칠게 잡고 다듬은 뒤, 점 사이의 선과 삼각형 면을 완성한다.
AI 개념 이미지: 제품 사진에서 꼭짓점을 배치하고 연결해 삼각형 메시를 만드는 과정을 보여준다. 실제 장비나 제품을 촬영한 사진은 아니다.
삼각형 메시에서는 왜 연결이 중요한가
삼각형 메시는 물체 표면을 꼭짓점과 면으로 나타낸 3D 형태다. 리깅, 애니메이션, 화면 렌더링에 쓰인다. 사진 속 물체와 비슷한 모양을 만들더라도 점과 면이 복잡하게 얽히면 다음 작업에서 다루기 어려워진다.
논문은 복잡한 연결이 표면에 이미지를 배치하는 UV 펼치기를 늦추고, 불규칙한 연결이 움직임을 위한 뼈대를 붙이는 리깅과 애니메이션을 어렵게 한다고 설명한다. 면 수가 지나치게 많아 저장 용량이 커지면 기기에서 실시간으로 화면을 그리는 데도 부담이 생긴다.
연구진에 따르면 SDF라는 중간 표현을 거쳐 메시로 바꾸는 모델은 대체로 면이 지나치게 많고 연결 구조도 불규칙하다. 적정한 면 수와 정돈된 연결을 얻기 위해, 최근 연구는 이 중간 단계를 거치지 않고 메시 구조를 직접 만드는 방식을 탐색해 왔다.
TaoFlowForge의 단일 이미지 메시 생성 과정
모델은 낮은 해상도에서 물체의 꼭짓점, 즉 표면을 구성할 점들의 대략적인 위치부터 만든다. 이어 기본 형태를 더 세밀한 점의 집합으로 다듬는다. 연구진은 이 순서가 전체 구조를 지키면서 세부 형태를 표현하는 데 도움이 된다고 설명한다.
다음에는 어느 점끼리 모서리로 이어질지 예측한다. 연결된 세 점이 닫힌 고리를 이루면 삼각형 면으로 복원한다. 점에서 표면이 향하는 방향도 함께 예측해, 면의 방향이 그 예측과 맞지 않을 때는 점 두 개의 순서를 바꾼다.
학습 자료도 이미지와 메시를 짝지어 준비했다. 연구진은 타오바오 내부 자산과 내부 제작 자산, Objaverse·TexVerse 등의 공개 자산을 여러 방향에서 렌더링했다. 그런 뒤 면과 모서리의 연결 상태, 점이 퍼진 정도를 살펴 자료를 선별했다.
기존 공개 모델과의 비교에서 확인된 것
순차 생성 방식은 메시를 한 줄의 기호로 바꾼 뒤 다음 기호를 하나씩 예측한다. 연구진은 이 과정에서 원래 3D 형태의 구조 정보가 사라져 생성이 불안정해지는 경우가 잦다고 설명한다.
TaoFlowForge를 다룬 동료 심사 전 사전 공개 논문은 LATO.2와 EdgeRunner에 같은 단일 이미지를 넣어 비교했다. 공개 시험 자료 Toys4K와 연구진이 마련한 TE-388에서 연구진은 TaoFlowForge가 순차 생성 방식보다 나았고, 공개 메시 구조 생성 모델 가운데 최고 수준의 결과를 냈다고 보고했다. 이는 디지털 메시 평가 결과다.
시각적 비교에서는 LATO.2도 전체 형태를 잘 복원했다. TaoFlowForge는 가까운 범위의 삼각형 연결이 더 정돈됐고 가늘고 가지처럼 뻗은 부분을 더 잘 보존했다. 제품 이미지로 만든 3D 자산을 편집한다면, 아이컨택은 이런 가는 부분과 주변 연결을 외형 다음에 살펴볼 만하다고 본다.
댓글
댓글 쓰기