↑↓ naviguer · ↵ ouvrir · échap pour fermer

Reconstruction 3D à partir d’images

De quelques photos à un nuage de points et une scène 3D explorable, avec les poses des caméras. La même géométrie que le laboratoire de vision stéréo, étendue à de nombreuses vues.

StatutEn cours
Réalisé avecCOLMAPGaussian splattingWebGL
Version réduite

Une version réduite du projet. La version complète est liée ci-dessous.

Comment ça marche
  • 01Assemblez une petite forme avec des tours, puis faites-en le tour et prenez des photos d’où vous voulez. L’algorithme ne voit jamais votre forme, seulement les photos.
  • 02Chaque photo est réduite à une silhouette noir et blanc : l’objet est quelque part à l’intérieur. La forme est reconstruite par sculpture. Un bloc d’espace n’est conservé que s’il tombe dans la silhouette de chaque photo qui le voit : chaque nouveau point de vue retire un peu plus de ce qui n’est pas là. Avec une seule photo, le résultat est un long prisme dans la direction de visée, car la profondeur est inconnue. Avec quelques photos bien réparties, il se rapproche de la vraie forme.
  • 03Les blocs rouges sont de la matière qu’aucune photo n’a encore écartée. Ils montrent ce que coûte un point de vue manquant, comme le creux sous un surplomb qu’aucune silhouette ne révèle. Les systèmes réels apparient aussi des points entre photos pour retrouver la position des caméras ; ici les positions sont connues, pour se concentrer sur l’idée.
Au programme
  • 01Nuage de points épars et poses de caméras calculés hors ligne, visibles et orbitables dans le navigateur.
  • 02Un clic sur une caméra affiche la photo qu’elle a prise.
  • 03En bonus : un splat gaussien d’une scène réelle.
  • 04Un article qui fait le lien avec le laboratoire de vision stéréo : deux vues, puis de nombreuses vues.
Plus dans cette catégorie
IA et apprentissage automatique

HARNAIS SSI

Un harnais de cybersécurité pour les agents de code IA, comme Claude […]

CybersecurityAI agents