Redwood 3dscan

EINSTELLUNG DES PROJEKTS

Dieses Projekt wird von Intel nicht mehr gepflegt.
Intel hat die Entwicklung und Beiträge zu diesem Projekt eingestellt, einschließlich, aber nicht beschränkt auf Wartung, Fehlerbehebungen, neue Versionen oder Updates.
Intel akzeptiert keine Patches mehr für dieses Projekt.
Wenn Sie dieses Projekt dauerhaft nutzen müssen, daran interessiert sind, es unabhängig weiterzuentwickeln, oder Patches für die Open-Source-Software-Community pflegen möchten, erstellen Sie bitte Ihren eigenen Zweig dieses Projekts.

Ein großer Datensatz von Objektscans (redwood-3dscan)

Abstrakt

Wir haben einen Datensatz aus mehr als zehntausend 3D-Scans realer Objekte erstellt. Um den Datensatz zu erstellen, haben wir 70 Bediener rekrutiert, sie mit mobilen 3D-Scan-Setups für Endverbraucher ausgestattet und sie dafür bezahlt, Objekte in ihrer Umgebung zu scannen. Die Bediener scannten Objekte ihrer Wahl außerhalb des Labors und ohne direkte Aufsicht durch Computer-Vision-Experten. Das Ergebnis ist eine große und vielfältige Sammlung von Objektscans: von Schuhen, Tassen und Spielzeug bis hin zu Flügeln, Baufahrzeugen und großen Skulpturen im Freien. Wir haben mit einem Anwalt zusammengearbeitet, um sicherzustellen, dass die Datenerfassung nicht gegen Datenschutzbestimmungen verstößt. Die erfassten Daten wurden unwiderruflich öffentlich zugänglich gemacht und sind frei verfügbar.

Sie können den Datensatz unter http://redwood-data.org/3dscan/ in der Vorschau anzeigen und erkunden.

Datensatzorganisation

Wenn Sie unsere Download-Skripte verwenden, wird der heruntergeladene Datensatz in data/ gespeichert.

data
├── rgbd (10,933 RGBD scans, each contains multiple RGB and depth images)
│   ├── 00001.zip
│   ├── 00002.zip
│   ├── ...
│   ├── 11097.zip
│   └── 11098.zip
├── mesh (441 reconstructed models)
│   ├── 00004.ply
│   ├── 00033.ply
│   ├── ...
│   ├── 10548.ply
│   └── 10664.ply
└── video (10,933 videos created from images)
    ├── 00001.mp4
    ├── 00002.mp4
    ├── ...
    ├── 11097.mp4
    └── 11098.mp4

• Datensatzgröße: Der gesamte Datensatz ist ca. 4 TB groß.
• RGBD-Scans: Es gibt 10.933 RGBD-Scans. Jeder Scan enthält mehrere RGBD-Bilder.
• Netze: Es gibt 441 rekonstruierte Netzmodelle.
• Videos: Es gibt 10.933 Videos, die aus RGBD-Bildern erstellt wurden.
• Kategorien: 9.131 RGBD-Scans sind in 320 Kategorien kategorisiert. Jeder Scan hat höchstens eine Kategorie.

Beispielverwendung

 import redwood_3dscan as rws

# Print RGBD scans (list)
print ( rws . rgbds )

# Print meshes (list)
print ( rws . meshes )

# Print categories (dict: string->list)
print ( rws . categories )

# Print all scan_id of the "sofa" category
print ( rws . categories [ "sofa" ])

# Download by scan_id "00033"
# Download will be skipped if the resource is unavailable
# e.g. some RGBD images may not come with mesh.
rws . download_rgbd ( "00033" )  # Save to data/rgbd/00033.zip, if available
rws . download_mesh ( "00033" )  # Save to data/mesh/00033.ply, if available
rws . download_video ( "00033" ) # Save to data/video/00033.mp4, if available
rws . download_all ( "00033" )   # Downloads rgbd, mesh, and video together

# Download by category "sofa"
rws . download_category ( "sofa" )

Sie können Open3D verwenden, um die Modelle zu laden und zu visualisieren.

 # For installation guides, see:
# http://www.open3d.org/docs/release/getting_started.html
pip install open3d

 import redwood_3dscan as rws
import open3d as o3d

rws . download_mesh ( "00033" )
mesh = o3d . io . read_triangle_mesh ( "data/mesh/00033.ply" )
mesh . compute_vertex_normals ()
o3d . visualization . draw_geometries ([ mesh ])

Lizenz

Der gesamte Datensatz, einschließlich RGB-D-Scans und rekonstruierter Modelle, ist gemeinfrei. Jeder Teil des Datensatzes kann bei entsprechender Quellenangabe für jeden Zweck verwendet werden. Wenn Sie Daten verwenden, zitieren Sie bitte unseren technischen Bericht.

 @article { Choi2016 ,
          author    = { Sungjoon Choi and Qian-Yi Zhou and Stephen Miller and Vladlen Koltun } ,
          title     = { A Large Dataset of Object Scans } ,
          journal   = { arXiv:1602.02481 } ,
          year      = { 2016 } ,
        }

Dateiformat

Die RGB-D-Sequenzen wurden mit PrimeSense Carmine-Kameras aufgenommen. Die Auflösung beträgt 640×480, die Bildrate beträgt 30Hz. Jeder Scan wird in einem ZIP-Archiv verpackt, das aufeinanderfolgende Farbbilder enthält, die als JPG gespeichert sind, und Tiefenbilder, die als 16-Bit-PNG gespeichert sind, wobei Pixelwerte die Tiefe in Millimetern darstellen. Der erste Teil eines Dateinamens gibt die Bildnummer an und der zweite Teil liefert einen Zeitstempel in Mikrosekunden.

Die Brennweite beträgt für beide Achsen 525 und der Hauptpunkt ist (319,5, 239,5). Die Tiefenbilder werden den Farbbildern zugeordnet.

Die rekonstruierten Modelle liegen alle im PLY-Dateiformat vor.