Scaniverse 3.0 mit Gaussian-Splatting-Modus

Scaniverse 3.0 mit Gaussian-Splatting-Modus

Niantic, der Entwickler hinter Pokémon Go, hat ein Update für seine 3D-Scan-App Scaniverse veröffentlicht. Version 3.0 bringt auf iOS-Geräten die Unterstützung für 3D-Gaussian-Splatting - eine neuere Technik für bessere 3D-Scans, die lokal berechnet und ohne aufwendige Nachbearbeitung genutzt werden können. Ihre Stärke liegt in der Darstellung von Lichtreflexionen und -brechung. Dazu werden die Scans auch nicht auf eine Cloud hochgeladen.

Hier klicken, um den Inhalt von YouTube anzuzeigen.
Erfahre mehr in der Datenschutzerklärung von YouTube (öffnet in neuem Tab).

Im Kern basieren sie auf der mathematischen Funktion der Gaußschen Glockenkurve. Sie ist einigen von euch sicher auch als Normalverteilung bekannt und wird auch in Spielen für Matchmaking und Ranking verwendet. Hier wird sie verwendet, um darzustellen, wie Licht von einem Punkt (Splat) ausgehend abfällt oder gestreut wird. Einzige Voraussetzung ist ein aktuelles iPhone oder iPad, Android-Nutzer müssen sich noch gedulden. Im eigenen Test läuft das Ganze auch sehr gut und besser als die übliche Methode mit Mesh-Netz. Aus der App erhielt ich jedoch keine brauchbaren 3D-Exporte, eventuell ein Bug. Ich konnte die PLY-Datei aber in keinem Programm weiterverarbeiten. Scaniverse 3.0 mit Gaussian Splats steht ab sofort im App Store zum Download bereit.

Hinweis: Dieser Artikel enthält Affiliate-Links. Kauft ihr darüber ein, erhalten wir eine kleine Provision - ohne Aufpreis für euch und ohne Einfluss auf unsere redaktionelle Meinung.

AngebotBestseller Nr. 1
UGREEN Tablet Halterung Tisch Tablet Ständer bis 11 Zoll (Schwarz) | 0 bis 100 Grad Verstellbar, ABS Hartplastik...
  • 0 bis 100 Grad Verstellbar: UGREEN Tablet Ständer Tisch lässt sich durch kleine Rasterungen fast...
  • Rutsch und Kratzfest: Verdickte Gummierung an diesem Tablet Halter garantiert stabile Halterung...
  • Robust und Sicher: Diese Tablet Halterung besteht aus belastbarer ABS Hartplastik leicht, robust und...
AngebotBestseller Nr. 2
UGREEN Tablet Ständer 360°Drehbar, Tablet Halterung Tisch von 4-13 Zoll | 360°Flexibel und Einstellbar...
  • 【360°Flexibel und einstellbar】Dank der um 360 Grad drehbaren Basis und zwei um 180 Grad...
  • 【Robust und langlebig】UGREEN ipad ständer ist aus robustem Eisen gefertigt und somit stabiler und...
  • 【Kompakt und leicht zu tragen】 UGREEN Tablet Halterung kann vollständig auf Taschenformat gefaltet...
Bestseller Nr. 3
TabHolderix Tablet Bodenständer, 360° Drehbarer Tablet-Ständer, Verstellbare Halterung, Kompatibel mit iPad und...
  • 【Befreien Sie Ihre Hände】Dieser Tablet-Ständer hält Ihr Tablet oder Smartphone sicher im perfekten...
  • 【Flexible Einstellung aus verschiedenen Winkeln】Dieser Tablet-Ständer, kompatibel mit iPad, verfügt...
  • 【Stabile Basis und zuverlässige Struktur】 Die verdickte Metallstange und die rutschfeste Metallbasis...
Fehler im Artikel entdeckt? Hier melden.
Avatar-Foto

Als ehrenamtlicher First-Level-Support und quasi Apple-Jünger, der gerne seine Lebenszeit in Tech-Blogs verbrennt, stehe ich auch gerne für hitzige Diskussionen zur Verfügung.

10 Kommentare

  1. Wird direkt mal heruntergeladen…

  2. Jemand Anders sagt:

    Habe ich auch gerade getestet. Die Ergebnisse sind, sagen wir es einfach mal, sehr mies. Unscharf ohne Ende, keine Ahnung, wie die das in den Videos so gut hinbekommen haben. Mit einem iPhone 15 Pro Max ausprobiert…
    Von mir keine Empfehlung.

    • @Jemand AndersBei mir gehts eigentlich. Brauchte mehrere durchläuft aber

    • @Jemand AndersVon der Funktion her kein simpler Scan, sondern gute Beleuchtung, Durchgänge etc. vorausgesetzt. Fslls man die ersten Handsxanner noch kennt, bevor es Flachbett-Scanner gab, die statt drei in einem Durchgang scannten, es braucht etwas Zeit, Geduld eben und eine „ideale“ Umgebung.

  3. Ich beschäftige mich schon etwas länge rmit Gaussian Splatting und würde mal ganz stark behaupten, dass die Berechnung der Scans doch in der Cloud stattfindet! Selbst meine RTX 3090 ti benötigt für die Berechnung eines Modells mit Standardwerten ca. 30 Minuten. Also aufpassen was ihr da an eventuell sensiblen Sachen scannt.
    Sollte das doch in ein paar Minuten auf dem Smartphone berechnet werden, kann der Scan eigentlich nichts taugen.

    Und das keine aufwendige Nachbearbeitung nötig ist, sei auch mal dahingestellt. Normalerweise muss der Scan schon gesäubert werden und zumindest eine Crop Box gezogen werden.

    PLY Dateien kann man u.a. mit CloudCompare, Meshlab, Blender oder über das Luma.ai plugin in der Unreal Engine bearbeiten. Da ist dann aber nichts mit wenig Aufwand.

    Sorry, aber insgesamt sehr schwacher „Artikel/News“. Wenn man so garnicht in der Materie drin ist, sollte man wenn schon nüchtern darüber berichten und nicht von eventuellen Bugs reden…

    • @BraveNein, du hast unrecht. Hatte das vorher auch versucht. Es ist lokal und geht auch im Flugmodus. Das nächste mit der PLY-file: ich hatte dir in unterschiedlichen Anwendungen geöffnet, in keinem ging es. Deine Anwendungen, außer Unreal, hatte ich nicht versucht, aber andere hatte ich bereits versucht und nur eine Kugel mit dem Bild erhalten. Anstatt direkt auf so eine harte Art Kritik zu üben, Evtl vielleicht deine Behauptungen erstmal überprüfen;)

      • @Mike LeitnerWieviele Fotos wurden bei deinem Experiment denn zur Berechnung genutzt? Wieviele Schritte insg. berechnet? Wie das Ganze „sehr gut laufen“ kann wenn kein Export möglich ist und andere Programme die Datei nicht lesen können ist jetzt auch fraglich. Welches iPhone oder Tablet hast du genutzt und wie lange hat die Berechnung gedauert? Wie ist das Ergebnis in der App bezüglich der Qualität und Details?
        Fragen die mich wirklich interessieren, da wie schon geschrieben die Berechnung für gute Ergebnisse auf einer schnellen Grafikkarte schon um die 30 Minuten dauern können. Selbst bei Cloud-Diensten wie Luma oder polycam dauert die Berechnung etwas.
        Und ich kann erstmal nur Behauptungen aus meiner Erfahrung aufstellen, weil ich selbst mit Android unterwegs bin ;).

        • @BraveDas erklärt einiges. Die Qualität ist, sagen wir mal SD. Der rechnet anscheinend mit einem Splat-AI Modell. Die Berechnung dauert immer so 60s und kann dann nochmal öfter mit der Länge ausgeführt werden. iPhone 15 Pro. Der Scan läuft sehr gut, der Export nicht 🙂

  4. Nitpicker Smartyass sagt:

    Die ply von nerf Modellen sind idt point clouds mit zusätzlichen Attributen (die Reflection values z. B.), die sollten mit jedem entsprechend flexiblen Importer zu öffnen sein, aber eben ohne Mesh-surface. Bei „billig Scans“ werden meist nur wenige Punkte zuverlässig erfasst, daher sind die ply oft minimal, die „Qualität“ kommt vom „splatting“.
    Diese Technik ist nicht dazu gedacht, 3d „meshes“ zu erzeugen (da ist sfm ungeschlagen), sondern dazu, Kamera transforms zu interpolieren.
    Bei niedrigen Auflösungen sind – bei entsprechenden „shortcuts“ für das Training, z. B. Bekannte intrinsics der Kamera – Handy CPUs ausreichend, allerdings sprechen kurze Berechnungen auch für niedrige steps, also extrem „fragile“ Ergebnisse.
    Es kommen jetzt gerade neue Modelle rund um die Darstellungstechnik (splatting) raus, z. B. Frosting, die schneller sind. „flexible high end Qualität“ liefern die aber auch nicht.
    Ist eben alles noch sehr im Spielerei Stadium.

Moin! Lass uns respektvoll diskutieren.

Wir freuen uns auf sachliche, konstruktive und gerne humorvolle Beiträge. Da wir hier wie mit real anwesenden Personen umgehen möchten, löschen wir Kommentare, die nur herabwürdigen oder völlig am Thema vorbeigehen. Ein Recht auf Veröffentlichung besteht nicht. Mit dem Absenden stimmst du unserer Datenschutzerklärung und der Speicherung deiner Daten zu.