Video: Die Welt als LiDAR-Abtastung – Durch die Augen des iPad Pro 2020 geschaut
Zwar verfügt das vor einigen Tagen aktualisierte iPad Pro nur über einen unwesentlich schnelleren Prozessor (siehe unterhalb dieser Meldung verlinkte Artikel), dafür hat sich beim Kameramodul aber einiges getan. Schon auf den ersten Blick erkennt man die Unterschiede zum Vorgänger. Blickte einen zuvor nur eine Kamera an, so sind es nun gleich drei Augen. Bei einem davon handelt es sich um den neuen LiDAR-Sensor, welcher den Bereich hinter dem iPad abtastet und Tiefeninformationen ermittelt. Auf diese Weise weiß das AR-System, wie weit Gegenstände oder Wände vom iPad entfernt sind, was präzisere Berechnungen und realistischere AR-Einblendungen ermöglicht.
Video zeigt die Sicht des iPad Pro 2020Ein interessantes Video verdeutlicht, wie das iPad Pro 2020 seine Umgebung sieht und wie das System den Raum vermisst. Die Aufnahmen nehmen den Zuschauer mit auf einen Rundgang durch das Haus und verdeutlichen die Arbeitsweise. Ohne sichtbare Verzögerungen erstellt die Sensorik zusammen mit ARKit das Mesh ("Gittergewebe"), welches in hoher Präzision rund um die Objekte aufgebaut wird. Beeindruckend daran ist nicht nur der verfügbare Detailreichtum, sondern auch die hohe Geschwindigkeit. Dieses Zusammenspiel ermöglicht es, auch Objekte in Bewegung zu erfassen und diese in die Szene einzubinden.
Sample-Projekt von AppleBei Sekunde 28 des eingebundenen Videos ist das eigentliche Kamerabild deaktiviert, stattdessen sieht man nur noch die eigentlichen Objekte in der Szene. Das Mesh dokumentiert, wie das dritte Auge des Kameramoduls dabei den Raum erfasst und abgebildet hat. Angefertigt wurden die Aufnahmen mithilfe eines
Sample-Projekts von Apple, welches Entwicklern einen Einblick in die Funktionsweise gibt und darlegt, wie die Erkennung von Flächen und Gegenständen funktioniert. Der Artikel ist auch ohne Entwicklerzugang aufzurufen, setzt allerdings technisches Grundverständnis voraus. Einen näheren Blick auf die gerade erst veröffentlichte ARKit-Version 3.5 hatten wir in diesem Artikel geworfen:
. Beschrieben sind darin die zusätzlichen Funktionen und neuen Möglichkeiten.