Metashape-Verarbeitungsbericht: RMSE und Genauigkeit erklärt

Ein Verarbeitungsbericht von Agisoft Metashape ist kein einfaches Zertifikat, das lediglich „bestanden“ oder „nicht bestanden“ bescheinigt. Es handelt sich um eine technische Zusammenfassung der Vermessung, der Kamerakalibrierung, der Ausrichtung, der Referenzdaten und der erstellten Produkte. Um zu beurteilen, ob ein Projekt genau ist, müssen Sie mehrere Werte zusammen betrachten: den Reprojektionsfehler, den Kamerapositionsfehler, die Abweichungen der Bodenkontrollpunkte (GCP), den Kontrollpunktfehler, die Bodenabtastung (GSD) sowie die Genauigkeit der Referenzmessungen.

In diesem Leitfaden wird erläutert, was die wichtigsten Berichtswerte bedeuten, wie der RMSE berechnet wird, welche Ergebnisse einen unabhängigen Nachweis der Genauigkeit liefern und wie sich die häufigsten Warnmuster diagnostizieren lassen. Er richtet sich an Anwender aus den Bereichen Drohnenkartierung, Vermessung, Bauwesen, Archäologie und anderen professionellen Photogrammetrie-Arbeitsabläufen in Agisoft Metashape Professional.

Wie liest man einen Metashape-Verarbeitungsbericht?

Beginnen Sie mit den Projektanforderungen und nicht mit einem universellen Fehlergrenzwert. Überprüfen Sie das Koordinatenreferenzsystem und den Höhenbezugspunkt, notieren Sie die GSD, überprüfen Sie die Bildausrichtung und den Reprojektionsfehler der Bindepunkte, überprüfen Sie die Kamerareferenzabweichungen und bewerten Sie anschließend die Kontrollpunkte. Kontrollpunkte sind der aussagekräftigste Genauigkeitstest, wenn sie unabhängig voneinander vermessen, über das gesamte Gelände verteilt und von der Bündelausgleichsberechnung ausgeschlossen wurden.

Berichtswert	Was er misst	Was er nicht belegt
Reprojektionsfehler	Durchschnittlicher Restfehler der Vermessungspunktbeobachtungen im Bildraum, üblicherweise in Pixeln ausgedrückt	Absolute Genauigkeit einer Karte oder Vermessung
Fehler bei der Kameraposition	Abweichung zwischen den geschätzten Kamerapositionen und den zugehörigen GNSS-Koordinaten	Genauigkeit am Bodenpunkt oder Produktgenauigkeit
GCP-Fehler	Residuen an Kontrollpunkten, die zur Einschränkung und Optimierung der Lösung verwendet werden	Genauigkeit der unabhängigen Validierung
Fehler beim Kontrollpunkt	Die Abweichungen an den vermessenen Punkten wurden von der Optimierung ausgeschlossen	Genauigkeit außerhalb des Bereichs und der Bedingungen, die durch diese Punkte repräsentiert werden
GSD	Ungefähre Bodenfläche, die einem Bildpixel entspricht	Garantierte horizontale oder vertikale Genauigkeit

Das Grundprinzip ist einfach: Ein in sich konsistentes Modell kann dennoch falsch positioniert, skaliert oder vertikal referenziert sein. Ein geringer Reprojektionsfehler ist zwar wertvoll, muss jedoch durch geeignete Kontrollmaßnahmen und eine unabhängige Validierung untermauert werden.

Was bedeutet „RMSE“ in Agisoft Metashape?

RMSE steht für „Root Mean Square Error“(quadratischer Mittelwertfehler). Dabei wird eine Reihe von Residuen zu einem einzigen Wert zusammengefasst, wobei größere Fehler stärker gewichtet werden:

RMSE = √(Σe² / n)

Dabei ist e ein einzelner Restwert und n die Anzahl der Beobachtungen. Wenn die horizontalen Fehler von vier Kontrollpunkten 0,01 m, 0,02 m, 0,03 m und 0,06 m betragen, wirkt sich der größte Restwert stärker auf den RMSE aus, als dies bei einem einfachen arithmetischen Mittel der Fall wäre.

Metashape kann einzelne Komponenten wie X, Y und Z sowie den kombinierten horizontalen oder Gesamtfehler angeben. In einem projizierten Koordinatensystem:

• X und Y bezeichnen die beiden horizontalen Koordinatenkomponenten.
• XY kombiniert die horizontalen Komponenten.
• Z bezeichnet die vertikale Komponente.
• Der XYZ-Fehler bzw. der Gesamtfehler umfasst alle drei räumlichen Komponenten.

Überprüfen Sie stets die Einheiten und das Koordinatensystem. In Metern angegebene Abweichungen lassen sich nicht korrekt interpretieren, wenn in einem Datensatz ellipsoidische Höhen und in einem anderen orthometrische Höhen verwendet werden. Sollte das gesamte Projekt um einen nahezu konstanten Betrag vertikal verschoben sein, lesen Sie unseren Leitfaden zur Korrektur vertikaler Verschiebungen in RTK-Drohnenmodellen und prüfen Sie, ob für das Projekt ein Geoid erforderlich ist.

Die Hauptabschnitte eines Metashape-Verarbeitungsberichts

Der genaue Aufbau hängt von der Metashape-Version und den erstellten Produkten ab, doch ein professioneller Bericht enthält in der Regel Vermessungsdaten, die Kamerakalibrierung, die Kamerastandorte, Markerfehler, Verarbeitungsparameter sowie Produktstatistiken.

1. Vermessungsdaten, Bildabdeckung und GSD

Im einleitenden Abschnitt werden die Anzahl der Bilder, die Kamerastationen, die Flughöhe, das Erfassungsgebiet, die Kontrollpunkte, die Projektionen und die GSD zusammengefasst. Nutzen Sie diesen Abschnitt, um zu überprüfen, ob der Bericht den richtigen Ausschnitt beschreibt und ob die grundlegenden Vermessungsdaten plausibel sind.

GSD ist ein Auflösungsindikator und kein Genauigkeitszertifikat. Ein Projekt mit einem GSD von 2 cm weist nicht automatisch eine absolute Genauigkeit von 2 cm auf. Die tatsächliche Genauigkeit hängt zudem von der Bildschärfe, der Überlappung, der Kamerageometrie, der Kalibrierungsstabilität, der GNSS- oder Kontrollpunktqualität, dem Gelände, der Platzierung der Marker sowie den gewählten Verarbeitungsoptionen ab.

2. Schnittpunkte und Reprojektionsfehler

Metashape identifiziert Merkmale in überlappenden Fotos und schätzt deren dreidimensionale Positionen. Der Reprojektionsfehler gibt an, wie genau die geschätzten 3D-Punkte auf ihre gemessenen Bildpositionen zurückprojiziert werden. Er wird in der Regel in Pixeln angegeben.

Ein relativ geringer und stabiler Reprojektionsfehler deutet auf eine gute Konsistenz im Bildraum hin. Ein hoher Wert oder ein Wert, der auch nach sorgfältiger Optimierung hoch bleibt, kann auf unscharfe Bilder, geringe Überlappungen, sich wiederholende Texturen, sich bewegende Objekte, ungenaue Zuordnungen, eine instabile Kalibrierung oder eine schlechte Aufnahmgeometrie hindeuten. Das aggressive Löschen von Verbindungspunkten, nur um eine geringere Anzahl zu erzwingen, kann jedoch das Netzwerk schwächen. Eine ausführlichere Erläuterung finden Sie unter „Reprojektionsfehler in Agisoft Metashape: Was ist ein guter Wert?“

3. Kamerakalibrierung

Im Abschnitt „Kalibrierung“ werden die geschätzten internen Kameraparameter angezeigt, darunter Brennweite, Hauptpunkt und Koeffizienten für die Linsenverzerrung. Diese Parameter werden während der Bündelausgleichsberechnung angepasst, sofern das ausgewählte Kameramodell dies zulässt.

Achten Sie auf physikalisch plausible Ergebnisse, Konsistenz zwischen echten Kameragruppen und starke Parameterkorrelationen. Große oder instabile Veränderungen können ein Anzeichen für eine unzureichende Bildgeometrie, gemischte Brennweiten, Rolling-Shutter-Effekte, beschnittene Bilder oder ein überparametrisiertes Modell sein. In unseren Anleitungen zum Verständnis der Ergebnisse der Kamerakalibrierung und zur Auswahl der Parameter für die Kameraoptimierung werden diese Werte ausführlicher erläutert.

4. Fehler bei der Kameraposition

Der Kamera-Lagefehler vergleicht die durch photogrammetrische Anpassung geschätzten Kameramittelpunkte mit den aus EXIF-Daten, einer RTK/PPK-Datei oder einer anderen Referenzquelle importierten Koordinaten. Er beantwortet die Frage: Um wie weit haben sich die angepassten Kamerapositionen von ihren Referenzpositionen entfernt?

Dieser Wert sollte im Zusammenhang mit der angegebenen Kameragenauigkeit betrachtet werden. Wenn von RTK-bestimmten Kamerapositionen eine Genauigkeit im Zentimeterbereich erwartet wird, der Bericht jedoch Abweichungen im Dezimeter- oder Meterbereich aufweist, sollten Sie die Referenzdaten überprüfen, bevor Sie das Modell akzeptieren. Häufige Ursachen hierfür sind:

• falsche oder zu optimistische Einstellungen zur Kameragenauigkeit;
• kombinierte FIX-, FLOAT- und eigenständige GNSS-Lösungen;
• falsches Koordinatensystem oder falsche Achsreihenfolge;
• Abweichung zwischen ellipsoidaler und orthometrischer Höhe;
• keine Korrektur der Antenne, des Hebelarms oder der GNSS-Verschiebung;
• fehlerhafte Synchronisierung der Zeitstempel;
• eine unzureichende Kamerakalibrierung oder Fluggeometrie.

Kamerareste stellen keine direkten Messungen der Bodengenauigkeit dar. Die Kamerapositionen sind Beobachtungspunkte im Passungsvorgang; es handelt sich dabei nicht um unabhängige Kontrollpunkte. Befolgen Sie für RTK-spezifische Import- und Genauigkeitseinstellungen unseren Arbeitsablauf zur DJI-RTK-Koordinatenverarbeitung.

5. GCP- und Checkpoint-Fehler

Markertabellen können Referenzkoordinaten, geschätzte Koordinaten, X/Y/Z-Abweichungen, den Gesamtfehler sowie Bildabweichungen enthalten. Bildabweichungen werden in Pixeln angegeben und helfen dabei, eine ungenaue Markerplatzierung in einzelnen Fotos zu erkennen. Koordinatenabweichungen werden in den Koordinateneinheiten des Projekts angegeben.

Ein Punkt mit einem großen Bildrestwert könnte auf dem falschen Pixel platziert, anhand zu weniger Bilder vermessen oder in einem schrägen Winkel beobachtet worden sein. Ein Punkt mit kleinen Bildrestwerten, aber einem großen Koordinatenrestwert könnte hingegen eine falsche Vermessungskoordinate, einen falschen Höhenbezugspunkt oder eine falsche Markierungsbezeichnung aufweisen.

6. Verarbeitungsparameter und Produkte

Der Bericht enthält zahlreiche der Einstellungen, die zur Erstellung der Punktwolke, des DEM, des Orthomosaiks oder des Modells verwendet wurden. Dieser Abschnitt ist für die Rückverfolgbarkeit von entscheidender Bedeutung. Überprüfen Sie das ausgewählte Koordinatensystem, die Datenquelle, die Auflösung, den Interpolationsmodus, die Filtereinstellungen und die Exportparameter. Selbst bei einer geometrisch korrekten Ausrichtung kann das Ergebnis ungeeignet sein, wenn die falsche Oberfläche, das falsche CRS oder die falsche Ausgabeauflösung ausgewählt wurde.

GCP-Fehler vs. Checkpoint-Fehler: Welcher Wert ist genauer?

Der Checkpoint-RMSE gilt im Allgemeinen als der aussagekräftigere Indikator für die externe Genauigkeit, vorausgesetzt, die Checkpoints sind zuverlässig und unabhängig. GCPs dienen der Georeferenzierung und der Einschränkung des Modells, sodass ihre Residuen beschreiben, wie gut die angepasste Lösung zum Kontrollnetz passt. Checkpoints werden bei der Optimierung nicht berücksichtigt und dienen dazu, die Lösung an bekannten Standorten zu überprüfen.

In den offiziellen Leitlinien von Agisoft werden die beiden Funktionen unterschieden: Aktivierte Marker dienen als Kontrollpunkte, während deaktivierte Marker als Prüfpunkte fungieren. Agisoft empfiehlt zudem, mindestens drei bis fünf Punkte zur Beurteilung der Genauigkeit beizubehalten. Siehe das offizielle Tutorial „Kontroll- und Prüfpunkte für Luftvermessungen “.

Eine gute Gestaltung der Kontrollpunkte ist ebenso wichtig wie der endgültige RMSE:

• Verteilen Sie die Kontrollpunkte über das gesamte Gelände, einschließlich der Ränder und Höhenunterschiede.
• Platzieren Sie nicht alle Kontrollpunkte nahe der Mitte des Blocks.
• Verwenden Sie klar erkennbare, stabile Ziele.
• Messen Sie die Kontrollpunkte mit einer Methode, deren Genauigkeit den Toleranzanforderungen des Projekts entspricht.
• Bitte berücksichtigen Sie die Koordinaten der Kontrollpunkte nicht bei der Kameraoptimierung.
• Geben Sie die Anzahl der Kontrollpunkte, den RMSE und den größten Residuenwert an, nicht nur den kombinierten Durchschnittswert.

Um Kontrollpunkte korrekt zu setzen und zu markieren, nutzen Sie bitte unsere Schritt-für-Schritt-Anleitung zu GCPs für Agisoft Metashape. Der offizielle Workflow von Agisoft zur Verarbeitung von Luftbilddaten mit GCPs erläutert zudem, wie Referenzkoordinaten- und Reprojektionsfehler bei der Kameraoptimierung minimiert werden.

Was ist ein guter RMSE-Wert in Metashape?

Es gibt keinen einheitlichen RMSE-Wert, der für jedes Metashape-Projekt geeignet ist. Ein Checkpoint-Fehler von 5 cm kann für eine großflächige Umweltvermessung hervorragend sein, für eine hochpräzise technische Inspektion jedoch inakzeptabel. Beurteilen Sie das Ergebnis anhand folgender Kriterien:

1. die für das Lieferergebnis vereinbarte Genauigkeitsspezifikation;
2. die Genauigkeit und Unabhängigkeit der Checkpoint-Umfrage;
3. das Projekt GSD und die Erfassungsgeometrie;
4. die Anzahl und die räumliche Verteilung der Kontrollpunkte;
5. horizontale und vertikale Ergebnisse werden getrennt ausgewertet;
6. das richtige Koordinatensystem und den richtigen Höhenbezugspunkt.

Häufig ist es sinnvoll, den Fehler eines Kontrollpunkts im Verhältnis zur GSD auszudrücken. Beispielsweise entspricht ein horizontaler RMSE eines Kontrollpunkts von 0,03 m in einem Projekt mit einer GSD von 0,02 m einem Wert von 1,5 GSD. Dieses Verhältnis erleichtert den Vergleich von Projekten, stellt jedoch noch keine allgemein gültige Akzeptanzregel dar.

Häufige Fehlermuster in Metashape-Berichten

Beobachtetes Muster	Wahrscheinliche Interpretation	Was als Nächstes zu überprüfen ist
Geringer Reprojektionsfehler, hoher Checkpoint-Fehler	Das Bildnetz ist zwar intern konsistent, jedoch schlecht skaliert, referenziert oder kontrolliert	Koordinatenreferenzsystem (CRS), Bezugssystem, Verteilung der Kontrollpunkte (GCP), Kontrollgenauigkeit und systematische Verformung
Geringer GCP-Fehler, hoher Checkpoint-Fehler	Die Lösung passt zwar auf die Kontrolldaten, lässt sich jedoch nicht gut auf den gesamten Block verallgemeinern	Überanpassung, schwache Geometrie, gebündelte GCPs, Checkpoint-Qualität und Kalibrierung
Erhebliche Fehler bei der Reprojektion und bei den Markerbildern	Bildmessungen oder die Ausrichtung können unzuverlässig sein	Unschärfe, Überlappungen, Markerplatzierung, falsche Zuordnungen und Kameragruppen
Gute XY-Werte, schlechte Z-Werte	Vertikale Kontrolle, Fluggeometrie oder Höhenbezugssystem können unzureichend sein	Geoid, Ellipsoidhöhen, Schrägaufnahmen, Querfluglinien und Kontrollhöhen
Nahezu konstanter vertikaler Versatz	Eine Abweichung zwischen Bezugssystem und Geoid ist wahrscheinlicher als zufälliges photogrammetrisches Rauschen	Höhensysteme der Quelle und der Ausgabe, Geoidgitter und GNSS-Metadaten
Einige sehr große Checkpoint-Residuen	Möglicher Fehler, falsch beschrifteter Punkt oder lokales Rekonstruktionsproblem	Ursprüngliche Vermessungsnotizen, Sichtbarkeit der Zielpunkte und Bildprojektionen; entfernen Sie niemals einen Punkt ohne dokumentierten Grund

Ein praktischer Arbeitsablauf zur Validierung eines Metashape-Projekts

1. Legen Sie die Toleranz vor der Bearbeitung fest. Getrennte Anforderungen an die horizontale, vertikale und relative Genauigkeit.
2. Überprüfen Sie die Referenzsysteme. Bestätigen Sie die Kamera, den Marker, den Chunk und das Export-Koordinatensystem (CRS), einschließlich des vertikalen Bezugssystems und des Geoids.
3. Überprüfen Sie die Qualität der Quelle. Erkennen Sie unscharfe Bilder, unzureichende Überlappung, sich bewegende Motive und uneinheitliche Kameraeinstellungen.
4. Überprüfen Sie die Ausrichtung. Überprüfen Sie nicht ausgerichtete Kameras, die Abdeckung, die Verteilung der Bindungspunkte und den Reprojektionsfehler.
5. Überprüfen Sie die Kameragruppen und die Kalibrierung. Bitte kombinieren Sie keine Bilder, die mit tatsächlich unterschiedlichen Objektiven, Brennweiten oder Bearbeitungsverläufen aufgenommen wurden, in einer Kalibrierungsgruppe.
6. Legen Sie realistische Referenzgenauigkeiten fest. Verwenden Sie Werte, die vom GNSS oder der Vermessungsmethode unterstützt werden, anstatt unrealistisch niedrige Standardwerte.
7. Überprüfen Sie jede Markierungsprojektion. Korrigieren Sie vor der Optimierung eine fehlerhafte Bildplatzierung.
8. Optimieren Sie gezielt. Wählen Sie für den Datensatz geeignete Kalibrierungsparameter aus und dokumentieren Sie jede wesentliche Anpassung.
9. Bewerten Sie unabhängige Kontrollpunkte. Vergleichen Sie die RMSE-Werte von XY und Z sowie die maximalen Residuen und räumlichen Fehlerverläufe mit der Spezifikation.
10. Erstellen und archivieren Sie den Bericht. Bewahren Sie diese zusammen mit Feldnotizen, Kontrollkoordinaten, Verarbeitungseinstellungen und exportierten Ergebnissen auf.

Agisoft weist darauf hin, dass eine Kameraoptimierung in der Regel die Ausrichtung verbessert und Fehler in Luftbild-Workflows reduziert. Im offiziellen Workflow zur Luftbildverarbeitung ohne GCPs wird zudem erläutert, wann zusätzliche Korrekturen des Kameramodells bei RTK-/PPK-Projekten hilfreich sein können. Betrachten Sie die Optimierung als kontrollierte Anpassung und nicht als eine Funktion, die automatisch Genauigkeit garantiert.

Für eine umfassendere Überprüfung der Ausrichtung, der Kontrolle, der hochauflösenden Rekonstruktion und der Endergebnisse nutzen Sie bitte unsere vollständige Checkliste für Qualitätsprüfungen bei Photogrammetrieprojekten in Metashape.

Häufig gestellte Fragen

Bedeutet ein geringer Reprojektionsfehler, dass mein Modell genau ist?

Nein. Dies deutet zwar auf eine gute Konsistenz im Bildraum hin, doch das Modell kann dennoch Fehler hinsichtlich Maßstab, Bezugssystem, Kontrolle oder systematischer Verformungen aufweisen. Verwenden Sie unabhängige Kontrollpunkte, um die externe Genauigkeit zu überprüfen.

Sind GCP-Residuen dasselbe wie die Checkpoint-Genauigkeit?

Nein. GCPs schränken die Anpassung ein, während Checkpoints davon ausgenommen sind. Geringe GCP-Residuen zeigen, dass das Modell gut an die Kontrollgruppe angepasst ist; Checkpoint-Residuen liefern eine unabhängigere Validierung.

Warum ist der vertikale RMSE oft schlechter als der horizontale RMSE?

Die vertikale Genauigkeit reagiert empfindlicher auf Fluggeometrie, Gelände, Kontrollpunktverteilung und Unstimmigkeiten bei den Bezugssystemen. Ein ausschließlich aus Nadir-Aufnahmen bestehender Block kann zudem in vertikaler Richtung eine geringere Genauigkeit aufweisen als in horizontaler Richtung. Quer verlaufende Fluglinien, geeignete Schrägaufnahmen und eine gut verteilte Höhenkontrolle können die Lösung verbessern.

Wie viele Kontrollpunkte sollte ich in Metashape verwenden?

Agisoft empfiehlt mindestens drei bis fünf Messpunkte für die Genauigkeitsbewertung. Bei großen, komplexen oder risikoreichen Projekten können mehr erforderlich sein. Die Verteilung und die Qualität der Vermessung sind ebenso wichtig wie die Anzahl der Messpunkte.

Sollte ich einen Checkpoint mit einem großen Fehler löschen?

Nicht einfach nur, weil dadurch der RMSE-Wert steigt. Untersuchen Sie zunächst die Feldkoordinaten, die Punktidentität, die Bildprojektionen, die Zielstabilität und die lokale Rekonstruktion. Schließen Sie diesen Faktor erst dann aus, wenn Sie einen echten Fehler oder einen anerkannten Grund nachweisen können.

Endgültige Auslegung

Die stichhaltigste Aussage zur Genauigkeit von Metashape stützt sich auf mehrere Belege. Geben Sie den GSD, das Verhalten bei der Reprojektion von Bildern und Markern, die Kamerareferenzabweichungen, die GCP-Konfiguration, den RMSE unabhängiger Kontrollpunkte, die maximale Abweichung, das Koordinatenreferenzsystem und das vertikale Bezugssystem an. Vergleichen Sie anschließend die Ergebnisse mit der Projektspezifikation.

Beurteilen Sie ein Projekt nicht anhand einer einzigen vielversprechenden Zahl. Ein zuverlässiger Verarbeitungsbericht zeigt, dass das Bildnetzwerk stabil ist, die Referenzdaten korrekt konfiguriert sind und unabhängige Kontrollpunkte bestätigen, dass das Ergebnis die vorgesehene Genauigkeit erfüllt.

Wenn Sie einen professionellen Photogrammetrie-Workflow einrichten möchten, informieren Sie sich über Agisoft Metashape Professional Edition oder besuchen Sie die Download-Seite, um die verfügbaren Optionen zu vergleichen.