Reflectance Transformation Imaging (RTI)

Reflectance Transformation Imaging (RTI) ist eine computergest√ľtzte Fotografiermethode, mit der von einem Objekt mehrere Bilder mit fixierter Kameraposition und variablen Beleuchtungspositionen gemacht werden. Anschlie√üend werden die Aufnahmen vom Computer zu einem Polynomial Texture Map (PTM) zusammengerechnet. In der resultierenden Datei kann die Position der Lichtquelle ver√§ndert werden, um beispielsweise die Oberfl√§che des aufgenommenen Objekts im Schr√§glicht untersuchen zu k√∂nnen.

RTI wurde erst 2001 entwickelt und hat inzwischen eine weite Verbreitung f√ľr die Dokumentation von Objekten mit flachen Oberfl√§chen, wie etwa Felsbilder, Inschriften oder M√ľnzen, gefunden, da hochaufl√∂sende Ergebnisse mit vergleichsweise g√ľnstiger Ausr√ľstung erzielt werden k√∂nnen.

Langzeitformate

Die Aufnahmen f√ľr RTI erfolgen mit einem Fotoapparat, weshalb man es bei der Archivierung haupts√§chlich mit Rastergrafiken zu tun hat. Ausf√ľhrliche Hinweise zu geeigneten Langzeitformaten sind in dem Kapitel Rastergrafiken zu finden.

Zus√§tzlich m√ľssen die resultierenden softwareabh√§ngigen Dateien f√ľr die Archivierung ber√ľcksichtigt werden. Die Formate f√ľr RTI wurden in den Hewlett-Packard-Laboratories entwickelt und von Cultural Heritage Imaging (CHI) erweitert und erg√§nzt.

Ausgangsformat¬† Begr√ľndung
  DNG Originale Aufnahmen in RAW, sollten als DNG gespeichert werden.
TIFF Originale Aufnahmen, die nicht in RAW aufgenommen wurden, sollten als TIFF gespeichert werden. Vor der Prozessierung erheblich bearbeitete Aufnahmen (z.B. Freistellung des Objektes), sollten in einem gesonderten Ordner ebenfalls als TIFF gespeichert werden.
Prozessierungsformat¬† Begr√ľndung
¬† JPG Programme zur Erzeugung von RTI-Dateien ben√∂tigen meist JPG-Dateien. Auch die von den Programmen erzeugten Zwischenbilder werden als JPG gespeichert. F√ľr diese Dateien ist die Archivierung im JPG-Format zul√§ssig.
XML Alle Einstellungen werden in einer automatisch erzeugten XML-Datei gespeichert.
LP In der textbasierten LP-Datei (light position file) werden die Positionen der Lichtquelle f√ľr jedes einzelne Bild gespeichert. Sie wird automatisch erzeugt, kann aber auch manuell erstellt werden.
Ergebnisformat¬† Begr√ľndung
¬† PTM Das Format Polynomial Texture Map wurde in den Hewlett-Packard-Laboratories entwickelt und speichert f√ľr jedes Pixel eine Funktion, mit der die Farbwerte des Pixels in Abh√§ngigkeit der Lichtquelle errechnet werden k√∂nnen.
RTI Das RTI-Format wurde von CHI entwickelt und bietet im Vergleich zu PTM erweiterte Funktionalitäten im RTIViewer von CHI.
XMP Der RTIViewer von CHI erlaubt das Annotieren der Dateien, um beispielsweise besondere Bildbereiche hervorzuheben. Diese Informationen werden in einer textbasierten XMP-Datei gespeichert.

Ordnerstruktur

Zwar kann eine PTM- oder RTI-Datei ohne zus√§tzliche Dateien verwendet werden, jedoch sollte f√ľr die Nachnutzbarkeit und Nachvollziehbarkeit das gesamte Datenpaket archiviert werden. Dabei sollten alle Daten nicht alle in einem einzigen Ordner, sondern in einer sinnvollen Ordnerstruktur abgelegt werden. In der folgenden Tabelle wird eine solche Struktur vorgeschlagen und auch die entsprechenden Dateitypen darin aufgelistet.

Die Benennung der Ordner ist hier als Vorschlag zu betrachten. Dabei muss ber√ľcksichtigt werden, dass einige Ordner und Dateien von der Software erzeugt werden und diese auch so belassen werden sollten, um wieder mit dem Programm ge√∂ffnet werden zu k√∂nnen. Die Struktur orientiert sich an den Vorgaben von Cultural Heritage Imaging (CHI) und der von dem Programm RTIBuilder erzeugten Dateistruktur.

Die gesamten Aufnahmen sollten in einem √ľbergeordneten Verzeichnis mit dem Projektnamen gespeichert werden. F√ľr jedes aufgenommene Objekt muss ein eigener Unterordner angelegt werden, der idealerweise eine eindeutige Bezeichnung des Objektes, wie etwa die Inventarnummer, in der Benennung enth√§lt. In dem √ľbergeordneten Verzeichnis k√∂nnen Dokumentationsdateien abgelegt werden.

Ordnerstruktur und enthaltene Dateiformate
Projekt RTI-Aufnahmen In dem √ľbergeordneten Verzeichnis sind alle Aufnahmen enthalten. Au√üerdem k√∂nnen hier auch Dokumentationsdateien abgelegt werden. Pro Aufnahme entsteht ein Ordner. Neben den verschiedenen Unterordnern enth√§lt dieser auch eine Projektdatei im XML-Format.
'original-captures' enthält die unveränderten Originalaufnahmen im DNG- oder TIFF-Format.
'edited-captures' (optional) enth√§lt √ľberarbeitete Aufnahmen im TIFF-Format.
'jpeg-exports' enthält die Bilder, aus denen das Ergebnis erzeugt wird. Die JPG-Bilder werden entweder aus den Dateien in 'original-captures' oder in 'edited-captures' erzeugt.
'cropped-files' wird automatisch erzeugt. Er enthält JPG-Dateien, die bei der Verwendung der Zuschnittsfunktion als Zwischenergebnis gespeichert werden.
'assembly-files' wird automatisch erzeugt. Er enthält JPG-Dateien, welche die Ausleuchtung des Objektes repräsentieren und eine LP-Datei, in der die Position der Lichtquellen gespeichert werden.
'finished-files' wird automatisch erzeugt und enthält die resultierenden RTIs und PTMs. Werden die Dateien im RTIViewer annotiert, entstehen zusätzlich XMP-Dateien.
  dokumentation
  Inventarnummer 001
  Inventarnummer 002
    .xml
    original-captures
      .dng / .tiff
    edited-captures
      .tiff
    jpeg-exports
      .jpg
    cropped-files
      .jpg
    assembly-files
      .jpg
      .lp
    finished-files
      .ptm
      .rti
      .xmp
  Inventarnummer 003

Dokumentation

Neben den allgemeinen minimalen Angaben zu Einzeldateien, wie sie in dem Abschnitt Metadaten in der Anwendung beschrieben sind, erfordern RTI-Daten Angaben, die Aufschluss √ľber die Aufnahmemethode, deren Umst√§nde und √ľber die Prozessierung der Daten geben. Zus√§tzlich k√∂nnen weitere Angaben zu dem Projekt als ganzes notwendig sein, um etwa genauere Angaben zu den aufgenommenen Objekten zu machen. Hinweise hierf√ľr sind ebenfalls in dem Abschnitt Metadaten in der Anwendung beschrieben.

Speziell f√ľr die freih√§ndige RTI-Aufnahme mittels Highlight-RTI gibt es von Cultural Heritage Imaging einen Shooting-Log, der in angepasster Form auch f√ľr andere Aufnahmemethoden verwendet werden kann. Eine Vorlage hierf√ľr wird online in den IT-Empfehlungen zur Verf√ľgung gestellt. Es empfiehlt sich diese √úbersicht schon w√§hrend der Aufnahme der einzelnen Objekte auszuf√ľllen.

Metadatum Beschreibung
Kamera und Objektiv Modell und Name der verwendeten Kamera sowie Details zum verwendeten Objektiv.
Kamerafilter Auflistung aller f√ľr die Aufnahme verwendeten Filter, wie etwa Graufilter oder Infrarotfilter.
Aufnahmemethode Angabe der Methode, die f√ľr die RTI-Aufnahme verwendet wurde. Beispielsweise feste Kuppel oder Highlight-RTI (H-RTI).
Radius oder Schnurlänge Radius der verwendeten Kuppel oder des Armes. Wenn H-RTI angewandt wurde, muss die Länge der Schnur angegeben werden. Die Angabe erfolgt in cm.
Größe der Sphäre Durchmesser in cm oder mm der verwendeten Sphäre, wenn H-RTI angewandt wurde.
Lichtquelle Anzahl und Typ der Lichtquelle, sowie deren Einstellungen. Beispielsweise Canon Speedlite 580 EX II, 1/4 Leistung.
Projektordner Name des Verzeichnisses in dem alle Aufnahmeordner gespeichert werden.
Verzeichnisname Der Name des Verzeichnisses in dem die originalen Aufnahmen, prozessierten Bilder und Ergebnisdateien liegen.
Objektbezeichnung Eindeutige Bezeichnung des Objektes, wie beispielsweise die Inventar- oder Fundnummer.
Beschreibung Kurze Beschreibung des Objektes.
Farbkarte Wenn eine Farbkarte verwendet wurde, soll angegeben werden, ob sie in jedem Bild vorhanden ist oder nur in einem separaten Bild. Wenn ein Farbprofil verwendet wurde, kann dieses hier angegeben werden.
Testbilder Angabe der Dateinamen aller nicht f√ľr die Erstellung der RTI-Datei verwendeten Bilder, die jedoch weiterhin beibehalten werden, wie beispielsweise das Bild mit der Farbkarte.
Aufnahmeteam Vor- und Nachnamen der Personen, die an der Aufnahme beteiligt waren.
Rechte Lizenz der Aufnahme, z.B. CC-BY 3.0
Notizen Weitere Angaben zum Aufnahmeaufbau und besonderen Vorkommnissen.
Software Name und Version der zur Erzeugung der RTI-Daten verwendeten Software, beispielsweise RTIBuilder Version 2.0.2.
Anzahl der Bilder Zahl der f√ľr das finale RTI verwendeten Bilder.
Weitere Dateien Liste weiterer Dateien, wie beispielsweise des Shooting-Logs oder Dokumentation der verwendeten Software.

 

Reflection Transformation Imaging (RTI) erzeugt Polynomial Texture Maps (PTMs), in denen f√ľr jedes Pixel Informationen √ľber die Reflexionseigenschaften der Oberfl√§che gespeichert werden. Die erzeugten interaktiven Dateien werden aus einer Vielzahl von Bildern errechnet, wobei in jedem Bild die Kameraposition unver√§ndert ist, w√§hrend die Richtung, aus der das Licht kommt, jeweils wechselt.

Mit speziellen Viewer-Programmen k√∂nnen die Daten angesehen werden und die aufgenommenen Objekte interaktiv aus jeder Richtung beleuchtet werden. Da es sich aber nicht um eine 3D-Datei handelt, k√∂nnen die Objekte nicht bewegt werden. Jedoch bieten die Programme zus√§tzlich unterschiedliche Algorithmen, um bestimmte Oberfl√§cheneigenschaften, wie Kanten oder Risse, optisch hervorzuheben, die unter nat√ľrlichen Bedingungen nicht oder nur schwer erkennbar sind.

F√ľr die Erstellung von RTI-Daten k√∂nnen unterschiedliche Aufnahmemethoden verwendet werden, die unterschiedliche Ausr√ľstung voraussetzen, wobei das Grundprinzip dahinter jeweils immer das gleiche ist.

rti_TA01029.jpg

Ausschnitt der R√ľckseite der Grabstele TA 1029 mit reichsaram√§ischer Inschrift des Verstorbenen (Tayma, Saudi-Arabien). Links ein Foto. In der Mitte der gleiche Ausschnitt als RTI mit 'Specular Enhancement', rechts mit 'Static Multi Light'. (Foto: Mirco Cusin; RTI: Martina Trognitz, Max Haibt; DAI-Orient-Abteilung)
Ausschnitt der R√ľckseite der Grabstele TA 1029 mit reichsaram√§ischer Inschrift des Verstorbenen (Tayma, Saudi-Arabien). Links ein Foto. In der Mitte der gleiche Ausschnitt als RTI mit 'Specular Enhancement', rechts mit 'Static Multi Light'. (Foto: Mirco Cusin; RTI: Martina Trognitz, Max Haibt; DAI-Orient-Abteilung)

Polynomial Texture Map

Ein Polynomial Texture Map (PTM) ist eine Repr√§sentationsform von Bildern mit Hilfe von Funktionen, statt einzelner Farbwerte. Im Gegensatz zu Rastergrafiken werden f√ľr die einzelnen Pixel von PTMs nicht nur feste Farbwerte gespeichert, sondern zus√§tzlich eine Funktion, die mit Hilfe der Parameter lu und lv die Leuchtdichte der Oberfl√§che berechnet. Die Leuchtdichte bestimmt wie das menschliche Auge eine Oberfl√§che wahrnimmt, also ob sie besonders hell, dunkel, spiegelnd oder matt erscheint.

Die Parameter lu und lv spezifizieren, wo sich eine punktf√∂rmige Lichtquelle befindet. Wird die Lichtquelle bewegt, √§ndern sich die Parameter und somit auch der errechnete Farbwert f√ľr den jeweiligen Pixel. Somit kann ein PTM simulieren, wie ein Objekt bei wechselnder Beleuchtungsrichtung aussieht.

Ganz vereinfacht l√§sst sich das Prinzip hinter RTI in der untenstehenden Abbildung visualisieren. F√ľr jeden Punkt einer dreidimensionalen Oberfl√§che kann eine Normale bestimmt werden. An dieser Normale wird einfallendes Licht im gleichen Winkel reflektiert (Reflexionsgesetz). Da die Kamera sich in einer festen Position befindet, die Richtung aus der das Licht kommt ebenfalls bekannt ist und es einen Bilderstapel mit unterschiedlichen Lichtpositionen gibt, kann f√ľr jeden Bildpunkt eine Oberfl√§chennormale berechnet werden. Wird die fertige RTI-Datei betrachtet und die Beleuchtung ge√§ndert, k√∂nnen die angezeigten Farbwerte der einzelnen Punkte anhand des gespeicherten Farbwertes, der errechneten Normalen und dem Einfallswinkel berechnet und ausgegeben werden.

rti_ptmAbstrakt.png

Rechts sind auf einer dreidimensionalen Oberfl√§che f√ľr vier Punkte die Normalen (rot) eingezeichnet, an denen einfallendes Licht (gelb) reflektiert wird (gr√ľn). Links ist diese Obefl√§che als PTM dargestellt, in dem f√ľr die Punkte jeweils die Oberfl√§chennormalen gespeichert sind. So entsteht ein optischer 3D-Effekt, der an sich aber nicht in der Datei hinterlegt ist.
Rechts sind auf einer dreidimensionalen Oberfl√§che f√ľr vier Punkte die Normalen (rot) eingezeichnet, an denen einfallendes Licht (gelb) reflektiert wird (gr√ľn). Links ist diese Obefl√§che als PTM dargestellt, in dem f√ľr die Punkte jeweils die Oberfl√§chennormalen gespeichert sind. So entsteht ein optischer 3D-Effekt, der an sich aber nicht in der Datei hinterlegt ist.

Aufnahmemethoden

rti_aufnahme.jpg

Oben links eine einfache Kuppel f√ľr RTI-Aufnahmen. Rechts daneben ein gebogener Arm, der um das Objekt rotiert werden kann. Unten ist in den Aufbau von CHI eine imagin√§re Kuppel projiziert. (Hewlett-Packard-Laboratories und CHI)
Oben links eine einfache Kuppel f√ľr RTI-Aufnahmen. Rechts daneben ein gebogener Arm, der um das Objekt rotiert werden kann. Unten ist in den Aufbau von CHI eine imagin√§re Kuppel projiziert. (Hewlett-Packard-Laboratories und CHI)
Das Grundprinzip f√ľr RTI-Aufnahmen besteht in der immer gleich bleibenden Position der Kamera in Bezug auf das Objekt und der wechselnden Position der Lichtquelle. Bei der Lichtquelle muss der Abstand zu dem Objekt immer der gleiche sein, um eine konstante Lichtintensit√§t zu gew√§hrleisten, und zusammen betrachtet sollten die jeweiligen Positionen so gew√§hlt werden, dass sie gleichm√§√üig um das Objekt herum verteilt sind. F√ľr die Positionierung der Lichtquellen wurden unterschiedliche Methoden und Ausr√ľstungsteile entwickelt, die in der nebenstehenden Abbildung zusammengefasst dargestellt sind.

Bei der Aufnahme mit einer Kuppel (engl. dome) wird eine Kuppel so √ľber das Objekt platziert, dass dieses in der Mitte liegt. Die Kamera wird ebenfalls mittig der Kuppel direkt √ľber dem Objekt platziert. An der Kuppel k√∂nnen mehrere Lichtquellen, wie etwa LEDs befestigt sein, wobei bei jedem Bild jeweils nur eine eingeschaltet wird. Es gibt auch Kuppeln, die statt fest eingebauter Lichtquellen nur Markierungen f√ľr eine manuelle Platzierung der Lichtquelle haben. Die Position der Lichtquellen ergeben sich aus den Abmessungen der Kuppel und m√ľssen in dem Programm eingetragen werden.

Eine vereinfachte Form der Kuppel sind gebogene Arme, mit daran befestigten Lichtquellen, wie etwa externe Blitzgeräte. Dieser Arm kann um das Objekt herum rotiert werden, so dass am Ende der Aufnahme eine kuppelförmige Verteilung der Lichter erzielt wird. Auch hier kann die Position der Lichtquellen aus den Abmessungen des Armes und dem Rotationswinkel berechnet werden.

Eine sehr flexible Methode, Highlight-RTI, wurde von Cultural Heritage Imaging entwickelt. Hierf√ľr wird nur ein Blitzger√§t (oder eine andere Lichtquelle) ben√∂tigt, an dem eine Schnur befestigt wird, mit deren Hilfe man das Ger√§t so ausrichten kann, dass der Abstand immer gleich ist und das Licht auch direkt auf das Objekt gerichtet ist. Auf diese Weise kann man sich an einer imagin√§ren Kuppel entlang orientieren. Um die Position der Lichtquelle errechnen zu k√∂nnen, wird neben das Objekt eine schwarz gl√§nzende Kugel platziert, die auch auf jedem Bild zu sehen sein muss. Aus den Reflexionspunkten des Lichtes an der Kugel kann das Programm dann die Richtung, aus der das Licht kommt, berechnen.

In diesem Abschnitt werden Programme vorgestellt, mit denen RTI-Daten erstellt und betrachtet werden können.

Erstellung von RTI-Daten

F√ľr die Aufnahme und Erstellung von RTI-Daten gibt es zwei frei verf√ľgbare Programme. Das eine ist das PTM Fitter Programm, welches an den Hewlett-Packard-Laboratories entwickelt wurde und zugleich auch das erste Programm ist, dass diese Art von Daten erstellen konnte. Es kann auf allen g√§ngigen Betriebssystemen verwendet werden. Das zweite Programm, RTIBuilder, stammt von CHI und ist f√ľr Windows und Mac verf√ľgbar. CHI stellt weitere Materialien zur Erstellung von RTI-Daten zur Verf√ľgung und deren Webangebot dient als zentrale Anlaufstelle f√ľr alles rund um RTI. Sie bieten ebenfalls ein Forum f√ľr aktive Anwender an.

Ansicht von RTI-Daten

RTI-Daten k√∂nnen nur mit speziellen Viewer-Programmen betrachtet werden. Von den Hewlett-Packard-Laboratories gibt es die frei verf√ľgbare PTM Viewer Application, die auf Windows, Mac und Linux verwendet werden kann. Das Team von CHI bietet den RTIViewer an, der ebenfalls frei verf√ľgbar ist und auf Windows und Mac l√§uft. Er bietet erweiterte Funktionalit√§ten, wie beispielsweise die Annotation von Dateien.

F√ľr eine Pr√§sentation der Daten auf Webseiten kann der WebRTIViewer empfohlen werden, der an dem Visual Computing Laboratory von CNR-ISTI in Pisa entwickelt wurde.

RTI - Diskussion

Haben Sie Anregungen, √Ąnderungsw√ľnsche oder Erg√§nzungen zu dem Kapitel? Dann k√∂nnen Sie diese als Diskussionsbeitrag formulieren. Um die Funktion zu nutzen, ist eine Anmeldung erforderlich.

Bitte geben Sie möglichst genau an, worauf Sie sich beziehen.

Das IANUS-Team pr√ľft die Diskussionsbetr√§ge regelm√§√üig und arbeitet diese bei Relevanz in die IT-Empfehlungen ein.

 

Letzte Änderung: 27. Juli 2016