Nieuwe dimensies werpen verdiepende blik op erfgoed
KBR lanceert samen met de KU Leuven en het Museum Kunst & Geschiedenis een online open access toepassing om erfgoedobjecten dynamisch en op een interactieve manier online te bekijken. Deze pixel+ viewer laat toe om eeuwenoude objecten in een ander licht te bekijken en verborgen details zichtbaar te maken.
Naar aanleiding van de Coronacrisis zijn musea en andere erfgoedinstellingen vandaag niet of zeer beperkt fysiek toegankelijk, zowel in België, als in het buitenland. Het zet de consultatie van objecten en studie van ons verleden stevig onder druk. Er kan teruggevallen worden op gedigitaliseerde objecten, notities en oude publicaties, maar deze geven maar een deel van de informatie weer, waardoor belangrijke details over het hoofd gezien kunnen worden. Gelukkig heeft de sector, in samenwerking met ingenieurs, oplossingen bedacht om hieraan te kunnen verhelpen.
In de erfgoedsector wordt al lang ingezet op en geëxperimenteerd met de digitalisering van objecten. Het resulteert voor het publiek meestal in een online foto waarop ingezoomd kan worden of waarop je het contrast kan aapassen. Dit zijn louter kleurenbeelden, want meer informatie zit er niet in standaard digitale foto’s. Verschillende soorten beeldscanners registreren intussen echter heel wat meer karakteristieken van een oppervlak dan alleen de kleur. Ook die informatie kunnen visualiseren in een handige online tool biedt dan ook nieuwe mogelijkheden voor iedereen die met erfgoedobjecten werkt. Denk bijvoorbeeld aan de tekeningen van KBR van Pieter Bruegel de Oude die recent onder de loep werden genomen. De onderzoekers konden het papier tot op de vezel bestuderen met behulp van hun Portable Light Dome (PLD) scanner. Ze kregen ook een veel beter zicht op het uitgebreide palet aan technieken die de oude meester gebruikte.
Software is de sleutel
In de afgelopen 15 jaar ontwikkelden onderzoekers van de KU Leuven, samen met verschillende partners uit de erfgoedsector, digitale technieken die objecten tot op een ongezien gedetailleerd niveau in beeld kunnen brengen: de PLD scanner.
“Met deze methode belichten ze een object vanuit een groot aantal hoeken en maken er telkens foto’s van, de zogenaamde ‘single-camera, multi-light recording’, zegt Hendrik Hameeuw, mede-coördinator van het project aan de KU Leuven. “De manier waarop deze opname nadien verwerkt wordt, bepaalt welke karakteristieken van het oppervlak, zoals reliëf of textuur, de software kan laten zien en dus hoe de gebruiker het object ervaart.”
Nieuw universeel bestandsformaat
“Om helemaal volledig te zijn, moeten we eigenlijk kijken naar de bestandstypes van deze interactieve datasets”, zegt Hameeuw. De meeste erfgoedinstellingen berekenen en bewaren dit type beelden van hun erfgoed met specifiek beeldformaat, meestal is dat RTI/HSH. De software die in Leuven ontwikkeld werd, werkt met PLD-files (ZUN, CUN) die extra toepassingen ten opzichte van die RTI/HSH bestanden heeft. Pixel+ maakt deze manier van berekenen nu beschikbaar voor de hele wereld, niet alleen door het online aan te bieden, maar ook door er een nieuw soort containerbestand voor te introduceren: glTF. “Vergelijk het met een gewone foto op je computer. Waarschijnlijk zal dat een JPEG- of GIF-bestand zijn. Maar wil je ermee aan de slag in Photoshop, dan maakt het programma van dezelfde afbeelding een PSD-bestand.” Deze glTF’s zijn compatibel met zowel de Leuvense PLD als met de RTI/HSH bestanden. “Hiermee bieden we een nieuwe universele standaard aan voor dit soort beelden en ontsluiten we ze ook meteen via de online pixel+ viewer, een soort gratis photoshop voor ‘single-camera, multi-light recording’ beelden.” Hierdoor kunnen zowel RTI/HSH als PLD bestanden voor het eerst binnen éénzelfde programma bestudeerd en vergeleken worden.
Een nieuwe wereld
Pixel+ haalt heel wat extra informatie uit de beschikbare data. De voorwerpen, zoals oude munten, miniaturen of schilderijen, krijgen zo na honderden jaren plots extra dimensies die voor het onderzoek op dergelijke objecten nieuwe inzichten kan verwerven. Vooral op het vlak van 3D (geometrie) en het correct begrijpen van de reflecties van licht op een object zet de Leuvense software grote stappen vooruit.
“De technologie is interessant voor tal van objecten, van kleitabletten over munten tot schilderijen of middeleeuwse manuscripten”, licht Hameeuw toe. “De software laat onder andere toe om de objecten virtueel met verschillende lichtinvallen te bekijken, het reliëf op pixelniveau in kaart te brengen of een 3D-visualisatie te genereren.” Frédéric Lemmers van de dienst Digitalisering van KBR treedt dit bij: "Door het te combineren met multi-spectrale beeldvorming kwamen onderzoekers erachter dat de hoofden van enkele figuren in de 13de eeuwse Rijmbijbel die bewaard wordt in KBR op een later moment werden overschilderd." Aan het Museum Kunst & Geschiedenis werd de technologie dan weer ingezet om sterk verweerde teksten op bijna 4000 jaar oude Egyptische beeldjes opnieuw leesbaar te maken.
Instellingen uit de hele wereld, van het Metropolitan Museum of Art in New York (VS) tot het Regionaal Archeologisch Museum a/d Schelde in Avelgem, zullen hun eigen datasets of bestanden kunnen opladen, consulteren en bestuderen in pixel+. De software zet de informatie volgens verschillende nieuwe standaarden om en laat gebruikers toe de virtuele erfgoedobjecten interactief te ontsluiten. “Deze ontwikkeling is echt een mijlpaal voor de erfgoedsector”, benadrukt Chris Vastenhoud, promotor van het project vanuit het Museum Kunst & Geschiedenis. “Er zal een hele nieuwe wereld open gaan voor erfgoedinstellingen wereldwijd. Ze zullen heel wat bijkomende informatie kunnen documenteren en delen om zo te communiceren over de objecten in hun collecties.”
Pixel+ is voor iedereen beschikbaar op http://www.heritage-visualisation.org met voorbeelden van objecten uit de collecties van het Museum Kunst & Geschiedenis, KBR en de KU Leuven.
Extra voorbeelden kunnen bekeken en aangemaakt worden op http://www.heritage-visualisation.org/examples.html
Het project is een samenwerking van Museum Kunst & Geschiedenis, KU Leuven Departement Elektrotechniek, KU Leuven Illuminare, KU Leuven Bibliotheken Digitalisering en KBR; en werd gefinancierd door het Federaal Wetenschapsbeleid (BELSPO) via het BRAIN-be programma (Pionier projecten).
Contactlijst betrokken partners
- Hendrik Hameeuw, KU Leuven Bibliotheken – Digitalisering en Document Delivery, hendrik.hameeuw@kuleuven.be
- Marc Proesmans, KU Leuven, departement Elektrotechniek (ESAT), Marc.Proesmans@esat.kuleuven.be
- Chris Vastenhoud, KMKG eCollections, c.vastenhoud@kmkg-mrah.be
- Lieve Watteeuw, Illuminare, Studiecentrum voor Middeleeuwse Kunst, lieve.watteeuw@kuleuven.be
- Frédéric Lemmers, KBR, Dienst Digitalisering, frederic.lemmers@kbr.be
Begin april 2020 presenteerden de projectmedewerkers van pixel+ reeds hun resultaten tijdens een online (ten gevolge Corona) SPIE-conferentie. Naar aanleiding daarvan de publicatie van onderstaande paper:
Vincent Vanweddingen, Hendrik Hameeuw, Bruno Vandermeulen, Chris Vastenhoud, Lieve Watteeuw, Frédéric Lemmers, Athena Van der Perre, Paul Konijn, Luc Van Gool, Marc Proesmans 2020: Pixel+: integrating and standardizing of various interactive pixel-based imagery, in: Peter Schelkens, Tomasz Kozacki (eds.) Optics, Photonics and Digital Technologies for Imaging Applications VI, Proc. of SPIE Vol. 11353, 113530G. (DOI: 10.1117/12.2555685)
lees paper – bekijk presentatie