Ny dialog med konsten

Ett exempel på hur AI-stödda applikationer förändrar kulturutbildningen idag är CHIM – chatboten i museet. Den testades och utvärderades bland annat på Städel Museum i Frankfurt.

De ansvariga för det unika projektet att utveckla en chatbot för museer, som nyligen testades på Städel Museum i Frankfurt am Main, vill komma bort från den kommunikativa enkelriktade gatan för traditionell informationsöverföring inom kultursektorn. Projektet utnyttjar det framväxande området artificiell intelligens (AI) som en hävstång för en innovativ form av konstutbildning. CHIM – chatboten i museet – är resultatet av ett samarbete mellan Linon Medien AG och det tyska forskningscentret för artificiell intelligens (DFKI) och testas och utvärderas för närvarande på Städel Museum. CHIM är ett ambitiöst projekt som visar vilka möjligheter som öppnas genom framsteg inom artificiell intelligens och användningen av AI-stödda chatbots. Under de senaste åren har teknik som virtuell verklighet (VR) och förstärkt verklighet (AR) i allt högre grad banat väg för interaktiva dialoger på kulturinstitutioner. Dessa tekniker erbjuder olika metoder för att göra konstverk mer tillgängliga i det digitala rummet. De möjliggör berikning av information, anpassning av iscensättningen till användarens vanor och skapandet av en multisensorisk upplevelse. Den senaste tidens tillgång till ChatGPT, Google Bard och andra AI-baserade dialogapplikationer utökar nu möjligheterna, men för också med sig osäkerhetsfaktorer.

Sedan 2019 har Linon Medien och DFKI arbetat med att utveckla ett dialogsystem för lärande för kunskapsöverföring på museer. Städel Museum, som är den pedagogiska partnern för denna museiprototyp, förser chatboten med information i text- och ljudformat om cirka 300 föremål från sin samling. Huvudsyftet med CHIM är att ge besökarna personliga och vetenskapligt exakta svar på deras frågor – oavsett om det handlar om ett konstverks historia eller specifika detaljer.
CHIM skiljer sig från konventionella språkassistenter genom sin specialiserade metod för taligenkänning och bearbetning (Natural Language Understanding and Natural Language Processing). I likhet med chatboten ChatGPT, som nyligen publicerades av OpenAI, kan CHIM förstå och generera naturligt språk. CHIM bygger dock på en giltig och noggrant sammanställd egenutvecklad databas. Specialiserade författare har skapat över 700 ljudkommentarer i text- och ljudformat för utvalda föremål i Städel Museum.
Kuratorer har granskat dessa för att säkerställa en tillförlitlig informationskälla som är skräddarsydd för besökarnas behov. För att träna chattroboten utvecklades appen och webbplatsen „Questions to Art“, som gör det möjligt för intresserade att ställa specifika frågor om specifika konstverk. Tekniken bakom chatboten använder olika metoder för att länka samman den insamlade informationen och skapa en omfattande kunskapsbas för konstverken. Detta gör det möjligt för den artificiella intelligensen att besvara enskilda besökares frågor – oavsett om det handlar om ett konstverks historia eller om specifika aspekter av bilden. För de ansvariga är detta det unika med chatboten för kunskapsförmedling på museer: konventionella konstutbildningsmedier som audioguide-appar eller etiketter kan ge information om verket, men de kan varken täcka all befintlig kunskap om ett konstverk eller anpassa denna information till varje betraktares förväntningar, intressen och individuella perspektiv. Artificiell intelligens möjliggör innovativ, kontinuerligt individualiserad interaktion i överföringen av kunskap om konstverken.

Förutom kunskapsöverföring finns det redan andra pilotprojekt och användningsområden för AI inom kultursektorn – till exempel riktad optimering för ett mer tilltalande kulturutbud som är anpassat till målgruppen. Vissa museer använder t.ex. sensorer och AI-analysverktyg för att analysera besökarnas beteende. Genom AI-stödd tolkning av insamlade data om rörelsemönster och uppmärksamhetsbeteende kan museer identifiera vilka utställningar och konstverk som är särskilt tilltalande och vilka som drar till sig mindre uppmärksamhet. På så sätt kan institutionerna optimera placeringen av konstverken och förbättra den övergripande utställningsdesignen. AI kan också användas i detta sammanhang för att göra personliga rekommendationer baserade på besökarprofiler och tidigare interaktioner med konstverk om vilka verk eller utställningar som kan vara av intresse för enskilda besökare.
De potentiella användningsområdena för AI är dock inte begränsade till utställningsområdet. AI kan också bidra till att identifiera konstverk, automatiskt generera metadata samt bearbeta och hantera information för indexering, katalogisering och hantering av samlingar med hjälp av bildigenkänning och textanalys. Artificiell intelligens kan även spela en viktig roll vid restaurering genom att med hjälp av bildanalys och mönsterigenkänning med hög precision avslöja dolda skador eller förändringar i materialet. Dessutom ger AI värdefull information om materialsammansättning och färganvändning, vilket kan hjälpa restauratörerna att rekonstruera och bevara konstverk på ett korrekt sätt. Ett imponerande exempel är rekonstruktionen av de förlorade sidosektionerna av Rembrandts målning „Nattvakten“. Även mindre museer som för närvarande inte har möjlighet att genomföra egna AI-analyser på grund av personella, tekniska och ekonomiska resurser kan dra nytta av befintliga AI-applikationer – oavsett om det gäller att skapa texter för reklam och sociala medier eller att förbättra den interna kommunikationen med hjälp av Office-applikationer. Ett intressant användningsfall för ChatGPT har tagits fram av delstatskontoret för icke-statliga museer i Bayern: Museer kan använda denna AI-baserade chatbot för att kontrollera effektiviteten i sin digitala marknadsföring – till exempel synligheten och sökbarheten för museidata.

Kombinationen av konst och AI öppnar upp för nya sätt att arbeta med konstutbildning och museiförvaltning. Det finns dock en del utmaningar som måste övervinnas på vägen. Möjligheterna att bearbeta och tolka data med hjälp av AI-stödda applikationer är inte helt okritiska.
Kvaliteten på data är avgörande, eftersom AI-applikationer alltid baseras på de data som de tränas med. Museer som Städel Museum som använder sina egna dataset måste säkerställa att de är av hög kvalitet och tillförlitliga. Det är också viktigt att se till att dessa data är inkluderande och fria från partiskhet. När det gäller dataskydd måste institutionerna kunna säkerställa att den information som samlas in och behandlas om besökare överensstämmer med dataskyddsbestämmelserna och skyddas på lämpligt sätt. Om AI-stödda applikationer som ChatGPT används, som inte baseras på egenutvecklade data utan på offentliga, osäkra data från hela internet, måste ytterligare faktorer beaktas – de data som samlas in av AI kan vara lika felaktiga som de svar som ges av chatboten, vars svar baseras på kopplingen av denna information enligt sannolikhetsprincipen.
Städelmuseets erfarenhet visar att det är värt att utforska den nya potentialen i AI-baserad dataanalys och att det är ett viktigt steg mot att göra kulturutbildning relevant i framtiden och möjliggöra ett brett deltagande. Beroende på vilka resurser som finns tillgängliga måste museerna dock hitta lämpliga sätt att använda sina data i enlighet med dataskyddsbestämmelserna. När det gäller användning av AI-baserade system med offentliga data bör användningsfall som inte väcker frågor om dataskydd och upphovsrätt prioriteras tills den rättsliga situationen på detta område är tydligare definierad.

Läs mer om detta: S:ta Ceciliakyrkan i Köln fungerar nu som Schnütgen-museum och rymmer en viktig samling medeltida konst, samtidigt som kyrkans sakrala karaktär har bevarats.