Genom att kombinera högpresterande övervakningskameror med AI-baserad analys skapade Axis ett nytt slags instrument som läser av vardagliga objekt – som tennisbollar, kaffemuggar och brandsläckare – som musikaliska signaler. När ett förutbestämt föremål rör sig över kamerans synfält triggas olika zoner som spelar olika toner, vilket förvandlar en videoövervakningskamera till ett fullt fungerande musikinstrument.

– Med det här experimentet ville vi utmana vad som är möjligt med våra övervakningskameror och AI-baserade analyser när det gäller att upptäcka anpassade objekt och trigga åtgärder i realtid, säger Ghaith Sankari, erfaren mjukvaruingenjör på Axis Communications.

– Vi skapade en orkester, men våra kunder kan använda samma banbrytande teknik för att skapa en mängd avancerade lösningar anpassade efter sina behov.

Nytolkning av klassiskt stycke

Stycket som framförs är en nytolkning av Richard Strauss’ Also Sprach Zarathustra, som blivit ikoniskt genom sin användning i filmen 2001: A Space Odyssey. Men istället för stråkar och horn används här tennisbollar, en kaffekopp och en brandsläckare.

– Vi hade egentligen kunnat använda vilka objekt som helst, till och med ljud. Vad du tränar kamerorna och analysverktygen att upptäcka är helt upp till dig. Till exempel har vi kunder som använder den här tekniken för att automatiskt upptäcka designfel eller produktionsmisstag, säger Sankari.

Svensk superproducent

Den svenska musikproducenten Jonas Quant, känd för sitt arbete med Kylie Minogue, No Doubt och Hurts, tog sig an utmaningen att komponera för denna okonventionella ensemble.

– Det som fascinerade mig var att behandla objektigenkänning som ett helt nytt slags instrument. Eftersom vi inte använder en traditionell klaviatur innebar det här experimentet några intressanta kreativa utmaningar, exempelvis att lära musikerna spela på ett osynligt instrument i tomma luften, kommenterar han.

Proof-of-concept-experiment

Även om det kan verka oväntat och lekfullt är The Object Detection Orchestra mer än bara en kuriositet. Det är ett proof-of-concept-experiment som visar hur företagets avancerade AI-baserade analys – i kombination med högpresterande videoövervakningskameror och högtalare – kan tränas för att identifiera nästan vad som helst och trigga olika åtgärder i realtid.

Samma arbetsprincip som för automation

Samma teknik som möjliggör detta framträdande driver även automation, möjliggör smarta städer och formar framtiden för maskininteraktion – och tar videoövervakning långt bortom säkerhetens gränser.