OZM Trainspotting
Una piccola storia "AI for Good".
Questa settimana ce l'abbiamo OZM aggiunto una nuova pagina. L'idea di collezionare graffiti sui treni è nata molto tempo fa, ma non abbiamo avuto il tempo di approfondirla davvero. Siamo tornati sull'argomento in diverse occasioni, ma mai veramente. Fino ad agosto 2021, quando abbiamo deciso che questo è il lavoro perfetto per un'IA.
C'è un'ingiustizia radicata nell'arte che non è di rado affrontata nella letteratura e nella musica. L'arte richiede non solo talento e abilità, ma anche tempo. Molto tempo. Per essere riconosciuto come artista, hai bisogno della tela e della mostra giuste in modo che le persone abbiano l'opportunità di vedere e apprezzare la tua arte (o meno). Ma una tela del genere è difficile da trovare, per non parlare di una mostra. I luoghi espositivi sono rari e c'è una forte concorrenza tra i concorrenti, che la maggior parte di loro non giudica in modo imparziale, per usare un eufemismo.
Gli artisti di strada si sono resi conto di aver ricevuto una tela facilmente reperibile con una mostra, anche se di breve durata, sotto forma di sistema di trasporto pubblico. Anche se alcuni forse vedrebbero "dato" come una sfortunata, se non del tutto legittima, esagerazione.
L´ OZM ha il privilegio di avere davanti alla propria porta una delle linee ferroviarie più trafficate. Così ha l'opportunità di offrire una piattaforma espositiva per la raffinata arte di strada in Germania. Se sei sul tetto del OZMSe sei seduto a guardare le linee del treno, vedrai incredibili opere d'arte. Non sappiamo se i responsabili delle grandi compagnie ferroviarie hanno un'idea precisa di come dovrebbe essere un treno, o se vogliono solo fornire una tela pulita per il prossimo artista. Ma questi capolavori raramente sopravvivono per più di pochi giorni, quindi la maggior parte dei treni ha lo stesso aspetto in seguito. Quindi guardare le linee del treno tutto il giorno è piuttosto noioso, anche se ti piacciono davvero i treni. Ma per un'IA, questo è un lavoro ideale perché è imparziale e non si preoccupa di guardare le linee ferroviarie tutto il giorno.
Noi aveva precedentemente addestrato una rete neurale artificiale (ANN) per il riconoscimento della street art e ridotto le dimensioni della rete a 1,3 MB, rendendola adatta per il riconoscimento in tempo reale. Quindi questa ANN dovrebbe essere il nostro giudice imparziale, il che ovviamente pone un problema poiché la scelta dei dati di addestramento contiene pregiudizi indotti dai nostri stessi pregiudizi.
Anticipando questo problema, la rete è stata inizialmente addestrata con un mix di graffiti che strisciavano sul web e immagini di street art raccolte in gran parte indipendentemente dall'altezza (o profondità) della creazione artistica in diversi quartieri di Amburgo.
La rete formata su questo database è stata alimentata per diverse ore di video di graffiti sui treni e ha raccolto migliaia di esempi di formazione di graffiti sui treni, nonché alcuni divertenti cosiddetti falsi positivi. Poiché eravamo interessati solo alle immagini "simil-street art", abbiamo utilizzato una combinazione di abilitazione dell'uscita di rete e spaziatura del coseno interstrato per filtrare i video per le migliori riprese di tutti i capolavori in mostra. Questi esempi di formazione sono stati aggiunti al database di formazione della rete, fornendo un buon punto di partenza per una formazione imparziale.
Per prima cosa abbiamo posizionato una fotocamera con uno zoom ottico 10x collegata a un piccolo computer di elaborazione video (in realtà un Jetson Nano) al secondo piano del OZMs per osservare le linee ferroviarie e inviare il video al nostro motore di inferenza per l'analisi. Quindi ora avevamo un'intelligenza artificiale che ci forniva istantanee dei graffiti sui treni.
Abbiamo usato il Nano solo per fare un po' di codifica video e inviare il video tramite WiFi al nostro piccolo motore di inferenza dove abbiamo fatto la stessa cosa che abbiamo fatto con i video. Ovviamente abbiamo avuto alcuni problemi con i veri negativi che non erano inclusi nei dati di allenamento, come artefatti di decompressione video dovuti alla scarsa qualità del WiFi o alcuni treni come l'ICE, che non erano nel database. Anche la prospettiva dalla telecamera era molto diversa dai soliti esempi di allenamento. Abbiamo risolto il problema congelando i livelli di rilevamento delle caratteristiche e regolando gli strati superiori della mesh con campioni aggiuntivi raccolti nei primi giorni di test.
Ma non si tratta solo di scattare gli scatti migliori. Si tratta anche della presentazione delle istantanee, che dovrebbero mostrare il nostro rispetto e apprezzamento per i lavori presentati e lo sforzo e l'impegno che li hanno resi possibili.
Abbiamo voluto aggiungere qualcosa alle foto dei lavori per mostrare il rapporto tra i graffiti sui treni e l'arte del OZM poter simboleggiare l'essere realizzati da artisti che hanno iniziato la loro carriera lavorando sulle linee ferroviarie appena fuori OZM aveva iniziato. Solo graffiti dal OZM fare affidamento sulle immagini sarebbe stato zoppo. Realizzare nuovi graffiti per ogni immagine che troviamo non sarebbe stato possibile per motivi organizzativi. Ancora una volta, l'IA era la soluzione.
Per aggiungere qualcosa di appropriato, abbiamo addestrato varie IA su opere di artisti di strada affermati che hanno familiarità con il OZM collaborare e confrontare i risultati. Abbiamo deciso di combinare le foto selezionate con l'originale Hammerbrooklyn-Firma un logo pieno di immagini delle cosiddette “passeggiate latenti” di un'oca in stile2. Una tale immagine può essere vista qui all'estrema sinistra. Quello è nel mezzo Hammerbrooklyn-Logo riconoscibile. Nell'istantanea, il contorno del Hammerbrooklyn-Loghi quindi utilizzati come modello per creare l'immagine generata dell'IA sotto forma di Hammerbrooklyn- Loghi "Timbro" nell'istantanea.
La prossima grande domanda era quali snap dovrebbero essere presentati e come. Abbiamo concordato scatti casuali ordinati per giorno della settimana. Tuttavia, per incoraggiare i visitatori a sfogliare le immagini, abbiamo nascosto la maggior parte delle immagini e utilizzato i nomi dei giorni della settimana come contenitori. Quando un visitatore passa il mouse su una lettera, quella parte diventa visibile, ma per vedere l'intera immagine, i visitatori devono fare clic sulle lettere.
Per far sapere ai visitatori la data effettiva in cui è stata scattata la foto, doveva essere stampata sull'istantanea, il che era un po' problematico. Ogni istantanea mostra singole opere d'arte, perché lo capiamo OZM come spazio artistico. Quindi il semplice rendering della data con un carattere non era un'opzione. Un graffito della data sarebbe stata la soluzione migliore, ma doveva essere unico. Per la terza volta la soluzione è stata l'IA.
Abbiamo aggiunto la data sotto forma di un graffito generato da un'IA, che a sua volta è stata addestrata sulle forme dei lavori di OZ. I graffiti non assomigliano a quello che la maggior parte delle persone si aspetterebbe da OZ, famoso per i suoi scritti di Ozozozozoz. Ma copiare OZ non è mai stato l'obiettivo, piuttosto creare un nuovo stile fortemente influenzato dall'ultimo lavoro di OZ. Chiunque abbia familiarità con gli ultimi lavori di OZ noterà la somiglianza.
Il metodo prende le cifre visualizzate in un font comune (in basso a destra), le deforma ed esegue il rilevamento dei limiti. L'immagine risultante (immagine a sinistra grande) viene inviata a un pix2pix gan che è stato ampiamente addestrato su forme distorte estratte da immagini da OZ, ma con i dettagli rimossi dall'immagine di input.
Consideriamo questo un esempio di "AI for Good" per diversi motivi. Nessuno ha perso il lavoro. L'IA raccoglie e conserva opere d'arte che altrimenti sarebbero andate perdute. L'arte raccolta dall'IA viene presentata a un pubblico più ampio. L'IA è imparziale ad artisti e stili, quindi nessuno è svantaggiato. Lo stile di OZ è ripreso nelle immagini per commemorare il compianto artista dei graffiti di Amburgo che non ha mai smesso di abbellire la sua città e ha così dato un contributo importante alla varietà di opere che possiamo ammirare oggi sui treni.
* Le istantanee sono accese https://onezeromore.com/ozmai-2/trainspotting/ visualizzato. Ti invitiamo a sfogliare le immagini in quanto ciò ti consentirà di goderti tutta l'arte. Stiamo anche lanciando un account Instagram per la tua dose giornaliera di nuovi arrivi di graffiti sui treni.
Se trovi un graffito particolarmente attraente che vorresti avere sul tuo treno, edificio, camion, barca, aereo, ecc., siamo felici di aiutarti. Basta contattarci.
* Naturalmente non conosciamo l'autore delle immagini. Ma di solito conosciamo artisti che sono in grado di creare un'interpretazione dei graffiti che è molto vicina all'originale. (A causa della risoluzione della fotocamera e delle dimensioni dei graffiti sulle registrazioni, una copia 1 a 1 verrebbe comunque pixelata).
