Qualche idea sull'applicazione del sogno profondo?


9

Recentemente Google ha pubblicato interessanti sogni profondi. Oltre alla generazione artistica come http://deepdreamgenerator.com/ , vedi qualche potenziale applicazione del sogno profondo nella visione artificiale o nell'apprendimento automatico?

Risposte:


4

C'è già almeno un'applicazione in uscita, se interpreti 'l'applicazione' in modo abbastanza ampio: Rete Neurale Profonda Disaccoppiata per Segmentazione Semantica semi-supervisionata da Hong, Noh e Han . Lo usano per la segmentazione delle immagini . Le reti standard di riconoscimento delle immagini possono fornire solo un rettangolo di selezione per ogni oggetto riconosciuto su un'immagine. Se vuoi sapere quali pixel costituiscono quell'oggetto, devi fare la segmentazione dell'immagine.

Fondamentalmente, dopo aver trovato un cane su un'immagine, l'architettura di Hong et al-propaga indietro la dog-ness attraverso la rete neurale fino al livello dei pixel, per trovare i pixel che erano i più responsabili dell'apparizione del cane. (Quindi usano questa mappa di calore come input per una rete di segmentazione supervisionata, non c'è alcun sogno profondo in quella parte.)

Questa è già una prova dell'esistenza che l'idea di Deep Dream può essere utile al di fuori della manipolazione delle immagini. Ma non minimizzerei neanche la manipolazione delle immagini. Cito due cose che non sono applicazioni immediate di Deep Dreaming, e non le abbiamo attualmente, ma posso quasi vedere una strada plausibile dall'algoritmo Deep Dream originale verso queste:

  • Immagini abbellenti e volti e corpi umani. (Automatizzare ciò che fa un artista di ritocco di Photoshop.)
  • Upscaling di immagini in stile CSI con dettagli interpolati falsi ma credibili.

2

ecco un'altra applicazione che è molto nuova e appena dimostrata nelle ultime settimane. i computer filtrano le immagini per assomigliare a dipinti nello stile distintivo di diversi artisti come Van Gogh, Picasso, ecc ... e sembra possibile poiché la tecnologia può comprendere diversi stili artistici e potrebbe essere utilizzata per il rilevamento di falsi nel mondo dell'arte in alcuni punto. (storicamente vengono utilizzate molte tecniche di analisi molto avanzate in quest'area). Si noti che i metodi di filtro sono molto popolari su Instagram, quindi sembra probabile che saranno disponibili in commercio ad un certo punto.


e come hai notato e menzionato altrove, esiste già un filtro immagine "Iphone / Android" da sogno " vzn"
vzn

un'altra applicazione: generare ambienti simulati / virtuali per giochi o film. simile alla generazione procedurale
vzn

Inoltre deepart.io sembra essere un'impresa commerciale basata sulla tecnica del tuo primo link.
Neil Slater,

1

È impossibile dimostrare un aspetto negativo, ma a parte l'utilizzo dello stesso sistema di rilevamento del modello in generale per rilevare forme / immagini e sostituirle con altre immagini simili, possibilmente per l'uso nella correzione automatica dell'immagine o simili, non penso che abbia potenziale al di fuori della modifica delle immagini.

Potrebbe essere necessario eliminare questa risposta se è stata dimostrata errata.


1
Bene, vi è un valido uso come strumento di visualizzazione / introspezione per trovare schemi appresi dalla rete. In questo link googleresearch.blogspot.ch/2015/06/… vedi la discussione sul classificatore di dumbbell. Non sono sicuro che ciò valga come un vero scopo, dal momento che è autoreferenziale
Neil Slater

Penso che sia ciò a cui è difficile rispondere alla domanda, ci sono cose dietro il sogno profondo che sono ampiamente applicabili a seconda di quanto lontano vai, ma è ancora considerata "un'applicazione del sogno profondo"? Per me, sembra che il sogno profondo stia usando un'applicazione di quelle tecniche - che è ciò che è applicabile altrove. Ma al momento non riesco a visualizzare quel link, quindi forse non sono corretto.
DoubleDouble


0

Filtro volgarità visiva nettamente sensibile al contesto.

In altri mondi, rendere vestiti fisicamente realistici e tematicamente / stilisticamente appropriati alle persone che non sono sufficientemente vestite, per rendere l'immagine più sicura per la famiglia.

Questa è l'idea, tuttavia al momento è inaffidabile e quando funziona in modo impreciso.

Tuttavia, una maggiore messa a punto dei parametri del sogno di cui io abbia accesso, o forse semplicemente usando più iterazioni e un valore di "ottava" più basso di quello che posso specificare dovrebbero rendere i risultati molto più affidabili.


Esempi:

Prima: http://s22.postimg.org/5sjpqbzoh/image.jpg

Dopo: http://s22.postimg.org/wew6fb3vl/image.jpg

.

http://s13.postimg.org/c4urz139j/image.jpg


Puoi aumentare questo spiegando cosa intendi con questo esempio? altrimenti sono solo collegamenti.
Sean Owen,

1
Penso che il problema con questa idea sia che non si allinea realmente con il funzionamento di Deep Dreaming. Avresti bisogno di formare una rete per riconoscere "l'abbigliamento adatto", ma non vestirebbe in modo appropriato figure non vestite - invece produrrebbe roba dall'aspetto drappeggiato su luoghi che già assomigliavano a pezzi di abbigliamento adeguato. Vale a dire è più probabile che si trasformi un tronco d'albero in una gamba di un pantalone piuttosto che mettere un vestito su una ragazza in bikini. Deep Dreaming non sceglie obiettivi per la sostituzione come un motore di espressione regolare di immagini, allucina le partite in modo simile.
Neil Slater,

Vedi cs.stackexchange.com/questions/47262/… Non posso dimostrare o dimostrare molto, dato che si tratta principalmente di esperienza e osservazione personali e non ho dato molte persone nude, ma penso che sia più intelligente di quanto tu le dia
Ringrazio

1
Le foto sono buone, tra alcune delle più interessanti che ho visto da Deep Dreaming. Tuttavia, penso che la ricerca di un significato e una struttura più profondi al di là della corrispondenza intelligente dei modelli sia come cercare l'intelligenza generale in una retina sezionata. . . c'è un livello al quale le reti più grandi / più veloci / più profonde appena addestrate sulle immagini non ci porteranno - qualcosa di più è necessario.
Neil Slater,
Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.