Le possibilità dell'intelligenza artificiale di un veicolo senza pilota sulle strade sono vicine a quelle umane, anche se in alcuni casi sono insignificanti, ma le superano, ha dimostrato uno studio di Cognitive Technologies.
Come ha detto l'azienda a RIA Novosti, lo scopo dello studio era determinare chi, nella fase attuale della creazione di veicoli senza pilota, è più bravo a comprendere le singole situazioni stradali - intelligenza artificiale (AI) o naturale (EI) - cioè una persona. "In altre parole: la mente umana artificiale sta già vincendo nel compito di controllare il drone o no?" - notato in azienda
Gli specialisti di Cognitive Technologies hanno confrontato le capacità che l'AI ha già raggiunto. 17 volontari hanno preso parte a test per valutare la qualità e la velocità di rilevamento (rilevamento, identificazione - ndr) di segnaletica stradale, auto e pedoni, effettuati su strade pubbliche a Mosca e nella regione di Mosca.
Sono stati effettuati numerosi test in condizioni meteorologiche difficili (momento buio della giornata, pioggia), e sono stati eseguiti test anche in condizioni difficili da riconoscere come il passaggio dalla luce all'ombra e l'accecamento del sole. Il volontario, in accordo con il compito, ha doppiato alcuni oggetti della scena stradale, notato da lui, in parallelo, sono stati registrati i risultati del riconoscimento dell'IA della stessa linea di oggetti. Alla fine del viaggio, i dati sono stati elaborati e inseriti nella tabella di test generale.
Gli studi sono stati condotti nel periodo settembre - novembre 2017, utilizzando una videocamera (mono camera).
I test sono stati preparati in modo tale che il numero di oggetti che appaiono simultaneamente non superasse tre, poiché altrimenti sarebbe tecnicamente difficile per una persona dare voce ai risultati del rilevamento. Su ogni percorso, una persona non riceveva più di 30-35 oggetti da riconoscere.
In totale, i test sono stati effettuati su 27 percorsi diversi in insediamenti a velocità di 50-60 chilometri all'ora.
Robot contro umano
Video promozionale:
Lo studio ha mostrato che le capacità dell'intelligenza artificiale sono già vicine al naturale, in un certo numero di casi il robot ha "sconfitto" una persona, anche se con un piccolo margine.
Il primo risultato dello studio - determinare la qualità del rilevamento di oggetti sulla scena stradale in condizioni meteorologiche e stradali favorevoli - sono stati risultati approssimativamente uguali per EI e AI, sia in termini di velocità che di precisione. Secondo l'ultimo indicatore per segnaletica stradale, auto e pedoni, hanno superato il 99%.
L'intelligenza artificiale si è comportata meglio nei test quando i singoli oggetti non erano completamente visibili (dietro alberi, auto parcheggiate e altri ostacoli).
Il vantaggio dell'IA non era nella qualità del riconoscimento, ma nella velocità di rilevamento. Ad esempio, nei test sui segnali stradali, l'IA è stata in grado di vedere oggetti parzialmente ostruiti per una frazione di secondo prima. “Il test ha mostrato che in condizioni più difficili, i soggetti (volontari - ndr) spesso hanno notato i segnali stradali momentaneamente più tardi rispetto all'IA. Tuttavia, questa volta offre al sistema di controllo un ulteriore vantaggio per l'elaborazione e l'analisi delle informazioni sulla situazione del traffico in generale , ha affermato Yuri Minkin, capo del dipartimento dei veicoli senza pilota presso Cognitive Technologies.
Il tempo di reazione esatto di AI e umani nelle condizioni di questo esperimento non è stato registrato, il suo valore è oscillato da circa 0,5 secondi e non ha superato 1 secondo. La precisione del riconoscimento della messaggistica unificata e dell'intelligenza artificiale in questi test ha superato il 99%.
Nei test con auto e pedoni parzialmente oscurati, il vantaggio dell'IA in velocità è rimasto, ma potrebbe già essere considerato un errore statistico (dell'ordine di 0,5 secondi o meno). Anche la precisione del riconoscimento della messaggistica unificata e dell'intelligenza artificiale è stata superiore al 99%.
Un vantaggio insignificante dell'IA nella velocità e nella qualità del rilevamento è stato notato anche in condizioni di pioggia durante il riconoscimento dei segnali stradali: era del 98,3% contro il 97% per l'EI. Nel riconoscere le auto, i risultati erano approssimativamente uguali (circa il 98% con una differenza inferiore allo 0,5% a favore dell'IA). "Questo risultato può essere spiegato dalla maggiore resistenza dell'IA a questo tipo di interferenza durante il rilevamento di oggetti di dimensioni relativamente piccole", ha spiegato l'azienda.
Inoltre, l'IA ha vinto in situazioni borderline: in situazioni di transizione dalla luce all'ombra e accecante, l'IA è stata più veloce nell'affrontare il compito del riconoscimento. Il tempo di reazione umano è stato più lungo in quasi tutti i test, ma non ha superato 1 secondo. La precisione del riconoscimento sia dell'interfaccia utente che dell'IA era superiore al 98%.
I test hanno dimostrato che la persona è riuscita a riconoscere i pedoni in condizioni difficili (notte, pioggia). La precisione del riconoscimento della messaggistica unificata è stata di circa il 99,2% contro il 98% per l'IA, sia di notte che sotto la pioggia. “Una persona è un oggetto piuttosto difficile da riconoscere: i pedoni non hanno una forma costante, possono camminare abbracciati, tenendosi per mano, portando un carico e così via. E se in buone condizioni l'IA non ha ceduto agli esseri umani, in condizioni difficili le capacità dell'IA si sono rivelate leggermente migliori finora , ha osservato Minkin.
conclusioni
Il risultato principale dello studio è stata l'approssimazione delle capacità dell'IA all'EI. Inoltre, come hanno mostrato i risultati dei test, il vantaggio dell'IA si è manifestato quando le condizioni stradali e meteorologiche sono diventate più complicate, ha osservato la società. "Possiamo aspettarci che con un aumento della potenza di calcolo, così come della qualità dei sensori e del software, il vantaggio dell'IA diventerà ovvio, come è stato negli scacchi", ha detto un rappresentante di Cognitive Technologies.
“Ovviamente, molti aspetti dell'organizzazione e della conduzione della ricerca non possono pretendere di essere perfetti, e lavoreremo insieme alla comunità di esperti per sviluppare sia la metodologia che i test stessi. Ma devi capire che questo è il primo tentativo nella storia di confrontare le capacità dell'IA e degli esseri umani. E come prima approssimazione, abbiamo ottenuto risultati reali che possono e devono essere presi in considerazione, sulla base dei quali è possibile prevedere lo sviluppo della direzione della creazione di AI per gli autobot , ha affermato Olga Uskova, Presidente di Cognitive Technologies.
Secondo lei, l'azienda prevede di condurre i seguenti test, analizzando la qualità della comprensione di varie situazioni stradali da parte dell'uomo e dell'intelligenza artificiale.
La società ha osservato che l'obiettivo iniziale non era confrontare le capacità dell'intelligenza artificiale e degli esseri umani.
"Inizialmente, non volevamo confrontare le capacità degli esseri umani e dell'intelligenza artificiale. Abbiamo pianificato di testare il nostro sistema di intelligenza artificiale per veicoli senza pilota C-Pilot. L'idea di confrontare l'IA con un essere umano è nata già durante i test. Ma ci siamo infiammati con questa idea, è diventato incredibilmente interessante per noi ottenere una valutazione del confronto tra intelligenza artificiale e esseri umani ", ha detto Yuri Minkin, capo del dipartimento dei veicoli senza pilota presso Cognitive Technologies.
