In Breve
- Quali funzioni ha superato ChatGPT nel test?
- ChatGPT ha superato i test su previsioni meteorologiche, calcoli matematici, suggerimenti di film e identificazione di piante.
- Quali funzioni hanno avuto risultati parziali?
- I risultati parziali sono stati ottenuti in giochi di parole, identificazione del cielo stellato, pianificazione di percorsi e apprendimento di una lingua.
- Quali funzioni sono fallite nel test?
- Le funzioni fallite includono cronometro, sveglia, meditazione guidata e supporto al food delivery.
Un recente esperimento ha messo alla prova ChatGPT su dodici attività quotidiane comunemente svolte tramite app su smartphone, rivelando risultati misti. L’analisi ha portato a quattro successi, quattro passaggi parziali e quattro fallimenti, evidenziando le limitazioni dell’AI quando non integrata profondamente con il sistema operativo del dispositivo.
Tra i successi, ChatGPT ha dimostrato di eccellere in attività come le previsioni meteorologiche, i calcoli matematici, le raccomandazioni di film e l’identificazione di piante. Le previsioni meteo fornite si sono rivelate accurate, mentre i calcoli, sebbene corretti, hanno mostrato qualche ritardo. Le raccomandazioni cinematografiche si sono dimostrate ben calibrate sui gusti dell’utente e l’identificazione botanica è risultata efficace, supportata da verifiche incrociate.
Passaggi parziali sono stati ottenuti in attività come giochi di parole, identificazione del cielo stellato, pianificazione di percorsi e apprendimento di una lingua. Sebbene ChatGPT abbia riprodotto la meccanica dei giochi, l’esperienza d’uso non ha eguagliato quella delle app dedicate. Per quanto riguarda l’identificazione delle costellazioni, l’AI ha riconosciuto correttamente alcune immagini, ma non ha offerto un’esperienza di esplorazione AR continua. Nella pianificazione dei viaggi, ha fornito opzioni utili, ma ha richiesto chiarimenti e ha generato azioni indesiderate, come la creazione di promemoria. Infine, le esercitazioni linguistiche hanno mostrato una conversazione vocale naturalistica, ma soggetta a pause e malfunzionamenti.
Le funzioni tipiche di utility, come cronometro, sveglia, meditazione guidata e supporto al food delivery, hanno mostrato risultati deludenti. ChatGPT non è stato in grado di misurare il tempo come un cronometro nativo; nella prova della sveglia, la notifica non ha allertato l’utente nonostante fosse stato creato un avviso. La guida vocale per la meditazione ha presentato intonazioni e esitazioni disturbanti, mentre nella scelta di ristoranti, l’assistente ha suggerito locali chiusi o non disponibili, evidenziando il divario tra raccomandazione informativa e azione concreta.
Questo esperimento sottolinea che, con l’attuale implementazione come app separata e senza accesso profondo ai dati e ai servizi del dispositivo, l’AI è più adatta a sostituire app informazionali che forniscono conoscenza o spiegazioni. Tuttavia, fatica a sostituire app che devono eseguire azioni rapide e integrate con il sistema operativo, come timer, navigazione turn-by-turn e gestione di ordini. Inoltre, emergono criticità comuni, come la generazione di risposte errate ma sicure, la mancanza di integrazione con banche dati specialistiche e la perdita di usabilità rispetto a interfacce progettate ad hoc.
Un’ulteriore considerazione è che un’integrazione nativa dell’AI nel sistema operativo potrebbe migliorare i risultati, consentendo accesso a calendari, timer e impostazioni. Tuttavia, rimangono necessarie garanzie su accuratezza, fonti affidabili e la possibilità di uscire dall’interfaccia conversazionale quando l’esperienza utente richiede strumenti più diretti.
