Esperimento sul campo di Alibaba mostra che l'IA generativa aumenta la velocità del servizio ma non la qualità oggettiva
In un significativo esperimento sul campo in collaborazione con Alibaba, i ricercatori hanno studiato come un assistente IA generativa influenzasse le prestazioni del servizio clienti post-vendita nell'e-commerce. Agenti umani impegnati nel supporto tramite chat digitale hanno ricevuto casualmente accesso all'IA, che generava diagnosi e proponeva soluzioni all'inizio delle interazioni. Gli agenti avevano la libertà di accettare, modificare o ignorare le raccomandazioni dell'IA, consentendo di valutare sia l'accesso all'IA che gli effetti dell'uso effettivo. I risultati hanno indicato che l'IA generativa migliorava la velocità del servizio e la qualità soggettiva, come riflesso nelle valutazioni dei clienti, sebbene non influenzasse significativamente la qualità oggettiva, misurata dai nuovi tentativi dei clienti. I miglioramenti derivavano da più della semplice automazione; l'IA trasformava le dinamiche agente-cliente, portando a risposte più rapide e a un approccio più proattivo da parte degli agenti, mentre i clienti contribuivano meno. Questi cambiamenti comportamentali continuavano nelle fasi successive delle chat. La ricerca, che evidenzia come l'IA generativa possa aumentare l'efficienza e la qualità percepita senza necessariamente ridurre le esigenze di follow-up, è stata pubblicata su arXiv con l'identificatore 2603.29888.
Fatti principali
- Esperimento sul campo con Alibaba nelle operazioni post-vendita dell'e-commerce
- Agenti umani assegnati casualmente all'accesso all'assistente IA generativa
- L'IA redige diagnosi e soluzioni solo nella fase iniziale
- Gli agenti possono adottare, modificare o ignorare i suggerimenti dell'IA
- L'IA migliora la velocità del servizio e le valutazioni dei clienti
- Nessun effetto significativo sulla qualità oggettiva del servizio (nuovi tentativi dei clienti)
- Gli agenti trattati rispondono più velocemente e sono più proattivi
- I clienti forniscono meno input nelle interazioni con agenti assistiti dall'IA
Entità
Istituzioni
- Alibaba
- arXiv