Analisi esplorativa Caso Studio Churn.

Presentazione sul tema: "Analisi esplorativa Caso Studio Churn."— Transcript della presentazione:

1 Analisi esplorativa Caso Studio Churn

2 Obiettivi Utilizzare Rialto per l’analisi di un caso studio: Churn

3 Caso studio: Churn E’ un dataset disponibile presso l’UCI Repository
Contiene 20 attributi e 3333 tuple Le informazioni sono relative al fenomeno dell’attrition di una compagnia telefonica

4 Attrition? Customer attrition (o customer churn nel caso di compagnie telefoniche) indica il passaggio di clienti da una azienda ad una concorrente

5 Dettagli (1/3) State: categorico, codici relativi ai 50 stati USA più quello del distretto della Columbia Account length: integer, tempo di vita totale dell’accunt Area code: categorico Phone number: essenzialmente si comporta alla stregua di un ID International Plan: binario dicotomico, yes o no Voic Plan: binario dicotomico, yes o no Number of voice mail messages: integer

6 Dettagli (2/3) Total day minutes: continuo, minuti usati dal cliente durante il giorno Total day calls: integer Total day charge: continuo, addebito di una chiamata durante il giorno Total evening minutes: continuo, minuti usati dal cliente durante la sera Total evening calls: integer Total evening charge: continuo, addebito di una chiamata durante la sera

7 Dettagli (3/3) Total night minutes: continuo, minuti usati dal cliente durante la notte Total night calls: integer Total night charge: continuo, addebito di una chiamata durante la notte Total international minutes: minuti usati dal cliente per fare chiamate internazionali Total international calls: integer Total international charge: continuo, probabilmente basato su due precedenti variabili Number of calls to customer service: integer

8 Correlazione tra variabili (1/2)
Il dataset contiene 3 variabili potenzialmente correlate: minutes, calls, and charge. E’ molto probabile che la variabile charge possa essere funzione di minutes e call. Per valutare possibili correlazioni possiamo utilizzare lo scatter plot.

9 Correlazione tra variabili (2/2)
Esempio: day charge e day mins

10 Analisi Esplorativa degli Attributi Categorici
In questa fase è interessante indagare come questi attributi si distribuiscono rispetto alla variabile obiettivo

11 Analisi Esplorativa degli Attributi Categorici
International Plan: InternationalPlan=yes Churn? Count Perc False 186 5.58 True 137 4.11 InternationalPlan=no Churn? Count Perc False 2664 79.93 True 346 10.38

12 Analisi Esplorativa degli Attributi Categorici
In figura è mostrato un confronto tra la percentuale di churners (rosso) e nonchurners (blu) tra i clienti che avevano scelto il piano internazionale (sì, 9,69% dei clienti) o no (no, 90,31% dei clienti) . Il grafico sembra indicare che una buona percentuale di coloro i quali hanno un piano internazionale sono “churning”, ma è difficile esserne sicuri.

13 Cross Tabulation su International Plan
Nella tabella è mostrato il risultato della cross-tabulazione. International Plan Churn No Yes False. 2664 186 True. 346 137

14 Analisi (1/2) Si noti che la somma dei valori contenuti nella prima colonna coincide col numero totale di coloro i quali non erano titolari del piano internazionale, 3010 ( ) ; viceversa dicasi per la seconda colonna. La prima riga nella tabella mostra il numero di coloro i quali non abbandonano la loro compagnia, mentre la seconda riga mostra viceversa i rinunciatari. Il dataset contiene un totale di 483 ( ) churners rispetto ai 2850 ( ) non-churners; ossia il 14,5% (483 / ( )) dei clienti totali sono churners.

15 Analisi (2/2) Si noti che il 42,4% (137 / ( )) di coloro i quali che sono titolari di un piano internazionale sono anche churned, rispetto al solo 11.5% (346 / ( )) di coloro che non ne sono titolari. I clienti che hanno selezionato il piano internazionale e che abbandonano la loro compagnia sono percentualmente il triplo rispetto a quelli che non lo hanno selezionato. Questa analisi sul piano internazionale indica che: Forse dovremmo indagare sulle cause piano che inducono i clienti con un piano internazionale a lasciare la loro compagnia! Quello che ci aspettiamo è che utilizzando un algoritmo di data mining per prevedere l’abbandono del servizio, il modello utilizzerà la presenza o meno del piano internazionale nel profilo del cliente per prevedere l’abbandono.

16 Analisi Esplorativa degli Attributi Categorici
Voic Plan Voic =yes Churn? Count Perc False 842 25.26 True 80 2.4 Voic =no Churn? Count Perc False 2008 60.25 True 403 12.09

17 Cross Tabulation su VoiceMail Plan
Nella tabella è mostrato il risultato della cross-tabulazione. Voic Plan Churn No Yes False. 2008 842 True. 403 80

18 Analisi (1/2) Prima di tutto, possiamo notare che 922 ( ) clienti hanno il piano Voic , mentre il 2411 ( ) non lo hanno. Possiamo quindi individuare che il 16.7% (403/2411) di coloro i quali non possiedono il piano Voic sono churners, rispetto allo 8,7% (80/922) dei clienti che hanno il piano Voic . In prima istanza possiamo dire che i churners senza la tariffa Voic sono percentualmente il doppio rispetto ai churners con questo piano.

19 Analisi (2/2) Questa analisi del piano VoiceMail ha indicato che:
Forse dovremmo diffondere maggiormente questa tariffa al fine di migliorare la fidelizzazione. Ci aspettiamo che un qualsiasi algoritmo di data mining, per predire churn, tenga in considerazione l’attributo che indica la presenza del piano tariffario Voic

20 Dati Anomali La prima situazione anomala riguarda l’area code : questo campo contiene solo attributi numerici, ma viene trattato come nominale. Il motivo di tale scelta dipende dal fatto che ognuno dei valori (408, 415 e 510) rappresenta una corrispondente area geografica.

21 Dati Anomali 1/2 Problema:
I codici corrispondono ad aree geografiche presenti in California Problema: La cross tabulation con state ci indica che quei codici sono sparsi su tutti gli stati membri degli USA E’ possibile che un esperto di dominio sia in grado di spiegare questa situazione o che effettivamente che il campo contenga dati errati. In prima analisi i due attributi per le ragioni descritte saranno omessi

22 Dati Anomali 2/2

23 Analisi Esplorativa degli Attributi Numerici
Per l’analisi ovvero la valutazione degli attributi numerici saranno utilizzate alcune misure come: Il massimo, il minimo, la media, la deviazione standard, e la mediana.

24 Analisi Esplorativa degli Attributi Numerici
Massimo Minimo Media Dev. St. Mediana Account Length 243 1 101,0648 39,81613 101 VMail Message 51 8,09901 13,68631 Day Mins 350,8 179,7751 54,45922 179,4 Day Calls 165 100,4356 20,06607 Day Charge 59,64 30,56231 9,258045 30,5 Eve Mins 363,7 200,9803 50,70624 201,4 Eve Calls 170 100,1143 19,91964 100 Eve Charge 30,91 17,08354 4,310021 17,12 Night Mins 395 23,2 200,872 50,56626 201,2 Night Calls 175 33 100,1077 19,56567 Night Charge 17,77 1,04 9,039325 2,275531 9,05 Intl Mins 20 10,23729 2,791421 10,3 Intl Calls 4,479448 2,460845 4 Intl Charge 5,4 2,764581 0,75366 2,78 CustServ Calls 9 1,562856 1,315294

25 Analisi Esplorativa degli Attributi Numerici
In prima istanza possiamo osservare che il campo Account Length ha come valore minimo 1, come valore massimo 243, mentre media e mediana assumono valori all’incirca uguali (101) Tale valori ci indicano una simmetria nei dati Le stesse osservazioni si possono effettuare su diversi campi, tra cui tutti i minutes, charge, e call.

26 Analisi Esplorativa degli Attributi Numerici
Gli altri campi voice mail messages e customer service calls non sembrano mostrare alcuna simmetria. In particolare: La mediana per voice mail messages è zero, ciò sta ad indicare che almeno metà dei cliente non hanno messaggi voic . Questo risultato, naturalmente, indica che meno della metà dei clienti scelgono il piano Voic , come visto sopra.

27 Analisi Esplorativa degli Attributi Numerici
La media di chiamate al servizio clienti (1.563) è superiore alla mediana (1.0), mostrando una certa simmetria destra, come anche indicato dal numero massimo di chiamate il servizio clienti ossia 9.

28 Analisi Esplorativa degli Attributi Numerici

29 Analisi Esplorativa degli Attributi Numerici

30 Analisi Esplorativa degli Attributi Numerici
I clienti che hanno chiamato il servizio clienti meno di tre volte hanno un tasso di abbandono marcatamente inferiore a quello dei clienti che hanno chiamato il servizio clienti di quattro o più volte. Questo analisi sulle chiamate al servizio clienti ha indicato che: Dobbiamo monitorare attentamente il numero di chiamate al servizio clienti per ciascun cliente. Alla terza chiamata, dovrebbero essere offerti forti incentivi per conservare la fidelizzazione dei clienti. Ci dobbiamo aspettare che qualunque algoritmo di data mining che venga usato per prevedere se il cliente è churn, probabilmente utilizzerà il numero di chiamate al servizio clienti per effettuare la predizione.

31 Riassunto dei risultati dell’analisi condotta
Account length Nessuna ovvia relazione con churn, ma mantenuto Area code Anomalo. Omesso dal modello. Phone number Si comporta come un ID. Omesso dal modello. International Plan Predittivo di Churn. Mantenuto. Voic Plan Number of voice mail messages Total day minutes Total day calls Total day charge Funzione di minutes. Omesso dal modello. Total evening minutes Total evening calls Total evening charge Total night minutes Total night calls Total night charge Total international minutes Nessuna ovvia relazione con churn, ma mantenuto. Total international calls Total international charge Customer service calls

32 Binning Il binning è un insieme di tecniche volte alla categorizzazione dei dati: Discretizzazione di dati numerici in classi Esempio 1: possiamo suddividere l’attributo day minutes in tre classi: low, medium, high Esempio 2: possiamo suddividere le età di una popolazione nelle classi: bambino, adulto, anziano Raggruppamento di dati categorici in classi Esempio: possiamo decidere di raggruppare i valori dell’attributo state in macro regioni, e di sostiuire quest’ultimo con un nuovo attributo che chimeremo region. Quindi i valori “California”, “Oregon”, “Washington”, “Alaska” e “Hawai” verranno convertiti nel singolo valore “Pacific”, ad indicare che per la nostra analisi serve solo sapere la regione territoriale di interesse e non il singolo stato di appartenenza (stiamo aumentando la granularità)

33 Binning Il binning è un insieme di tecniche a cavallo tra l’analisi ed il pre – processamento dei dati. Esistono tante strategie per il binning di dati numerici: Creare classi di uguale estensione, così come abbiamo visto per gli istogrammi di uguale estensione (equal-width histograms). Provare a creare classi che contengano lo stesso numero di tuple. Provare a partizionare i dati in funzione della variabile target di tutta l’analisi di mining. In questo modo cerchiamo di identificare comportamenti comuni all’interno dei dati che riferiscono ad uno stesso valore di attributo target

34 Binning sull’esempio proposto
Come presentato prima i clienti, che hanno effettuato meno di 4 chiamate al servizio clienti, hanno un tasso di abbandono più basso di quelli che hanno chiamato il servizio clienti 4 o più volte. Potremmo decidere di raggruppare il valore di customer service calls in due classi: low e high.

35 Binning sull’esempio proposto
Questa figura mostra che il tasso di abbandono degli utenti con un basso numero di chiamate al servizio utenti è di 11.25%, mentre il tasso di abbandono degli altri utenti è del 51.69%, quasi 5 volte più grande.

36 Binning con Rialto L’operazione proposta può essere eseguita in Rialto utilizzando il filtro Custom Discretizer

37 Suddivisione del dataset
Utilizzando il filtro Splitter dividiamo il dataset iniziale in 2 sotto dataset Il primo conterrà il 66% delle tuple e sarà utilizzato in fase di training del modello Il secondo che conterrà le rimanenti tuple sarà utilizzato per la fase di validazione

38 Creazione del modello La scelta del modello da utilizzare è ricaduta sul RuleLearner, un classificatore a regole disponibile in Rialto

39 Motivazioni Il motivazioni della scelta di tale algoritmo sono molteplici: Il RuleLerner è particolarmente efficace nell’identificare classi di minoranza; Il modello generato è facilmente comprensibile.

40 Il modello

41 Risultati (1/2) Utilizzando il classificatore a regole otteniamo

42 Risultati (2/2) Class TP Rate FP Rate Precision Recall F-Measure False
0.983 0.275 0.954 0.968 True 0.725 0.017 0.882 0.796

43 Matrice di confusione classified as False. True. False 1396 24 True 68
179