NIXUMA

METHODOLOGY: ANALISI DI VISIBILITÀ IA

Il metodo di misurazione

L'Analisi di visibilità IA di NIXUMA interroga più IA, più volte, con domande formulate come le pongono i clienti veri. Misura tre cose: 1) se il nome del ristorante compare nella risposta, 2) quali ristoranti compaiono al suo posto, 3) se le informazioni sul ristorante sono corrette. Il risultato è una proporzione: quante volte il ristorante è comparso, su quante domande. Non trattiamo mai una singola risposta come un «punteggio», perché le risposte dell'IA cambiano a ogni richiesta.

WHAT WE MEASURE

Che cosa misuriamo: quattro elementi

01 Presenza (il nome viene citato?)Poniamo le domande come fa un cliente che cerca un ristorante con un'IA: «zona + tipo di cucina», «zona + occasione (anniversario, pranzo di lavoro, famiglia)», e contiamo in quante risposte il ristorante compare con il suo nome. Usiamo domande in inglese, come le formulano i visitatori, e in giapponese, come le formulano i clienti locali.
02 I ristoranti citati al suo postoQuando il ristorante non compare, registriamo chi l'IA ha consigliato al suo posto. Senza sapere a favore di chi si sta perdendo, non si sa dove intervenire.
03 Informazioni errateControlliamo se orari, giorni di chiusura, indirizzo, fascia di prezzo e tipo di cucina indicati nelle risposte corrispondono alle informazioni ufficiali del ristorante. Un'informazione sbagliata fa perdere clienti veri.
04 Le fonti delle risposteOsserviamo su quali informazioni pubbliche si basano le risposte: sito ufficiale, scheda Google, siti di recensioni. Se le fonti sono sbilanciate, anche quello è un indizio su dove intervenire.

PRINCIPLES

Come misuriamo: cinque principi

01 Misuriamo su più IAI clienti non usano tutti la stessa IA. Il risultato di una sola IA non basta a descrivere «come si compare nelle IA».
02 Ripetiamo e ragioniamo in proporzioniLe risposte cambiano a ogni richiesta. Per questo poniamo le stesse domande più volte e riportiamo sempre il denominatore: «comparso 3 volte su 10». Non pubblichiamo mai un punteggio calcolato da una sola risposta.
03 Domande con le parole dei clientiLe domande rispecchiano quelle reali dei clienti. Non misuriamo mai con domande che contengono il nome del ristorante («consigli X?»): il punto di partenza è come chiede chi quel nome non lo conosce.
04 Conserviamo le risposte integraliRegistriamo le domande usate e le risposte complete delle IA, così il report si può verificare. Un riepilogo da solo non è verificabile.
05 Nessuna garanziaQuesta misurazione fotografa la situazione attuale; non promette risultati futuri. Pubblichiamo il metodo perché vogliamo essere giudicati sull'onestà della misurazione, non su quanto il risultato fa piacere.

LIMITS

I limiti di questa misurazione

Le risposte dell'IA possono cambiare da un giorno all'altro, anche a parità di domanda. E le risposte ottenute via programma possono non coincidere del tutto con quelle che un cliente vede nell'app. Per questo il nostro presupposto è non dare per assoluto un singolo momento, ma ripetere la misurazione con lo stesso metodo e osservare come cambia. L'Analisi di visibilità IA è una misurazione leggera, per capire la situazione; l'Audit completo aumenta domande, IA coinvolte e ripetizioni, per una precisione maggiore.

Questo metodo non è ancora definitivo

Saremo chiari: la definizione finale degli elementi misurati dipende dai risultati del primo controllo che stiamo eseguendo su NIXUMA stessa. Li pubblicheremo su questo sito così come sono, favorevoli o no. Se elementi o criteri di calcolo cambieranno, aggiorneremo questa pagina e le modifiche resteranno visibili.

Non pubblichiamo in anticipo numeri non definiti (ad esempio i pesi dei singoli elementi) per dare un'impressione di scientificità. Quello che possiamo pubblicare è ciò che è scritto qui: principi ed elementi della misurazione.

La presentazione completa del servizio è nella pagina sulla visibilità IA per ristoranti. Per domande: [email protected].