Metodo
Confrontare periodi di visibilità AI senza mescolare campioni
Per confrontare due periodi di visibilità AI senza mescolare campioni diversi, RankAI applica una regola: si confronta solo se motore, metodo di raccolta e prompt coincidono. Se cambia uno di questi elementi, il confronto va ricostruito. La misura della visibilità AI dipende da ciò che torna dall’API, non dalla schermata che vede una persona.
Per confrontare due periodi senza mescolare campioni diversi, la regola è una sola: confronta solo se motore, metodo di raccolta e prompt coincidono. Se uno di questi tre elementi cambia, non stai confrontando lo stesso campione. In RankAI, la misura della visibilità AI parte da ciò che torna da un motore tramite API: è la risposta dell’API, non la schermata che vede una persona. Se una misura non c’è, la mostriamo come N/D, mai come zero. Questo vale anche quando il motore è lo stesso ma cambia la versione dell’API: il confronto va ricostruito, non forzato.
Definire condizioni confrontabili nel tempo
Un confronto tra periodi è utile solo se le condizioni di osservazione restano stabili. Nella nostra proposta operativa, prima di leggere una variazione chiediti se sono rimasti identici il motore interrogato, il metodo con cui raccogli i dati e l’insieme di prompt usati. Se manca uno di questi, il dato può sembrare cambiato per ragioni che non riguardano la visibilità. Per questo, quando una misura non è disponibile, la indichiamo come N/D: un’assenza non è uno zero e non va trattata come tale.
Metodo RankAI per confronti nel tempo (proposta operativa, non standard universale). Prima di confrontare due periodi, verifica in sequenza: (1) stesso motore interrogato; (2) stesso metodo di raccolta, cioè stessa via API e stessa versione dichiarata; (3) stesso insieme di prompt, senza aggiunte o rimozioni tra i due periodi. Se uno dei tre punti non coincide, il confronto non è valido: ricostruisci il campione invece di leggere la differenza come un cambiamento di visibilità. Se il motore è lo stesso ma la versione dell’API è cambiata, tratta il periodo come un nuovo campione e non sommare i dati. Quando una misura manca, resta N/D: non va convertita in zero né inclusa in medie o totali come se fosse un valore osservato. Questo metodo serve a evitare che variazioni di strumento vengano scambiate per variazioni di visibilità AI.
Un esempio illustrativo
Supponiamo, solo a scopo illustrativo, di avere due periodi con lo stesso motore e gli stessi prompt, ma con una versione dell’API diversa. In quel caso non leggiamo la differenza come un cambiamento di visibilità: la trattiamo come un cambio di campione. Se invece motore, metodo e prompt coincidono, la differenza tra i due periodi è confrontabile. In entrambi i casi, le misure assenti restano N/D e non entrano nei calcoli come zeri.
Limite verificabile
Il limite è verificabile: se non puoi dimostrare che motore, metodo e prompt sono identici nei due periodi, il confronto non è valido. RankAI non colma le lacune con stime: le misure mancanti restano N/D. Per il quadro completo su come funziona la misura, vedi la pagina di approfondimento.