Metod
Hela poängen med indexet är att någon annan ska kunna räkna om det. Här står exakt hur.
Frågorna
Vi använder 30 öppna frågor. Öppna betyder att vi aldrig nämner ett varumärke i frågan, eftersom vi mäter vilka märken modellen själv föreslår. Jämförande frågor av typen "är X eller Y bättre" mäter något annat och hör inte hemma i samma index.
Körningarna
Varje fråga ställs 3 gånger till varje modell. Modeller svarar olika från gång till gång, så ett enskilt svar säger ingenting. Vi redovisar frekvens, aldrig ett svar. Totalt analyserades 360 svar i den här mätningen.
Websökning
Alla modeller körs med websökning påslagen där leverantören stödjer det. Det är närmare vad en konsument faktiskt möter än en modell som bara svarar ur träningsdata.
Begränsning vi är öppna med: vi mäter via leverantörernas API:er, inte via chattgränssnitten. Chattprodukterna har egna systemprompter och egen efterbehandling, så siffrorna här är en näraliggande approximation av konsumentupplevelsen, inte en exakt kopia av den. Att skrapa chattgränssnitten skulle bryta mot leverantörernas villkor.
Hur varumärken hittas i texten
Med deterministisk namnmatchning mot ett register av varumärken och deras alias, inte med en modell. Matchningen sker på ordgränser, och tvetydiga namn kräver kontext. "Tre" räknas till exempel bara när ordet står nära ord som mobil, abonnemang eller täckning, annars skulle räkneordet i "de tre bästa" slå igenom.
Varje månad granskas en lista över versaliserade namn som ingen alias täckte. Det är så nya varumärken kommer in i registret.
När ett varumärke får en egen sida
Först när det nämns i minst 3 olika frågor. Under den gränsen finns det för lite att skriva om, och sidan skulle bli tunt automatgenererat innehåll.
Kan ett varumärke betala för placering?
Nej, och du behöver inte ta vårt ord för det. Rådatan från varje mätning ligger nedladdningsbar under Öppna data tillsammans med koden som räknar. Ett index vars indata är offentliga går inte att muta.
Annonser förekommer på sajten. De är alltid märkta "Annons", ligger alltid utanför datatabellerna och påverkar aldrig siffrorna, eftersom siffrorna räknas fram maskinellt ur rådatan.