Nelle prime competizioni i metri di valutazione della conversazione sonoerano pochi. Dal 2007 viene stabilito uno schema di base per la composizione del discorso, al fine di valutare al meglio il livello del bot. I giudici osservano la durata e l'argomento della discussione. Lo schema si suddivide in: Conoscenza generale ("Cosa è un martello?"), paragoni ("Cosa è più veloce, un treno o un aereo?") e domande che utilizzano la memoria per analizzare parti precedenti della stessa conversazione. Il lessico e i verbi devono essere presi da un dizionario per ragazzi con un'età uguale o minore ai 12 anni.
Nel 2008 lo sponsor decidedecise di aggiungere una fase preliminare all'apertura della competizione, dando la possibilità d'iscriversi attraverso il web. Coloro che giudicano i programmi hanno 5 minuti per raccogliere le domande e altri 5 minuti per condurre conversazioni simultanee.
