Člověk pomocí smart phonu zadání nejprve vyfotografuje. Následuje OCR, při němž se rozpoznají vstupní hodnoty. Samotné luštění pak neprobíhá v telefonu, ten jen odešle zadání do výpočetního prostředí Google Apps/Google Googles. Na displeji se pak prakticky vzápětí zobrazí vyplněná mřížka.
Postup ukazuje video, inženýr Google zde předběhne mistryni USA v luštění Sudoku za rok 2009 Tammy McLeod. Soupeřce ukáže vyluštěnou úlohu na mobilu, nepřepisuje výsledek zpátky do papírového zadání (vyhrál by i pak?). Každopádně není divu, že Nexus S je na soutěžích v luštění sudoku zakázán.
Samotný algoritmus, pomocí něhož prostředí cloudu vyřeší úlohu, zde není přesněji specifikován.
Není to jediná ukázka rozpoznávání obrazu. Google Googles umí rozpoznávat např. také reklamy v tištěným médiích a automaticky vyhledat na internetu informace o příslušném produktu nebo značce. Telefon se snaží rozpoznávat i čárové kódy. Každopádně se jedná o hezkou ukázku toho, jak budou brzy vypadat aplikace rozšířené/obohacené (augmented) reality. Google nedávno prezentoval i technologii speciálních brýlí, při které aplikace automaticky překládá rozpoznané nápisy z jednoho jazyka do druhého a zobrazuje je uživateli rovnou v cílovém jazyce.
Video z YouTube