Как сравнивать цвета и сделать из этого казуальную игру?

Вы правы. Спасибо! Не обратил внимание на это, когда реализовывал преобразования в коде. Но для игры точность вроде бы все равно получилось неплохой.