Мы делаем приложение, в котором люди загружают своё фото и получают оценки от незнакомцев со всего мира по шкале от 1 до 10. Оно живёт с 2014 года. За это время в базе накопилось 24 097 993 выставленных балла от 109 821 человека из 232 стран — и ещё 8,4 миллиона отказов, когда человек посмотрел на фото и пролистнул, не оценив.

Это не научная выборка, и про ограничения будет отдельно. Но таких данных почти нигде нет: в академических работах по восприятию привлекательности выборка обычно измеряется сотнями участников и десятками фотографий. Здесь — двенадцать лет непрерывных наблюдений за тем, как люди судят чужие лица. Мы залезли в собственный PostgreSQL и нашли четыре вещи, которых не ожидали.

Сразу про ограничения

Это данные одного приложения, а не человечества. Сюда приходят те, кто сам захотел, чтобы его оценили, — очень особенная выборка. Страна определяется по городу в профиле, а не по геолокации. Пол — самоназванный. Мы не знаем, кто на фото на самом деле.

Поэтому всё ниже — про поведение оценивающих, а не про то, кто в мире красивее. Вопрос «в какой стране люди привлекательнее» в этих данных не имеет смысла, и мы его не задаём.

Находка 1. Девятку почти не ставят

Первое, что бросается в глаза в распределении, — провал на девятке. Десятку ставят в 3,4 раза чаще, чем девятку: 14,6% против 4,3%. Между «восемь» и «десять» люди почти не задерживаются.

Распределение 24 млн оценок по баллам от 1 до 10
Распределение 24 млн оценок по баллам от 1 до 10

Самый частый ответ вообще пятёрка — 24,45%. Это позиция ползунка по умолчанию, и четверть оценивающих его просто не двигает. Крайне низкие оценки редки: на баллы с 1 по 4 вместе приходится 12,4%.

Балл

Оценок

Доля

1

476 591

1,98%

2

602 882

2,50%

3

898 204

3,73%

4

1 009 530

4,19%

5

5 892 680

24,45%

6

3 548 185

14,72%

7

4 379 993

18,18%

8

2 719 997

11,29%

9

1 042 271

4,33%

10

3 527 681

14,64%

Похоже, десятка работает не как деление шкалы, а как отдельный жест — «вау», а не «девять с плюсом». Девятка требует взвешивания, десятка — нет. Тот же эффект знаком всем, кто собирал NPS и пятизвёздочные отзывы: люди тянутся к краям и круглым числам, а не распределяются по шкале.

Находка 2. Мужчины наказывают мужчин

Здесь самый резкий разрыв во всём массиве. Женщины ставят мужчинам и женщинам практически одинаково — 6,45 и 6,32. Мужчины ставят женщинам 6,54, а другим мужчинам — 5,40.

Средний балл по парам: кто кого оценивает
Средний балл по парам: кто кого оценивает

Разрыв в 1,14 балла между тем, как мужчина оценивает женщину и как он же оценивает мужчину. У женщин аналогичный разрыв — 0,13 балла, почти нулевой.

Пара

Оценок

Средний балл

Мужчина → мужчина

780 766

5,40

Женщина → женщина

1 410 741

6,32

Женщина → мужчина

2 617 973

6,45

Мужчина → женщина

19 288 521

6,54

Эффект держится все двенадцать лет и не объясняется объёмом выборки. Мы не можем сказать из данных, что это: конкуренция, незаинтересованность или просто то, что мужчина, глядя на мужчину, отвечает на другой вопрос — не «красив ли он», а «лучше ли он меня». Но масштаб разрыва трудно списать на шум.

Находка 3. Разброс по странам — 2,4 балла

Одно и то же фото получит заметно разный балл в зависимости от того, кто на него смотрит.

Отклонение средней оценки по странам от общего среднего
Отклонение средней оценки по странам от общего среднего

Здесь важна методическая деталь. Первый прогон дал в топе щедрости Восточный Тимор, Ангилью и Сенегал — и это оказался чистый артефакт: у Восточного Тимора все 5 942 оценки поставил один пользователь, у Ангильи и Сенегала — по три человека. После порога «не менее 100 уникальных оценивающих» картина стала осмысленной:

Страна

Оценивавших

Средний балл

Норвегия

101

7,87

Чехия

114

7,21

Мексика

139

6,96

Канада

726

6,89

Нидерланды

213

6,72

Бельгия

145

5,88

Румыния

121

5,87

Турция

224

5,84

Венгрия

126

5,78

Украина

108

5,48

И отдельная деталь, которая ломает интуицию: своих оценивают строже. Когда оценивающий и оцениваемый из одной страны, средний балл 6,34, когда из разных — 6,48. Разница небольшая, но устойчивая на четырёх миллионах оценок и направлена не туда, куда ждёшь. Землячество здесь работает в минус: к своим придираются.

Находка 4. Первые десять оценок — самые добрые

Мы разложили оценки по порядку внутри дня: первая за день, вторая, десятая, сотая. Человек начинает щедро и довольно быстро черствеет.

Падение среднего балла по ходу сессии
Падение среднего балла по ходу сессии

Первый десяток оценок за день в среднем 6,98. К пятидесятой–сотой средний балл падает до 6,27 — минус 0,71. Дальше кривая разворачивается: те, кто дошёл до трёхсот оценок за день, снова ставят выше, но это уже другая аудитория, малочисленная и увлечённая самим процессом.

Позиция за день

Оценок

Средний балл

1–10

283 457

6,98

11–25

178 691

6,66

26–50

130 570

6,31

51–100

144 877

6,27

101–250

188 050

6,30

250+

265 438

6,51

Практический вывод для всех, кто собирает оценки чего угодно — резюме, работ на конкурсе, товаров: порядок показа влияет на результат сильнее, чем кажется. Разница между тем, чтобы попасть человеку пятым и пятидесятым, — примерно семь десятых балла из десяти. Если вы не рандомизируете порядок, вы измеряете не качество, а позицию в очереди.

Что со всем этим делать

Ни одна из этих цифр не говорит о том, кто как выглядит. Все четыре находки — про оценивающего: про его усталость, его пол, его культуру и его отношения со шкалой. Человек, который видит ваше фото, приносит с собой гораздо больше, чем вы думаете, глядя на полученный балл.

Возраст тоже играет: самые строгие — те, кому 18–24 (6,14), к 35–44 щедрость растёт до 6,64. Эффект есть, но он слабее остальных, поэтому в отдельный раздел не выносим.

Все агрегаты посчитаны напрямую в PostgreSQL на проде, персональные данные не использовались и не публикуются. Приложение называется Rate Me. Но самое полезное, что можно вынести из этих 24 миллионов оценок, — это здоровый скепсис к любому единственному числу, которое кто-то поставил вам или вашей работе.