Асессоры оценивают не только органические результаты, но и контекстную рекламу Google (AdWords) и видеорезультаты, и др. Однако сегодня речь именно об оценщиках качества выдачи Google - Search Quality Raters. 

Итак, как же Google нанимает асессоров на работу? 

По информации, которую Дженнифер удалось найти, Google нанимает их на аутсорс, да еще и не напрямую, а через специальные кадровые агентства, среди которых называют Lionbridge, Leapforce и Butler Hill. Так, в компании Lionbridge эта позиция называется «internet assessor», а в Leapforce – Search Engine Evaluator (оценщик поисковой системы). То есть кандидаты напрямую с Google не общаются, у перечисленных компаний с поисковым гигантов заключены контракты по найму независимых оценщиков. Один из таких асессоров, нанятый через Lionbridge, пишет, что его устраивает оплата, но количество заданий не всегда стабильно и иногда эта работа надоедает своим однообразием. Чтобы начать работать асессором, нужно оставить заявку, и если в нужном регионе будет проходить тестирование выдачи и ваши навыки их устроят, вас примут к участию. 

Асессоры – это люди, которым нужна не основная работа, а подработка (студенты, домохозяйки и т.п.). Прежде чем компания принимает асессора, ему приходится сдать экзамен, состоящий из 2 частей. В первой из них 24 теоретических вопроса и во второй – 270 практических заданий. Поскольку эти сотрудники работают не на саму компанию Google, с одной стороны, из их оплаты не вычитаются налоги, но с другой стороны, никакими преимуществами сотрудников этого самого привлекательного в мире работодателя они тоже не пользуются. 

Как правило, они работают 10-20 часов в неделю с почасовой платой и, судя по тому, что можно найти на форумах, оплата составляет примерно $12 – $15 в час. Если взять максимальное предположение (15 долларов и 20 часов в неделю), получается месячная оплата 1200 долларов. 

Оценщиком качества поиска можно работать не более года, после чего необходимо сделать перерыв минимум на 3 месяца, прежде чем появится возможность подать новую заявку. Интересно, что асессорами, как правило, берут работать не интернет-маркетологов или даже продвинутых пользователей поиска, а самых обычных «нормальных» пользователей. 

Оценщиков нанимают со всего мира, владеющих разными языками. Однако при этом свободное владение английским (письменным и устным) является обязательным условием, обмануть работодателя в этом смысле не удастся, т.к. одним из этапов проверки кандидата является 30-40 минутное собеседование по телефону или Skype, разумеется, на английском языке. 

Судя по сообщению одного из асессоров, первая группа оценщиков Google была организована еще в конце 2003-начале 2004 года, то есть Google ведет такие работы уже на протяжении 8 лет. 

Оценщики поиска Google получают 2 типа заданий. 

В одном из них они получают 1 запрос и один урл и задачу оценить релевантность данной страницы и соответствие намерению, заложенному в запросе. 

Асессоры должны принять решение о том, насколько данная страница релевантна тому, чего хотел пользователь (сделать - посмотреть что-либо, скачать и пр., или узнать – найти отзывы или информацию по теме или перейти куда-то, например, на YouTube). 

Асессор может пометить одну и ту же страницу как спам и при этом релевантную запросу. Важное замечание: поскольку асессоры – это в основном обычные пользователи Google, огромную роль играет первое впечатление о странице. 

Асессоры в этом случае действуют, как обычные пользователи, которые обычно составляют мнение о сайте за первые секунды его посещения. 

Второй тип задания – когда асессоры получают 2 разных варианта выдачи (например, первую десятку по какому-либо запросу). Один вариант страницы так называемый «до», второй – «после» изменения алгоритма. В этом случае оценщики выбирают, какой из вариантов выдачи «лучше», по их мнению. 

Поскольку их работа оплачивается по часам, для асессоров существуют нормативы по количеству урлов, которые они должны оценить за час. Они получают по мере работы отчеты о своей продуктивности, которая оценивается количеством звездочек. Для заданий первого типа требуется обработать 30 урлов в час. 

На форуме один из асессоров поинтересовался, много это или мало, если он обрабатывает в час около 60 урлов, на что другие участники форума ответили ему, что, по их мнению, в первые недели после начала работы от асессора ждут не менее 30 обработанных урлов в час. Также асессора успокоили, сообщив, что если он не будет вырабатывать нормативов, ему пришлют по email уведомление. Также добавили, что для Google важнее качество, чем количество, поэтому менее расторопный асессор, который действительно хорошо оценивает страницы, для компании более предпочтителен, чем быстрый работник, который допускает ошибки. 

Опытный асессор добавил, что слово «возможно» ключевое, потому что они сами не знают точно, по каким критериям оценивается их работа. 

Другой асессор пишет, что его работа заслужила 3 звезды, при этом он оценивает 45-50 урлов в час. 

Что касается заданий второго типа, в которых асессорам нужно сравнить два варианта выдачи, требуется, очевидно, проделать 20 сопоставлений в час. А теперь давайте подумаем, если асессор оценивает около 30-60 урлов в час, то на каждую страницу приходится 1-2 минуты. Теперь тем более понятно, что для асессора первое впечатление играет огромную роль. 

Так, один из оценщиков жалуется на форуме, что оценить 20 пар страниц ТОП-10 за час невозможно, если кликать по каждому результату. Поэтому для второго типа заданий многие асессоры основывают свою оценку на просмотре сниппетов. Один асессор даже пишет, что однажды ему пришло в голову, что для выполнения норматива ему не следует оценивать каждый результат в выдаче и что вообще, возможно, Google нужны разные варианты и стили оценки и он принимает их все. 

А может быть, делает такое крамольное предположение асессор, вообще никто не проверяет их работу. 

Какой вывод из всех этих мучительных раздумий асессоров стоит сделать оптимизаторам? Главное, чем можно застраховать свой сайт – это релевантный сниппет. Правда, как известно, во многих случаях Google автоматически генерирует сниппеты, но все же вебмастер должен контролировать хотя бы ту часть, которая пока еще в его власти. 

Может ли решение ОДНОГО асессора изменить позицию страницы? 

В интервью, которое дал технический директор Google Скотт Хаффман (Scott Huffman) в 2009 году, он ответил на этот вопрос так: «Оценка поисковых результатов, которую мы получаем, никогда напрямую не влияет на них. Мы никогда не возвращаемся к прежним данным и не говорим, что «да, мы узнали от асессора, что этот результат хуже того результата, поэтому давайте-ка поменяем их местами». Если бы мы так поступали, мы бы исказили всю систему оценки в целом. 

Таким образом, один асессор не может повлиять на позицию вашего сайта. Однако следует понимать, что если определенная доля асессоров пометила урл как спам или нерелевантный запросу, это значит, что над ним для системы уже висит ярлык, который может привести к неприятным последствиям для страницы. 

Вообще нужно понимать, что асессоры, - это просто люди, которые пытаются зарабатывать, находясь дома. По большей части, им совершенно неинтересно, что произойдет со страницей, они просто выполняют работу, которая от них требуется. Причем большинство из них до конца не понимают, чего именно от них ждет работодатель. Кроме того, скорее всего, многим нет никакого дела до того, как их действия отразятся на поиске Google в целом. 

Google не создавался для вебмастеров – он создавался для пользователей поиска. Оценщики, как мы убедились, немногим отличаются от обычных пользователей, поэтому для Google большее значение имеет мнение асессоров, а не интернет-маркетологов.

Перевод под ред. Анастасии Гутниковой, SEOpro.ru