Assessor és una persona que, seguint les instruccions dels desenvolupadors del cercador, avalua fins a quin punt el document trobat coincideix amb la consulta. Molt sovint, els avaluadors no estan familiaritzats amb la recuperació d'informació professionalment. La seva qualificació s'aproxima als coneixements dels usuaris mitjans d'Internet. Un dels primers avaluadors laborals va començar a utilitzar Google l'any 2003. Els avaluadors de Yandex van aparèixer el 2006.
Flux de treball de l'avaluador
Al principi, es fa una cerca automàtica i el motor de cerca forma una seqüència de llocs segons la seva rellevància, calculada pel robot. Aleshores, l'avaluador, que en aquest moment es pot localitzar a qualsevol part del món, mitjançant un programa especial i una lògica ordinària, avalua el resultat. L'escala de qualificació la desenvolupa cada motor de cerca de manera independent. Normalment conté sis o més articles. El treball dels avaluadors difereix per un error d'aproximadament un 5%.
L'avaluador envia el resultat de la seva activitat a la seu del cercador, on, a partir de l'anàlisi conjunta de les dades del robot de cerca i la informació de l'avaluador, es calcula la qualificació final del document. El resultat, queajuda a assolir l'avaluador és un augment significatiu de l'objectivitat de l'avaluació dels documents, l'exclusió de la qualificació dels recursos inclosos erròniament a la llista de qualificació sobre la base de les característiques formals.
Tots els motors de cerca tenen el seu propi personal d'avaluadors, que rota constantment. L'avaluador més adequat és un usuari amb un nivell mitjà de competència d'Internet. La finalitat del treball que realitza és millorar el funcionament dels cercadors perquè responguin les preguntes dels usuaris amb la màxima precisió possible.
Els avaluadors que avaluen els resultats de la cerca realitzen tasques. El seu contingut és una paraula clau, un enllaç i instruccions per avaluar la correspondència d'un enllaç amb una paraula determinada. La paraula donada segons la instrucció a la qual s'ha d'adherir l'avaluador és una acció de la forma "anar", "fer" o "aprendre".
L'avaluador ha de decidir si la paraula clau correspon a una acció concreta de l'usuari (fer una compra, veure una pel·lícula, escoltar música) o alguna dada que li interessa.
Tipus de qualificacions dels avaluadors a Yandex
Els avaluadors Yandex donen constantment dos tipus de qualificacions:
1. Estimació prèvia. Si aquest document fa referència a la pornografia i no conté codi maliciós. Si la resposta és "sí", l'avaluació del document s'atura.
2. Valoració de la rellevància (compliment). Aquesta valoració no és quantitativa. L'avaluador dóna la seva valoració assignant el document a qualsevol categoria:
- "Vital"– si és un lloc oficial o una resposta oficial a una pregunta.
- "Útil": un document que conté dades que coincideixen exactament amb la consulta de cerca.
- "Rellevant+": un document que coincideix amb la consulta de cerca.
- "Rellevant-": un document que no coincideix exactament amb la consulta de cerca.
- "Irrellevant": un document que no coincideix amb la consulta de cerca.
- "Spam": un document amb signes d'optimització negra (intent d'enganyar el motor de cerca).
- "No sobre això" és una categoria dissenyada per separar conceptes que són similars per a un robot, però fonamentalment diferents per a una persona. Per tant, per a la consulta de cerca "Leo Tolstoi", el motor de cerca no hauria de tornar documents sobre persones grasses i animals com a resultats.
Significat de les qualificacions de l'avaluador
El treball dels avaluadors ajuda a avaluar el grau de precisió de la cerca i a entrenar el robot de cerca. Els avaluadors no poden influir en les posicions ocupades per un lloc concret.
Els avaluadors dels llocs en el seu treball es guien per instruccions clares. S'ha convertit en un document força gran i complex i s'actualitza constantment amb nous requisits.
