Rate The Relevance Of A Search

Result.
Instructions
Overview
In this task, we need your help determining to what extent a search result matches
the search query that it is paired with. Your job is to use the rules we provide to
judge how well each result matches the query intent. All of the items are related to
home and garden products.

We Provide

A Search Query
o

Product Title
o

This is the actual search term that a user has put

into a search engine.

The title of the product that was returned for the

search query.

Product Image
o

The image of the product that was returned for

the search query.

For some products, we will also provide a Product

URL, where you can view more information about the
result.

Process
1. All search terms and result are related to home
improvement, gardening, construction and do-ityourself projects. Your job is to understand the intent
and relevancy of the search query. This task
is not about your opinions of the relevancy of these
items.
o

Always use the "Google Search" button to see

examples of the search term and result (required!)

Look under the 'Images' and 'Shopping' tabs to

see examples of products.

2. Examine the Product Description, if one is provided.

Do not only use the product title to determine relevanc
y
o

Focus on the following attributes when comparin

g the product to the query - Brand, Material, and Fu
nctionality.

IMPORTANT: Brand is more important than

Functionality!

3. For each query/result pair, compare the query with

the product title and image.
o

Try to understand the intent for making the searc

h query. What do you think the person was looking
for? Do you think the product satisfies the intent of t
his search?

4. Decide how relevant each product is to the query

using these ratings:
Irrelevant

Relevant with Obvious

Relevent with Small

Differences

Differences

Tips and Examples

Do This:

Review the information we've provided before

making your decision.
Use the Google search buttons provided to see
examples of each query and result.

Perfect Match

 Use the guidelines provided below to determine

relevancy. This is a rules based relevancy task, not
opinion based.
Remember that the products are related to home
improvement, gardening, construction and do-ityourself projects.
Choose Perfect Match if:

The result matches the query intent perfectly.

The product is exactly what the customer was most
likely trying to find.
The query was for a brand and the result is
made by that brand.

Choose Relevant: Small Differences if:

The result generally matches the query, but there is

ambiguity in either search terms or product details
that prevents you from choosing 'Perfect Match.'
There is a slight mismatch between the search term
and the result.
The search term was for an item and the result is for
a collection of items, with the search term as the
main item.

Choose Relevant: Obvious Differences if:

There is a connection between the search term and

product, but there is an obvious mismatch.
Features that could be mismatched include: color,
model, brands, etc.
The result is an item that is used with the search
term, such as a tool, accessory, extra part,
cover, or case.
The query is for a brand specializing in a particular
set of goods and the result is not that type of good.
The search term was for an item and the result is for
a collection of items and the search term is not the
main item.

Choose Irrelevant: Paired with Search by Mistake if:

The result is not at all related to the intent of the

search term.
The result has a completely different meaning, even
if there are words in common with the search term.
The result is a collection of items and the search
term does not appear in the set.

Do Not:

Assume you know whether the result matches the

query before sufficiently examining the information
provided.

Use only the words in the query and result to

determine relevancy. This task is about intent, not
word matching.

Summary
This task is about determining to what extent an item matches the shopping search
query that it is paired with. We have strict guidelines for relevance that require you
to pay close attention to product details.

Thank You
Your good work on this assignment helps our client serve their customers better by
improving the results returned by a search engine. Thank you for your help!

Valorar la relevancia de un resultado

de bsqueda.
Instrucciones
Visin de conjunto
En esta tarea, necesitamos su ayuda para determinar en qu medida un resultado
de bsqueda coincide con la consulta de bsqueda que se empareja con. Su
trabajo consiste en utilizar las reglas que proporcionamos para juzgar qu tan bien
cada resultado coincide con la intencin de consulta. Todos los elementos estn
relacionados con el hogar y productos de jardinera.

Proporcionamos

Una consulta de bsqueda

o

Titulo del producto

o

Este es el trmino de bsqueda real de que un

usuario ha puesto en un motor de bsqueda.

El ttulo del producto que fue devuelto por la

consulta de bsqueda.

Imagen del producto

o

La imagen del producto que fue devuelto por la

consulta de bsqueda.

Para algunos productos, tambin proporcionaremos

una URL del producto, donde se puede ver ms
informacin sobre el resultado.

Proceso
1. Todos los trminos de bsqueda y resultados estn
relacionados con mejoras para el hogar, jardinera,
construccin y proyectos del hgalo usted mismo. Su
trabajo consiste en entender la intencin y la
relevancia de la consulta de bsqueda. Esta tarea
es no sobre sus opiniones de la relevancia de estos
elementos.
o

Utilice siempre el botn "Bsqueda de Google"

para ver ejemplos del trmino de bsqueda y
resultado (previo aviso!)

Mira debajo de las "imgenes" y las pestaas

'Compras' para ver ejemplos de productos.

2. Examine la descripcin del producto, si se

proporciona uno. No utilice nicamente el ttulo del
producto para determinar la relevancia
o

Se centran en los siguientes atributos cuando se

compara el producto a la consulta - Marca,
materiales y funcionalidad.

IMPORTANTE : La marca es ms
importante que la funcionalidad!

3. Para cada par de pregunta / resultado, comparar la

consulta con el ttulo del producto y la imagen.
o

Trate de entender la intencin de hacer la

consulta de bsqueda. Qu le parece la persona
estaba buscando?Cree que el producto cumple la
intencin de esta bsqueda?

4. Decidir la relevancia de cada producto es a la

consulta utilizando estas clasificaciones:
Irrelevante

Relevante con

Relevent con pequeas

diferencias obvias

diferencias

Consejos y ejemplos
Hacer esto:

Revisar la informacin que hemos proporcionado

antes de tomar su decisin.

Combinacin pe

 Utilice los botones de bsqueda de Google

proporcionadas para ver ejemplos de cada consulta
y el resultado.
Utilice las directrices proporcionadas a continuacin
para determinar la relevancia. Esta es una tarea de
relevancia reglas basadas, no en opiniones
basadas.
Recuerde que los productos estn relacionados con
mejoras para el hogar, jardinera, construccin y
hgalo usted mismo los proyectos.
Elija pareja perfecta si:

El resultado coincide con la intencin de consulta

perfectamente.
El producto es exactamente lo que el cliente fue
muy probablemente tratando de encontrar.
La consulta fue de una marca y el resultado es
hecha por esa marca .

Elija Relevante: pequeas diferencias si:

El resultado general coincide con la consulta, pero

no hay ambigedad, ya sea en trminos de
bsqueda o los detalles del producto que le impide
elegir 'pareja perfecta'.

 Hay una pequea diferencia entre el trmino de

bsqueda y el resultado.
El trmino de bsqueda era de un artculo y el
resultado es una coleccin de artculos, con el
trmino de bsqueda como el elemento principal.

Elija Relevante: diferencias obvias si:

Hay una conexin entre el trmino de bsqueda y

producto, pero existe un desfase evidente.
Caractersticas que podran ser no coincidentes
incluyen: color, modelo, marcas, etc.
El resultado es un elemento que se utiliza con el
trmino de bsqueda, tales como una
herramienta, accesorio, pieza extra, cubierta, o
el caso.
La consulta es una marca especializada en un
determinado conjunto de bienes y el resultado no es
ese tipo de producto.
El trmino de bsqueda era de un artculo y el
resultado es una coleccin de artculos y el trmino
de bsqueda no es el elemento principal.

Elija irrelevante: Junto con la bsqueda por error si:

 El resultado no est en absoluto relacionado con la

intencin del trmino de bsqueda.
El resultado tiene un significado completamente
diferente, incluso si hay palabras en comn con el
trmino de bsqueda.
El resultado es una coleccin de artculos y el
trmino de bsqueda no aparece en el conjunto.
No haga:

Asuma que sabe si el resultado coincide con la

consulta antes de examinar suficientemente la
informacin proporcionada.

Utilice slo las palabras en la consulta y el resultado

para determinar la relevancia. Este ejercicio est
relacionado con la intencin, no palabra
correspondiente.

Resumen
Esta tarea se trata de determinar en qu medida un elemento coincide con la
consulta de bsqueda de compras que se empareja con. Tenemos normas
estrictas para la relevancia que le obliguen a prestar mucha atencin a los detalles
del producto.

Gracias
Su buen trabajo en esta tarea ayuda a nuestro cliente servir mejor a sus clientes
mediante la mejora de los resultados devueltos por un motor de
bsqueda. Gracias por tu ayuda!