Crecimiento exponencial del número de páginas Web llegando hasta cifras de cientos de míles de nuevas URL's diariamente, con lo que se hacian necesarias herramientas cada vez más potentes, capaces de manejar grandes volúmenes de información.

Profesionalizacíón de los sistemas de búsqueda. Con el desarrollo de Internet comienzan a aparecer nuevas fórmulas comerciales como los portales o los grandes websites de empresas, que incluían entre otros servicios a los buscadores.

Aumento de la competencia entre los propios buscadores, debido a la proliferación de herramientas de búsqueda que desarrollaban algoritmos cada vez más sofísticados tratando de diferenciarse de sus competidores y conseguir mayor número de usuarios.

Aparición de estrategias de posicionamiento en buscadores SE0 y SEM. A finales de los noventa comenzaron a aparecer empresas que habían descubierto el potencial de estas herramientas para dar a conocer las empresas en Internet.

Surgieron estudiosos y profesionales de los motores de búsqueda que trataban de averiguar las prioridades de¡ robot a la hora de indexar las páginas y así poder conseguir las posiciones de cabecera.

Aparición de herramientas de software que "engañaban» a los robots, creando páginas artificialmente óptimas para puntuar mejor en cada buscador.

Demandas de unos usuarios cada vez más informados y exigentes que veían como estas herramientas de búsqueda perdían su eficacia al estar saturadas de publicidad y recursos no deseados.