Assertivenet araña es Gigablast Spider

Me abrió los archivos de registro, buscaron IPs particular, en cuestión, y se encontró una serie de entradas de este tipo:

2006-03-11 03:47:34 66.154.103.125 - 216.89.218.168 80 GET /robots.txt - 200 0 400 285 78 HTTP /1.0 www.hibiscusflorals.com Gigabot /2.0 /gigablast.com /spider.html

- 2006-03-11 03:47:34 66.154.103.119 - 216.89.218.168 80 GET /larger_image.asp PID = 215 200 0 0 299 125 HTTP /1.0 www.hibiscusflorals.com Gigabot /2.0 /gigablast.com /spider.html

- 2006-03-11 03:50:37 66.154.103.

119 - 216.89.218.168 80 GET /larger_image.asp PID = 195 200 0 0 299 31 HTTP /1.0 www.hibiscusflorals.com Gigabot /2.0 /gigablast.com /spider.html

- 2006-03-11 07:47:05 66.154. 103.125 - 216.89.218.168 80 GET /robots.txt - 200 0 400 285 78 HTTP /1.0 www.hibiscusflorals.com Gigabot /2.0 /gigablast.com /spider.html

- 2006-03-11 07: 47:05 66.154.103.119 - 216.89.218.168 80 GET /larger_image.asp PID = 219 200 0 0 299 109 HTTP /1.0 www.hibiscusflorals.com Gigabot /2.0 /gigablast.com /spider.html

-

La araña en este caso en realidad pertenece a un motor de búsqueda llamado Gigablast, y es el apropiado nombre de la Gigabot. El Gigabot solamente arrastró páginas y archivos como otros motores de búsqueda tienen, y no hizo ningún intento alguno para acceder a los archivos y scripts de carácter malicioso conocido.

Gigablast es un "nivel 2" motor de búsqueda que tiene más de mil millones páginas indexadas a partir de la fecha de este artículo (13 de marzo de 2006.

) A pesar de que no está en el mismo nivel en términos de popularidad como el Big 3 de Yahoo !, MSN y Google, que ha indexado una significativa porción grande de la web, y puede ser útil para algunas búsquedas. En particular, Gigablast ha implementado una función de "Giga bits de" por el cual Búsquedas alternativas se sugieren basan en la consulta original del usuario con el fin de ayudar a reducir la consulta hacia abajo y dar mayor relevancia.

llevé a cabo una investigación adicional y descubrí que algunos . Las direcciones IP de los 66.154 * bloque IP no resuelven gigablast.

com por ejemplo: