En los foros de Bing se han lanzado algunas dudas interesantes sobre el funcionamiento de MSNBot 2.0, y es que algunos usuarios se encuentran con 2 peticiones HTTP, una de la versión 1.0 y otra de la versión 1.1 (es decir, una con soporte Gzip y otra sin).
The following lines from my log show the issue (there are thousands more similar occurrences)
65.55.207.74 – - [13/Dec/2009:14:58:42 +0000] “GET /specimen/235698/ HTTP/1.1″ 200 1742 “-” “msnbot/2.0b (+http://search.msn.com/msnbot.htm)”
65.55.207.74 – - [13/Dec/2009:14:59:06 +0000] “GET /specimen/235698/ HTTP/1.0″ 200 4259 “-” “msnbot/2.0b (+http://search.msn.com/msnbot.htm)”
65.55.106.209 – - [13/Dec/2009:15:03:08 +0000] “GET /specimen/250262/ HTTP/1.1″ 200 1733 “-” “msnbot/2.0b (+http://search.msn.com/msnbot.htm)”
65.55.106.209 – - [13/Dec/2009:15:03:14 +0000] “GET /specimen/250262/ HTTP/1.0″ 200 4164 “-” “msnbot/2.0b (+http://search.msn.com/msnbot.htm)”
La gran diferencia, a aprte de que hacen 2 peticiones, es que la primera de ellas va comprimida y “pesa poco” y la segunda no lo está y va sin compresión… Aún no hay comentarios oficiales desde Microsoft, pero podrían estar haciendo análisis de calidad del tráfico, al igual que está Google haciendo mejoras de infraestructura.