Yahoo Search è uguale a Bing Search ora?

Abbiamo avuto alcuni seri problemi con il ragno (incredibilmente) mal scritto di Yahoo in passato , e di conseguenza li abbiamo bloccati. Marco Arment di Tumblr ha anche condiviso le sue frustrazioni con noi l'31 / 31/2009, che è stato un fattore nel nostro blocco.

[Il ragno di Yahoo] ci sta invadendo con 70-200 richieste / secondo dalle 5:30 EST circa. Non ho mai visto nulla di simile, nemmeno dai loro "crawler" sperimentali canaglia che ci hanno abusato in passato. Il ban robots.txt non è abbastanza: devo bloccarli tramite IP a livello di bilanciamento del carico. Da quando hanno abusato di Stack Overflow in passato, ho pensato che potresti voler sapere.

Sembra che la ricerca sul web di Yahoo sia "Powered by Bing!" adesso. Questo va bene, perché non abbiamo mai avuto problemi con il ragno di Bing (aka MSNBOT).

Quindi, la ricerca di Yahoo è la stessa della ricerca di Bing ora, o dovremmo cercare di sbloccarli potenzialmente se in qualche modo, contro ogni previsione, hanno smesso di succhiare così duramente?

Non vedrei alcun motivo per sbloccare il bot di ricerca di Yahoo. Esistono 2 modi in cui Yahoo potrebbe utilizzare Bing Engine. Potrebbero integrarlo con i propri e liberare un crawler ibrido in rete o potrebbero semplicemente inviare le query nel motore Bing e sputare i risultati che ottengono.

Dal documento a Joel collegato c'è un altro documento qui . In esso Yahoo afferma "A metà luglio, abbiamo iniziato a testare la consegna di risultati organici da Bing a Yahoo!" Per me ciò significa che Yahoo non si sta integrando strettamente con il motore Bing. Stanno semplicemente chiamando l'API di Bing Engine. Ciò avrebbe anche più senso dal punto di vista del lavoro richiesto dal momento che Yahoo Engine sta andando via nel lungo periodo.

Ciò significa che non dovremmo vedere più Yahoo Bot eseguire la scansione del Web una volta che il 100% dei risultati uscirà dal motore Bing. Pertanto, non vi è alcun motivo per sbloccarlo.

Sembra che abbiano appena iniziato a implementare i risultati di ricerca di Bing su Yahoo! per circa il 25% delle ricerche, con l'obiettivo di passare completamente ad agosto / settembre. Scommetto che il ragno di Yahoo non funziona nemmeno più e, se lo è, non è molto rilevante.

Lunedì ho sollevato una richiesta di ricerca con Yahoo - il riconoscimento includeva la seguente nota sulla transizione a Bing che potresti trovare pertinente:

Yahoo! La ricerca è entusiasta di raggiungere una nuova tappa in Yahoo! e Microsoft Search Alliance; l'integrazione dei risultati algoritmici di Microsoft è quasi completa per il mercato statunitense e canadese. Yahoo! La ricerca sta attualmente testando la nuova integrazione e potresti notare un'esperienza diversa durante le tue ricerche. All'interno di questo test, alcuni elenchi di ricerca di base utilizzeranno i risultati Web, Immagine e Video di Microsoft. Tutti i miglioramenti che ti aspetti da Yahoo! La ricerca viene preservata e continueremo a innovare nuovi miglioramenti dell'esperienza di ricerca.

Poiché questa è solo una fase di test, non tutte le ricerche produrranno risultati diversi e le modifiche potrebbero non essere ovvie. I risultati possono differire per la stessa parola chiave da una ricerca alla successiva. Poiché gli algoritmi di posizionamento e indicizzazione sono diversi, i risultati della ricerca potrebbero apparire in un ordine diverso. I risultati di ricerca che non sono stati visualizzati prima potrebbero essere inclusi e potresti non vedere i risultati di ricerca che erano stati inclusi in precedenza. Apprezziamo la tua pazienza mentre testiamo a fondo i nuovi risultati.

Grazie ancora per aver contattato Yahoo! Ricerca.

Cordiali saluti, Lunedì 23 agosto (o entro un paio di giorni) Yahoo inizierà ufficialmente a pubblicare i risultati della ricerca BING.