Hoe Google IP blok te voorkomen?

[PaulG]

Ik weet dat je de API kunt kunt gebruiken om een Google IP blok te voorkomen. Het is echter zo dat de API resultaten anders zijn dan die van de door mensen bezochte Google site. Hoe voorkomen jullie dat je geblokt wordt door Google, maar dat je wel dezelfde rankings hebt als je “klanten”?

[Alain Sadon]

Tja…

Even nadenken over de Google API.

Tot aug. vorig jaar had je de Google SOAP Search API key waarmee je volgens mij ongelimiteerd queries op de Google-database kon uitvoeren (mits je een zeker tijdinterval tussen de queries aanhield), maar die is vervallen: Google Code Blog: A well earned retirement for the SOAP Search API. Daar voor in de plaats is er de Google Ajax Search API gekomen:Google AJAX Search API – Google Code.

Ik weet eigenlijk niet hoe de beperking ligt bij de AJAX API. De Ajax API geeft wel minder resultaten per query: maximaal 64 (Google AJAX APIs | Google Groups).

Een tool als link assistant werkt ook met deze AJAX API key. Als gebruiker kan je namelijk de key in de applicatie invoeren. Of je dezefde resultaten krijgt als je klanten hangt af van op welk datacentrum van Google de applicatie zijn queries uitvoert. De kans is groot dat dit een ander datacentrum is dan jij of je klanten.

Er zijn ook webbased rank-diensten (http://www.seorankmonitor.com, http://www.rankinspector.com, etc) waarbij de rankings worden opgehaald vanaf hun eigen servers. Ik weet eigenlijk niet of die van de AJAX API gebruik maken of gewoon de opgemaakte zoekresultaten inlezen en parsen. Ook bij die vorm kan je er niet vanuit gaan dat de resultaten hetzelfde zijn als bij jou of je klanten, om dezelfde reden als hiervoor.

Ik ga er zelf altijd vanuit dat de resultaten die ik terugkrijg van mijn software (al dan niet webbased) “ongeveer” goed zullen zijn. In de praktijk is dat zeker niet altijd het geval maar zijn de verschillen bijna nooit meer dan +/- 5 posities. Wat op zichzelf natuurlijk nog best veel is. Meestal ben ik echter meer geinteresseerd in relatieve ontwikkelingen dan in absolute posities. Dan zijn de tools wel weer goed bruikbaar.

Voorgaande staat nog los van het feit dat gebruikers vaak zijn ingelogd of webhistory enabled hebben, waardoor de zoekresultaten gepersonaliseerd zijn en je dan per definitie niet kan zien wat zij zien.

Maar lastige materie is het wel…

[goalgorilla]

Gewoon een crawler/scraper bouwen die met een bepaalde tijdsinterval resultaten scrapt. Als je je tijdsinterval maar groot genoeg zegt krijg je geen ban

[Auteur]

Berichten