Cookies op Tweakers

Tweakers maakt gebruik van cookies, onder andere om de website te analyseren, het gebruiksgemak te vergroten en advertenties te tonen. Door gebruik te maken van deze website, of door op 'Ga verder' te klikken, geef je toestemming voor het gebruik van cookies. Je kunt ook een cookievrije versie van de website bezoeken met minder functionaliteit. Wil je meer informatie over cookies en hoe ze worden gebruikt, bekijk dan ons cookiebeleid.

Meer informatie

Door , , reacties: 29, views: 29.341 •

Sinds gisteren is Tweakers.net uit de Google-index verdwenen. De precieze oorzaak daarvan wordt nog onderzocht. Het lijkt er op dat Tweakers.net om een voor ons nog onbekende reden een 'penalty' heeft gekregen, waardoor de vermelding uit de index is gegooid. Voor zover wij kunnen beoordelen zijn er geen wijzigingen aan onze kant doorgevoerd die een penalty zouden kunnen opleveren.

Een andere mogelijkheid zou het 'verwijderen van url's' bij Google kunnen zijn, maar ook dat lijkt niet logisch. We hebben inderdaad afgelopen week een removal request voor 'www.tweakers.net' uitgevoerd, maar dat is toch echt iets anders dan 'tweakers.net'. Om die verwijdering door te voeren werd de robots.txt aangepast, om www.tweakers.net met Disallow: / te voorzien. Op Googles sitemappagina laat de zoekmachine echter zelf zien dat daarmee tweakers.net niet geblokkeerd wordt.

Bovendien komt Google ook sinds die verdwijning nog altijd vaak bij ons 'langs' (gisteren registreerden we meer dan honderdduizend views van GoogleBot), en ook dat geeft niet de indruk dat de pagina's van Tweakers.net volledig uit de database van Google weggehaald zijn. We hopen uiteraard dat Google ons hier meer duidelijkheid over kan geven, en hebben daartoe contact met ze opgenomen. Zodra er meer te melden valt, volgt een update. Ondertussen loopt er ook een discussietopic in Frontpage Algemeen.

* Update

Ondertussen is gebleken dat dit akkefietje inderdaad veroorzaakt werd door de onverwachte gretigheid van Google's URL removal tool. Blijkbaar is men van mening dat "www.tweakers.net" verwijderen hetzelfde is als "tweakers.net" verwijderen. En als je "tweakers.net" verwijdert, dat je dan eigenlijk ook je hele domein weg wilt hebben...
Dat staat natuurlijk wel uitgelegd in diverse blogs (die je achteraf leest), maar helaas niet op de betreffende Google-pagina zelf. Gelukkig konden wij iemand bereiken bij Google die hier de nodige vaart achter kon zetten en die ons vandaag al in de Google-index heeft laten terugzetten.

Door Arjen van der Meijden

- Lead Developer

In Oktober 2001 begonnen met als voornaamste taak het technisch beheer van het forum. Daarna doorgegroeid tot senior developer en software architect. Nu lead developer, met een leidinggevende taak aan het team van programmeurs en systeembeheerders van Tweakers.net.

Reacties (29)

Ik ga er vanuit dat het niet lang zal duren voordat 'we' terug zijn :) Al helemaal niet als er ± 100.000 indexes per dag zijn!
Heel raar, ik zou ook niet weten waarom tweakers een panilty zou moeten krijgen.
Mss vanwege googlebashing? Dat ze teveel macht in handen krijgen?
Nee, google en microsoft zijn alle 2 nog te vinden ;)
Misschien heeft het iets te maken met tweakers.com
google
Die site verwees eerst nog door naar t.net, maar sinds kort alleen nog ads.
Tweakers.be staat nog wel geindexeerd.
Voor al uw vragen:

Tel: +1 650 253 0000
Het heeft gewoon te maken met een verkeerd gebruik van robots.txt en de Google removal tool. Dit word op dit moment allemaal wel rechtgezet ;)
Zo ziet robots.txt er nu uit
User-agent: *
Disallow: /aanbod/beoordeel
Disallow: /aanbod/list_ads/user
...
Geen wonder dat ze er niet meer in staan
Dus jullie willen zo graag van het www gedeelte uit de URL af?
Heeft dit iets te maken met de in maart dit jaar uitgevoerde zoekmachine 'optimalisaties'?

Zie plan 312.
Het is inderdaad vreemd, maar het heeft waarschijnlijk te maken met de manier waarop Google met domeinnamen pleegt om te gaan. In een recente infrastructuur update (Bigdaddy) is daar nogal wat in veranderd, onder andere om juist het "mooiste" adres aan gebruikers te laten zien.

Ik heb over het t.n probleem geschreven op mijn weblog (maar neem aand at dat los staat van jullie eigen ontdekking?)
Tweakers.net verwijdert zichzelf uit Google

Recentelijk had kieskeurig.nl eenzelfe akkefietje, en alleen al daarom was deze robots.txt truc een heel erg riskante en onnodige operatie.

Kieskeurig.nl Google penalty?

Met een relatief simpele 301 redirect van elke www. url naar dezelfde url zonder www. was het wel gelukt om www.tweakers.net uit de zoekresultaten te krijgen. Die robots.txt is daarvoor niet nodig. (overigens is die 301 redirect er al dus eh :))
Na dat kieskeurig verhaal op je site lijkt het me zo klaar als een klontje :)
Hoewel het natuurlijk niet de goede gang van zaken is wat Google doet
Wij kunnen onmogelijk alle ontwikkelingen bij houden, zelfs alleen die over het web niet... wat in dit geval dus wel jammer was.

Overigens was het besluit om de robots.txt toch te submitten eigenlijk meer een gevolg van diverse verzoeken in de loop der tijd om onze /gallery-pages en dergelijke uit de cache te hebben.
Aangezien we die al maanden in de robots.txt hebben staan en ook nog al die www.-url's in de google-index, leek het ons wel aardig dat eens op te ruimen, google leek het zelf niet echt te doen, maarja...
nu lig je er toch 180 dagen uit ofzo?
als je het laat verwijderen
Normaal gesproken wel ja, alleen kun je met een reinclusion request het wel eerder terug krijgen :)
alleen het doel is dus niet bereikt:

http://www.google.com/search?q=tweakers

www.tweakers staat er weer :P
Het doel is wel bereikt maar nog niet op alle Google servers ;)

site:tweakers.net
site:www.tweakers.net
Liever 2x erin of net niet precies zoals je wilt dan helemaal niet. :)

Ik denk dat door de (301?) redirect naar tweakers.net bij de volgende index het wel goed zal komen (als ik het goed begrijp)
tja, die google machine is toch niet echt heel slim. Toen de dochterpagina's van startpagina werden veranderd in eenonderwerp.startpagina.nl (was eerst eenonderwerp.pagina.nl) hadden alle beheerders opeens de helft minder bezoekers. Zou google toch moeten kunnen zien dat het puur om een naamwijziging gaat. Hier is natuurlijk wel iets anders aan de hand.
Hoe moet Google dan zien dat het puur om een naamwijziging gaat? Er werden in het geval van Startpagina een heleboel pagina's naar een compleet ander domein geplaatst.

Op de oude pagina's staat alleen maar een redirect dus kan Google ook niet checken of de info op de nieuwe url hetzelfde is als de oude om te zien of het alleen maar een domeinwijziging is.

Op dit item kan niet meer gereageerd worden.



Populair:Apple iPhone 6Samsung Galaxy Note 4Apple iPad Air 2FIFA 15Motorola Nexus 6Call of Duty: Advanced WarfareApple WatchWorld of Warcraft: Warlords of Draenor, PC (Windows)Microsoft Xbox One 500GBSamsung

© 1998 - 2014 Tweakers.net B.V. Tweakers is onderdeel van De Persgroep en partner van Computable, Autotrack en Carsom.nl Hosting door True

Beste nieuwssite en prijsvergelijker van het jaar 2013