www.netties.be

Home

Vandaag

Muziek | Google brengt tool uit om robots.txt te controleren

Gepubliceerd op: 2006-01-01

Een berichtje dat van belang is voor de webmasters, en waarvan wij, de modale internauten, toch ook iets van kunnen opsteken. Het gaat namelijk over de robots.txt. Dat is een bestand dat webmasters in de root-map stoppen van hun site, en waarin staat welke pagina's op die site ge�ndexeerd mogen worden door de zoekrobotten - u weet wel, die spinnen die onvermoeibaar het hele web afkruipen om de index van de zoekmachine up to date te houden.Nu heeft Google, zo meldt Search Engine Watch, een tool uitgebracht waarmee de webmaster kan controleren of de tekst die hij in zijn robots.txt gezet heeft, wel opgevolgd wordt door de robots, met andere woorden: heeft hij wel de juiste code gebruikt, de juiste instructies? In het artikel van Search Engine Watch kan de ge�nteresseerde webmaster een gedetailleerde uitleg vinden over deze instructies.Wij, de gewone internaut, onthouden in elk geval de conclusie die SEW verbindt aan deze nieuwe tool. Namelijk dat de zoekmachines het onder elkaar niet eens zijn over de instructies die in zo'n robots.txt geschreven moeten worden. Bij de ene mogen jokers (wildcards) gebruikt worden, bij de andere niet. En bij Google mag er geen tijdsduur gezet worden voor de interval tussen de bezoekjes, bij Ask, MSN en Yahoo wel. Met andere woorden: er is dringend behoefde aan een standardisatie van die instructies!

(1) http://blog.searchenginewatch.com/blog/060206-200854 ...

Terug naar het overzicht

Nieuws

Hardware

Oor

Site

Tip

Software

Bekijk hier de oudere artikels

Ons archief is wellicht het meest uitgebreide overzicht...

Alle rechten voorbehouden aan www.netties.be (c) 2025 - v50 - voor suggesties en vragen gebruik ons .

Design en programmatie by PDL