###############################################################################
# $Id: robots.txt 769 2007-12-07 20:01:38Z cvsadm $
###############################################################################
# Fichier robot.txt
# Evite des erreurs 404 dans les logs
# Permet de restreindre l'accès à certaines parties du site aux robots.
###############################################################################

Sitemap: http://www.dvdfr.com/sitemap.php
Sitemap: http://www.dvdfr.com/sitemap.php?section=gnewsidx

User-agent: *				# n'importe quel robot.
Disallow: /include/			# rien de visible
Disallow: /images/dvd/			# si des webcrawlers respecte robots.txt
Disallow: /news/newsprint.php		# Pas d'indexation des versions printerfriendly !
Disallow: /mydvdfr/reportAbuse.php	# les robots ne doivent pas faire ça !!
Disallow: /dvd/marketplace.php		# Pour ne pas fausser les statistiques.

# Blacklisting temporaire CD.
Disallow: /dvd/editeur.php?distributeur=527
Disallow: /dvd/f27040-harmonie-sexuelle-du-couple-par-le-tantra.html