Web invisible

Tout A B C D E F G H I J K L M N O P Q R S T U V W X Y Z
Terme Définition
Web invisible

Il s'agit d la partie du web qui n'est pas crawlée par les robots des moteurs de recherche classiques, donc pas indexée et difficilement accessible

Pour accéder aux pages qui en font partie, il faut connaitre leur adresse exacte ou utiliser un moteur de recherche particulier, qui prend en compte cette partie d'Internet. Le web surfacique est, à  l'inverse du web invisible, accessible partout et tout le temps. Il ne faut pas confondre deep web et deux autres notions proches mais différentes : le web sombre, ou "darknet" (réseau secret comprenant un nombre restreint de personnes, cherchant en général à  échapper au traçage par les autorités) et le web opaque (indexable, mais non indexé).

Une page peut être non-indexée pour les raisons suivantes (liste non-exhaustive):

  • elle est dynamique et contient des hyperliens générés temporairement, donc différents d'une visite à l'autre;
  • elle ne contient pas de liens externes, les robots indexant le web en voguant d'hyperlien en hyperlien, ils ne pourront pas accéder à la page en question;
  • son accès est empêché par le remplissage d'un formulaire;
  • le propriétaire du site empêche délibérément le crawl par les robots s'il veut qu'il reste dans la sphère privée;
  • elle utilise un code ou des formats difficilement lisibles par les robots (comme c'était le cas au départ pour les pdf).

Article connexe : web invisible

eXTReMe Tracker