Generator Robots.TXT


Standard - Robots este:  
    
:
    
Sitemap: (lasa gol daca nu ai) 
     
Cauta Robots: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Directoare restrictionate: Directorul principal trebuie sa contina slash "/"
 
 
 
 
 
 
   



Acum, creaza fisier 'robots.txt' in primul director , copiaza tot codul si scrie in robots.txt


Generator Robots.TXT

Robots.txt Generator - Prin intermediul fisierului robots.txt motoarele de cautare primesc semnale cu privire la ce pot accesa si ce nu in cadrul unui website. Fisierul robots.txt se incarca in radacina site-ului. Este un fisier text, simplu, care utilizeaza un parametru de selectie a paginilor care sa fie analizate sau nu de catre robotii motoarelor de cautare (User-agent & Disallow).



TopGazduire
0