Dacă fișier robots

  • Corect - gestionarea site-urilor de indexare
    Corect Robots.txt - controlul indexarea site-ului. După cum este creată și ceea ce este necesar. Linii directoare: User-agent, Disallow, permite, Host, crawl de întârziere, Clean-param, Harta site-ului.