Blocking pages from scans

If you do not want Search Engine Visibility to analyze your entire website, you can block specific pages using your site's robots.txt file. This is useful if you have admin pages or forums that you don't want to optimize.

To prevent Search Engine Visibility from scanning a page, update your site's robots.txt file with the following, where page is the specific page in your site:

User-agent: trafficblazer
Disallow: /page.html

You can also block entire directories with the following, where directory is the name of the directory or folder you want to block:

User-agent: trafficblazer
Disallow: /directory/

For more information about building a robots.txt file for your site, see Selecting website pages .


Помогла ли вам эта статья?
Благодарим вас за отзыв. Чтобы связаться с сотрудником службы поддержки клиентов, позвоните по номеру этой службы или воспользуйтесь опцией чата выше.
Мы рады вам помочь! У вас остались вопросы?
Приносим извинения. Расскажите нам, какие затруднения вы испытываете или почему рекомендованное решение не помогло устранить проблему.