Текстовий файл, що знаходиться в корені сайту, містить набір правил (директив) для обмеження доступу роботів до вмісту на сервері відповідно до стандарту винятків. Дія файлу поширюється лише на основний домен.
Robots.txt
Robots, Роботс
Пов'язані терміни
- Google Search Console — сервіс компанії google, створений спеціально для веб-майстрів з метою перевірки та відстеження коректності роботи сайту, управління індексацією та зовнішньою оптимізацією.
- VPN — віртуальна приватна мережа, яка надає доступ до інтернету через свої канали зв'язку.
- Алгоритм ранжирування — сценарій (скрипт), що дозволяє сортувати сайти у пошуковій видачі, що допомагає підібрати максимально корисний та якісний сайт за певним запитом.
- Індексація сайту — процес додавання сайту до бази пошукової системи для подальшого відображення його в пошуковій видачі.
- Краулінговий бюджет — це кількість сторінок, які індексує робот пошукових систем за один захід на сайт.
Наші послуги:
Створення Landing Page
Термін: від 1 тижня
Створення інтернет магазину на OpenCart
Термін: від 3 тижнів
Створення сайту на WordPress
Термін: від 2 тижні
Схожі записи:
Як створюються сайти. На чому написати свій сайт ~4 хвилин(и) на читання 15.01.2019 684 1 0
Email-маркетинг – це не просто розсилання з бази ~7 хвилин(и) на читання 10.02.2020 48 0 0
Контекстна реклама Google, як налаштувати Google Ads? ~7 хвилин(и) на читання 30.01.2020 27 0 0