Добавляем и редактируем файл robots.txt

575 ratings | 35976 views


Добавляем и редактируем файл robots.txt

В этом видеоролике я расскажу, что такое файл robots.txt, для чего он нужен при продвижении сайта и как правильно его настроить. Robots.txt — это стандарт исключения для роботов. Он используется для того, чтобы ограничить доступ роботам к некоторым файлам и папкам на сайте. SEO простым языком , урок 8 Автор: Рафиков Ришат Сайт автора Сайты в видео: , , Школа онлайн-образования: Telegram: Slack: Сайт: Instagram: Группа вконтакте: Facebook: Twitter: Больше уроков от lofblog: loftblog Все уроки по хештегу: loftblogSEO Полезные уроки для веб-программиста: интернетмаркетолог SEO Поставь лайк - смотивируй автора писать еще :)

Comments to the video: Добавляем и редактируем файл robots.txt

Gaukhar Kussainova 2 months ago
Добрый денек, огромное благодарю за ваши уроки! все весьма понятно и доступно. Единственное у меня проблема, у меня на любой медиа файл отдельная страничка выходит, будто можно это поправить? пользуюсь wordpress
Лев Левенец 3 months ago
Хах, реклама авито и beget
Follow Trend 3 months ago
Здравствуйте ! Народ, скажите изволь, а вот для лэндинг-страницы, которая размещена НА ПОДДОМЕНЕ - то для неё - robots.txt и sitemap.xml имеют какие то особенности ? И если конечно - то какие? Потому что главный домен я использую чисто будто носитель поддоменов, и нужно чтоб боты гугла и yandex'а - лицезрели лишь эти поддомены, которые мне необходимы, а не все поддомены попорядку. И где на физическом уровне эти файлы должны вмещаться, - в корне основного домена? Или в корне каждого подходящего мне поддомена? Заранее благодарю!
Бравый Швейк 4 months ago
щас глянем - я супер чайник ))))
Моя Кухня 4 months ago
Доброго времени. Можете дать подсказку? Сайту уже 2 месяца, google регистрирует, а yandex дудки. Нет в поиске ни одной странички. Карту веб-сайта не делал сам, установил плагин. Вся карта смотрится этак. Что необходимо прибрать либо дописать? В чем промах? global User-agent: * User-agent: Yandex Disallow: /xmlrpc.php
Ришат Рафиков 4 months ago
Добрый денек. Если еще животрепещуще задайте изволь определенный проблема в личные сообщения . Спасибо. Не вечно успеваю поглядеть комменты к роликам.
master zvezdni 4 months ago
не показанно наглядно для yandex'а будто прописать у меня google лицезреет а yandex дудки (( где скачать таковой файлик бота и пристроить у себя Индексирование итого веб-сайта запрещено в файле robots.txt.
Сергей Кременецкий 6 months ago
Доброго времени суток. Подскажите, такое дело, Яндекс счел рисунки, к примеру: /images/образец/рисунки.jpg недостаточно высококачественными, необходимо ли их накрывать в роботсе? таких картинок немало
Ришат Рафиков 5 months ago
Сергей Кременецкий я не понимаю отчего необходимо накрывать рисунки, потому желал побольше выяснить откуда таковой растёт проблема. Нет этак дудки.
Сергей Кременецкий 5 months ago
Ришат Рафиков скалите, а я могу получить ответ тут? Или конкретного ответа дудки?
Ришат Рафиков 5 months ago
Сергей, пишите в ЛС . Посмотрим.
Ludmila Strelets 7 months ago
Какой ты молодчина! Я - чайник, по твоему видео все делаю просто и попросту. Очень понятно и приятно внимать, Спасибо за уроки ! От меня лайк и подписка на канал
Виктор Антипов 8 months ago
Добрый денек. Подскажите, необходимо ли воспрещать индексацию странички /NotFound.html (прекрасно оформленная страничка ошибки?) и папку инклуд (со вставками php), заблаговременно благодарю за ответ.
Ришат Рафиков 8 months ago
Виктор, пишите в ЛС . Посмотрим.
Артём Рябцев 8 months ago
Очень круто, достойно и понятно описано. Автор - красавец и лайк. Как лишь пригодится продвижение по SEO - я не раздумывая обращусь конкретно к Вам.
Ришат Рафиков 8 months ago
Артём, благодарю за добрые слова!
julia Olenina 9 months ago
Очень доступно! Спасибо)
Ришат Рафиков 8 months ago
Юлия, благодарю!
Елена Мамедова 1 year ago
А если не необходимо ничего воспрещать ботам кушать ли резон вообщем мастерить этот файл? (веб-сайт без cms)
Денис Липовецкий 1 year ago
То, для чего вы перебежали начинается с 14:53
Yarik mrzv 1 year ago
Такой проблема. А если в Robots.txt прописать Disallow: /robots.txt ?
Bauyrzhan Baqbergen 1 year ago
малорик,тока громче говари
Leconfort Мебель 1 year ago
будто напротив воспретить /s/СС/ в данном случае (каталог/КРОВАТИ), однако разрешить /s/ (каталог) ?
Женя Култаев 1 year ago
Как подключать файл бот.тхт?
Ришат Рафиков 1 year ago
загрузить можно чрез хостинг либо чрез FTP-клиент
Ришат Рафиков 1 year ago
его необходимо сделать в обыкновенном блокноте либо отредактировать уже готовый. Да, в корень веб-сайта там же где лежат другие файлы либо сходу потом папки public_html
Женя Култаев 1 year ago
либо он попросту загружается к файлам веб-сайта?
Ragnar Lodbrok 1 year ago
Спасибо!
Alex 1 year ago
поведано все от и до
Артур Пирожков 1 year ago
Молодец ! Очень высококачественный контент !
loftblog 1 year ago
Спасибо)
Агент Кремля 2 years ago
Очень классные уроки, однако весьма длительно ожидать!
Bronyus Velmunskas 2 years ago
Тупой проблема. Как стать сеошником? А поточнее,с чего приступить человеку, какой желает этим заняться?
Елена Павлова 2 years ago
Спасибо. Жду продолжения.
SelebroS 2 years ago
Очень отлично и тщательно растолковал, благодарю !
loftblog 2 years ago
Спасибо)
Михаил Викторович 2 years ago
Вот