На примере CMS Joomla показываю, как создается файл robots.txt и объясняю для чего вообще он нужен. Все обучающие курсы - https://v04.ru/kurs Мы в Контакте https://v04.ru/vk Больше обучающих видео на YouTube https://v04.ru/youtube Сообщество в Телеграм https://v04.ru/tg