сап аноны, я уже делал такой тред на который всем было похуй, но пж, поясните дауну что такое робот.ткст и сайтмап, зачем они нужны, как их делать и куда кидать, я просто в ахуе, прочитал про них, вроде понял что-то, но хочу прочитать это на человеческом языке, а не на сленге ебучих сеошников которые выебываются своим сленгом как бабы силиконовым 4-ым размером
и сразу бампну деревом чтоб все ахуели с этого донного треда
>>135192744 (OP)>что такое робот.ткст Это такой текстовый файлик, в котором записаны каталоги сервера, в которые запрещён доступ поисковикам(чтобы не индексировались)>и сайтмапНе ебу что это, но вроде как карта сайта, чтобы знать, какие ещё есть страницы на сайте.
Теперь ты доволен?
>>135192982>Это такой текстовый файлик, в котором записаны каталоги сервера, в которые запрещён доступ поисковикамНу вот нихуя. Не только.Там могут быть разные инструкции для поисковых роботов, не только запрещающие.
>>135194219>>разные инструкции для поисковых роботова как собсна реализовать это все
Двачую описавшихся выше.Роботс.тхт - набор команд для поисковых роботов, содержит директивы аллау/дисаллау и т.д.Для яндекса набор директив должен идти отдельно и первым (может и нет). Остальные понимают общие.Сайтмэп - список всех страниц сайта, из которого поисковики узнают о новых страницах.
>>135194314точнее нужно знать какой нибудь язык програмирования или любой знающий инглиш может это сделать?
>>135194314Читай мануалы, там всё написано.Кратко:Useragent: yandexDisallow:Noindex:Useragent:*
>>135194314Ну как. Это же простой текстовый файл, хоть в блокноте его пиши.Что-нибудь типаUser-agent: Googlebot Disallow: /folder1/ Allow: /folder1/myfile.html
>>135194578Да, с телефона облажался.User-agent
>>135194513Слушай, анон, а вот ты скажи честно, что тебе мешает прочитать ответ на свой вопрос в удивительном месте под название Гугл?Первая же ссылка найденная:http://www.robotstxt.org/robotstxt.html
>>135194624а скажем сайт сделан в веб конструкторе, тогда>>User-agent: Googlebot Allow: domainname/mypage.htmlсойдет?
>>135194739ну так я говорю, но там как-то закорючками написано, вроде и понятно, но к реализации таким дауном как я не подлежит
>>135194786Да вообще допизды, в чем он там сделан, поисковый робот про это знать не знает и его это не ебет.По умолчанию они и так все allow, так что нахуй про это писать?Если тебе нужно запретить индексацию каких-то страниц - запрещай. Если не нужно - прекрати телебонькать и сконцентрируйся на самом сайте.
>>135195088суть в том что моя страница индексируется, но в описании пишет что-то наподобие "информация о сайте отсутсвует в связи с отсутсвием robots.txt" а сейчас вообще ахуел и не пишет в описании то что должен, а просто текст из контента или с главной страницы
>>135195327>информация о сайте отсутсвует в связи с отсутсвием robots.txtНу хуй с ним, создай формальный пустой файл, что-нибудь типаUser-agent: *Disallow: /wp-admin/>и не пишет в описании то что долженА что должен-то? Ты meta keywords и meta description прописал нормально?
>>135195659вроде да
>>135195777По твоим ответам хуй поймешь, что там у тебя не работает.
>>135197068трабл вот в чем, есть два файла /robots.txt и /Robots.txt и они обе разные, я хз почему так получилось, но в каталоге файлов первого нет, есть только с заглавной буквой
>>135197840По стандартам большие и маленькие буквы отличаются. Так что переименуй по правильному (с маленькой), иначе это файл нахуй никто не увидит.
>>135198567спасибо, щас сделаю
