cotonti.com : Как сделать правильный Robots.txt ? https://www.cotonti.com Neueste Themenbeiträge Cotonti en Mon, 21 Sep 2026 21:06:38 -0000 Kopusha Зачем 

Allow: /*/*.js

и тд?

]]> So, 28 Jun 2020 10:32:41 -0000 Виктор #44901 kushelbek: 
User-agent: *
Disallow: /datas
Disallow: /images
Disallow: /js
Disallow: /lang
Disallow: /lib
Disallow: /themes
Disallow: /system
Host: yousite.org
Allow: /*/*.js        
Allow: /*/*.css 
Allow: /*/*.jpg
Allow: /*/*.png

Sitemap: https://yousite.org/sitemap.xml

я бы добавил еще

Disallow: /users
]]> So, 28 Jun 2020 06:03:48 -0000 kushelbek User-agent: * Disallow: /datas Disallow: /images Disallow: /js Disallow: /lang Disallow: /lib Disallow: /themes Disallow: /system Host: yousite.org Allow: /*/*.js Allow: /*/*.css Allow: /*/*.jpg Allow: /*/*.png Sitemap: https://yousite.org/sitemap.xml ]]> Mi, 17 Jun 2020 12:34:07 -0000 Kopusha У меня действительно такой файл

]]> So, 07 Jun 2020 09:07:13 -0000 Louck Смешно 

]]> So, 07 Jun 2020 08:24:18 -0000 Kopusha User-agent: *
Disallow: /

]]> Sa, 06 Jun 2020 16:02:45 -0000 Louck Протестировал сайт в seranking. Система индексирует много ненужных служебных страниц. 

Поделитесь пожалуйста вашим Robots.txt под этот движок.

]]> Sa, 06 Jun 2020 14:59:03 -0000