Как и по теме Идеальный robots.txt для DLE в этой тоже веб мастера не пришли к общему мнению.
Конечно, нет вообще ничего идеального не говоря уже об идеальном robots.txt под определенную CMS.
Осилить до конца…
Апр
19
2010
19
2010
Идеальный robots.txt для Wordpress
Апр
19
2010
19
2010
Идеальный robots.txt для DLE
Не так давно я открыл на своем любимом форуме две темы о robots.txt. Как и предполагал много было флуда и рассуждений, разногласий. Но все же отсеяв все не нужное таки выбрал оптимальный вариант идеального robots.txt для DLE.
Осилить до конца…

