Гордиев узел robots.txt

Кароче клиент которого я продвигаю последние пол года, тут намедни поинтересовался- не мешает ли его зеркало продвигаться? Я сделал большие глаза и с удивлением узнал что у клиента, помимо домена в su, есть зеркало в рф, о котором он мне не сообщил, так как его никто не спрашивал. Причем это не просто зеркало, а спокойно себе существующий сайт- абсолютно идентичный основному.

Учитывая что с интернет агентством, для которого я и продвигал этого клиента, расстаюсь (так как помимо сео меня стараются запрячь на все возможные виды работ), то с клиентом был краток и просто описал ему что надо сделать для склейки домена, приведя примеры robots.txt и .htaccess.

Но поскольку на его стороне юный падаван подписывается как “специалист web-отдела”, то и вопросы от него были такого порядка: на мое указание сделать два одинаковых файла robots.txt для обоих версий сайт- человек поинтересовался, что как ему быть так как оба сайта цепляются из одной директории; и второй вопрос который меня добил- был вопрос зачем ему менять сайтмап (который из роботса ссылался на сайтмап вообще третьего сайта) если он генерится неткатом, и как следствие должен быть правильным.

Поняв, что надо вникать, я сел за стол и припух.

Схема такова, у клиента- учебного заведения, есть два сайта, скажем техникум1.su и институт1.ru. Я продвигал техникум1.su и планировал в этом месяце начать продвижение институт1.ru, но своевременно разосрался с директором агенства и манагером.

Зеркало же представляло из себя техникум.рф, причем как я уже заметил он являлся полной копией сайта техникум1.su, но помимо этого еще существовала одна копия сайта www.техникум.рф, также являвшийся полной копией техникум1.su.

Но что еще более весело, в роботсе для  техникум1.su, техникум.рф и www.техникум.рф был указан сайтмап сайта институт1.ru.
Поэтому не смотря на то, что при обращении к обоим версиям техникум.рф открывался клон сайта техникум1.su, а в выдаче поисковика на запрос site:техникум.рф выдавался листинг институт1.ru.

Причем последний раз я робот проверял по началу зимы, так что видимо клиент как то после НГ воспользовавшись моей расслабленностью и решил немного поковыряться в служебных файлах, наваяв такую картину маслом.

Мораль: специалистов web-отделов надо давить во младенчестве, чтобы они не лезли куда не следует. Ибо это уже не первый раз, когда руки клиента сводят все усилия на нет.

Оставить комментарий