Originally Posted by AleX

"Перебив" sitemap.xml своим. Хотя, я почему-то уверен, что модуль сайтмапы это должен пресекать (если установлен).

Да можно и вручную сгенерировать карту с такими гадостями и отправить через http://webmaster.yandex.ru/wmconsole...ru/sitemap.xml и http://google.com/webmasters/sitemap...ru/sitemap.xml. Хотя, наверняка, проверяется хост, отправляющий sitemap, но это уже детали. = )

Originally Posted by OldEr

Поддержка Яндекса тоже ничего вразумительного не сказала.

это меня как раз не сильно удивляет...)

Originally Posted by OldEr

Да и могли банально левую карта сайта скормить с такими ссылкам.

так...
давай подумаем в эту сторону
каким образом можно "скормить" левую сайтмапу?

1. подложить её вместо сгенерированной
в таком случае имеет место дыра в безопасности: либо залили напрямую, либо нашли баг/уязвимость в сайтмап-генераторе
вариант "залили напрямую" мне кажется каким-то извращённым, имея шелл, баловаться с картой сайта? ну...
вариант уязвимости в сайтмап-генераторе... если это и так, то до сих пор об этом ничего не было известно

2. скормить её напрямую через панель вебмастера
в этом случае имеет место взлом аккаунта яндекса, так?

3. скормить какой-то хитрой ссылкой... ммммм.... ну даже не знаю...

Итого: даже если это - проделки конкурентов-злоумышленников, то использовались настолько нестандартные, нетрадиционные и нЕ публичные методы "нанесения ущерба", что вот я не могу рассматривать их всерьёз
а на выходе - пшик... ну, выдал Яндекс в панели, что обнаружил кучу битых ссылок, и что?

в вебмастере пишут
Документ не существует (получен код 404 Not Found). Как правило, HTTP-код 404 возвращают более несуществующие страницы сайта. Это нормальная ситуация, не требующая исправления.

можно забить.

Originally Posted by Luvilla

это меня как раз не сильно удивляет...)

Шаблонный ответ был, как обычно, что мол отследить источник перехода возможности нет. "Ваше обращение очень важно для нас". = )

Originally Posted by Luvilla

ну, выдал Яндекс в панели, что обнаружил кучу битых ссылок, и что?

Originally Posted by jammer

можно забить.

В целом да, на данном этапе ничего страшного. Но тут более интересна сама причина, нежели следствие.

Originally Posted by OldEr

Но тут более интересна сама причина, нежели следствие.

именно
держи в курсе, если что нароешь...

Количество ссылок выросло.

По поводу работы конкурентов - Luvilla права в том, что если бы меня таким образом гасили конкуренты, то в том же вебмастере в разделе "Обратные ссылки на ваш сайт" отобразились урлы страницы, на которых размещены эти ссылки, которыми меня топили бы. Т.е. если яндекс нашел ссылку с 404 на меня, значит, что он ее проиндексировал и по ней проиндексировал страницу с 404. А проиндексировать поганую ссылку без индексации самой страницы, на которой она расположена, и показе ее в соответствующем разделе вебмастера, он не мог бы. Да и с конкурентами вроде пока всё ок - находим общий язык.

Расскажу примечательный факт, когда я однажды видел, как генерилась эта страница и подтверждающий тот факт, что проблема на стороне воблы. Попробую воссоздать ситуацию.
Ежедневно я вручную добавляю новости на фан-страницу Фейсбука. Кто знает - там суть в том, что просто кидается урл публикуемой страницы в поле для поста, а Фейсбук сам вытягивает со страницы Заголовок, анонс, урл перехода и рандомную картинку под превью -
вот так примерно получается перед публикацией:



В выделенном красным - блок вытянутого со страницы урла - этот блок не меняется. Дак вот однажды в нем и была такая кривая ссылка с разнорегистровыми буквами. Причем я копировал ее и пробовал перейти по ней - выдавалась 404.

mirvla, повторю вопрос:

Originally Posted by Luvilla

хостинг, случайно, не предоставляет каких-то антиддос-услуг?

Originally Posted by Luvilla

mirvla, повторю вопрос:

вроде нет - обычная вебка. на хостинге еще есть сайты - у них бы, наверное, тоже вылезло.

Originally Posted by mirvla

на хостинге еще есть сайты - у них бы, наверное, тоже вылезло.

не факт...
зависит от посещаемости
и потом, у них, может, и вылезло, но они об этом не знают)
всё-таки, задайте этот вопрос хостеру. С пристрастием и настойчиво задайте

Это ни на что не влияет

TTR добавил 27.05.2013 в 14:41
Смотри главное, чтобы у тебя при несуществующих ссылках выдавалась404 ошибка, а не 200.Я вообще сделал проще, в шаблон stanard_error - прописал такой код (нужен установленные хак - php live)

PHP Code:

<?phpheader('HTTP/1.1 404 Not Found'); ?>

Вставлять в раздел head

TTR добавил 27.05.2013 в 14:42
А для дублей - соседняя тема с rel=canonical глянь ну и ответы сервера сделай 404, при ссылках не на vbulletin и будет счастье