А что случилось с индексацией в поисковиках? Встроенный поиск на форуме не очень удобный, хотел гуглом поискать, но оказалось, что со всего форума у гугла в индексе всего 9 страниц (смотрю запросом site:forum.farmanager.com)
А для яндекса, такое впечатление, что сайта вообще не существует, по запросу "FAR Manager" выдается что угодно, кроме farmanager.com
Индексация сайта в поисковиках
- DrKnS
- Posts: 6114
- Joined: Thu 04 Aug, 2005 06:44
- Location: Kyiv
- Has thanked: 12 times
- Been thanked: 426 times
Индексация сайта в поисковиках
Некоторое время назад нас ддосили китайцы и пришлось много банить.
Возможно, кого-то задело за компанию.
Боты вроде бы приходят:
Возможно, кого-то задело за компанию.
Боты вроде бы приходят:
- buniak_a_h
- Posts: 4267
- Joined: Sat 20 Apr, 2013 00:17
- Location: Санкт-Петробад
- Has thanked: 222 times
- Been thanked: 644 times
- Contact:
Индексация сайта в поисковиках
Похоже боты яндекса и гугла заблокированы по User-Agent (смотрел этим инструментом)
Если там подставить User-Agent яндекса - страница вообще не грузится, сразу выдается "403 Forbidden"
Для гугла страницы грузятся, но вместо страниц форума выдается "You are not authorised to read this forum."
Если там подставить User-Agent яндекса - страница вообще не грузится, сразу выдается "403 Forbidden"
Для гугла страницы грузятся, но вместо страниц форума выдается "You are not authorised to read this forum."
- HaRT
- Moderator
- Posts: 10866
- Joined: Tue 30 Aug, 2005 17:21
- Has thanked: 221 times
- Been thanked: 358 times
Индексация сайта в поисковиках
А что можете сказать про DuckDuckGo?
Фар есть инструмент, а не нянька. © 2009 DrKnS
Индексация сайта в поисковиках
У DuckDuckGo, если я правильно понял, User-Agent
С ним форум грузится сейчас, проверяю так:
Но вообще, как я слышал, он не столько сам сайты индексирует, сколько берет результаты других поисковиков, и обрабатывает по своим алгоритмам.
Code: Select all
DuckDuckBot/1.0; (+http://duckduckgo.com/duckduckbot.html)
Code: Select all
curl -A "DuckDuckBot/1.0; (+http://duckduckgo.com/duckduckbot.html)" https://forum.farmanager.com/viewtopic.php?t=11911 >1.htm
Но вообще, как я слышал, он не столько сам сайты индексирует, сколько берет результаты других поисковиков, и обрабатывает по своим алгоритмам.