Карта сайта для ботов (phpBB3 SEO Sitemap)

[igorbond]

У меня все норм, вчера как раз загружал на Вебмастера Гугла свою карту с форума

[Xisp]

Походу у него разная выдача для гугла и для пользователей, ибо я тоже в упор не вижу отклонений уangst66.

[Shredder]

Посмотрел под юзер-агентом гугла - такая же карта.

[angst66]

Вот скрин как видит ссылку на карту гугл бот

Это явно не то, что я ему скармливал.

[Xisp]

Так чётко написано, в чём проблема. Вы забанили робота гугла. Ждите выпадения из индекса.
В общем срочно разбирайтесь с правами доступа и списком забаненых.

[TB11]

Здравствуйте, Shredder. Проблема такая:
до внесения настроек на сервер, карта сайта не работает.
После внесения на сервер nginx, указанных ниже настроек, начинает работать, но перестаёт открываться главная страница форума, выдает 403 ошибку. Все остальные страницы, с буквами-цифрами после слеша, открываются.
Сейчас 3.1.5, в выходные попробую обновиться до 3.1.8, но это не поможет.
Есть предложения, где искать проблему или как её устранить?

КОД: ВЫДЕЛИТЬ ВСЁ
location / {
if (!-e $request_filename) {
rewrite ^(.*)$ /app.php;
}
}

location = /config.php {
deny all;
}

location = /common.php {
deny all;
}

location /cache/ {
deny all;
}

location /config/ {
deny all;
}

location /files/ {
deny all;
}

location /images/avatars/upload/ {
deny all;
}

location /includes/ {
deny all;
}

location /store/ {
deny all;
}

location ~ \.php$ {
# Your personal php settings. They vary. But they have to be here!
}

# Important!
location ~ /\. {
deny all;
}

[angst66]

Вы забанили робота гугла

Забанил бота по ip , поддавшись паранойе. Получилось несколько сот страниц в таблице банлист. Очистил таблицу, теперь гугл увидел форум, сайтмэп, аж трясется от радости.

[ostridm]

Всем привет,

немного подковырял версию 1.0.6

1) научил бережно обращаться с памятью, ранее 256 метров нехватало для генерации мапа для 31000 урлов теперь хватает 192, ниже не смотрел
2) для яндекса заменил путь в индексном файле с <board url>/store/shredder/N.xml <board url>/sitemap.N.xml
3) добавил эвент чтобы посторонние расширения могли вонзаться в sitemap

админку не менял
локализацию не менал

Прошу автора взглянуть на изменения и при желании - забрать.

с уважением.

shredder.sitemap.1.0.6.a.tobe.reviewed.zip

(29.44 КБ) 214 скачиваний

shredder.sitemap.1.0.6.a.tobe.reviewed.zip

(29.44 КБ) 214 скачиваний

[Shredder]

ostridm
ооо, спасибо!) посмотрим обязательно)

2) для яндекса заменил путь в индексном файле с <board url>/store/shredder/N.xml <board url>/sitemap.N.xml

Тут не совсем понял. В чём смысл?

[ostridm]

в прошлом году (или позапрошлом или два тому...) яшка ругался когда sitemap лежал в каталоге и из него были ссылки на другой каталог не под ним
то есть
<root>/sitemap.xml
<root>/viewtopic.php?t=1 - гут
<root>/forum/viewtopic.php?t=2 - гут

но

<root>/store/sitemap.xml
<root>/viewtopic.php?t=1 - ошибка
<root>/forum/viewtopic.php?t=2 - ошибка

[Shredder]

ostridm
Запустил отредактированную карту, при попытке открыть любой индексный файл пишет No route found for "GET /sitemap.1.xml"
Основная страница открывается нормально.

[ostridm]

вы пробовали выключить и снова включить - чтобы подцепился routing.yml ?

[Shredder]

А, так вот для чего нужно при обновлении отключать... Да, теперь заработало.

Добавлено спустя 43 минуты 17 секунд:
Выпустил версию 1.0.7-beta с предложенными изменениями. Нужно протестировать.

ostridm
Вас указывать в авторах?

И ещё вопрос: для реврайта индексных файлов со стороны сервера используются те же самые правила, что и для основного файла? С серверами ничего дополнительного мутить не придётся?

[TB11]

Люди, помогите, пожалуйста.
до внесения настроек на сервер, карта сайта не работает.
После внесения на сервер nginx, указанных в первом посте настроек, карта сайта запускается.
При этом, перестаёт открываться главная страница форума, выдает 403 ошибку. Все остальные страницы, с буквами-цифрами после слеша, открываются.
Сейчас 3.1.5, в выходные попробую обновиться до 3.1.8, но это не поможет.
Есть предложения, где искать проблему или как её устранить? может дописать что-то в сервере или в форуме?

[Shredder]

TB11
Ждите, когда ответит кто-нибудь, кто понимает в настройке серверов.