Карта сайта для ботов (phpBB3 SEO Sitemap)

igorbond · **igorbond** » 03.04.16 22:29

У меня все норм, вчера как раз загружал на Вебмастера Гугла свою карту с форума

Xisp · **Xisp** » 04.04.16 00:21

Походу у него разная выдача для гугла и для пользователей, ибо я тоже в упор не вижу отклонений уangst66.

**Shredder** » 04.04.16 02:18

Посмотрел под юзер-агентом гугла - такая же карта.

angst66 · **angst66** » 05.04.16 09:59

Вот скрин как видит ссылку на карту гугл бот

Безымянный.png (354.89 КБ) Просмотров: 1241

Это явно не то, что я ему скармливал.

Xisp · **Xisp** » 05.04.16 23:12

Так чётко написано, в чём проблема. Вы забанили робота гугла. Ждите выпадения из индекса.
В общем срочно разбирайтесь с правами доступа и списком забаненых.

TB11 · **TB11** » 06.04.16 07:55

Здравствуйте, Shredder. Проблема такая:
до внесения настроек на сервер, карта сайта не работает.
После внесения на сервер nginx, указанных ниже настроек, начинает работать, но перестаёт открываться главная страница форума, выдает 403 ошибку. Все остальные страницы, с буквами-цифрами после слеша, открываются.
Сейчас 3.1.5, в выходные попробую обновиться до 3.1.8, но это не поможет.
Есть предложения, где искать проблему или как её устранить?

КОД: ВЫДЕЛИТЬ ВСЁ
location / {
if (!-e $request_filename) {
rewrite ^(.*)$ /app.php;
}
}

location = /config.php {
deny all;
}

location = /common.php {
deny all;
}

location /cache/ {
deny all;
}

location /config/ {
deny all;
}

location /files/ {
deny all;
}

location /images/avatars/upload/ {
deny all;
}

location /includes/ {
deny all;
}

location /store/ {
deny all;
}

location ~ \.php$ {
# Your personal php settings. They vary. But they have to be here!
}

# Important!
location ~ /\. {
deny all;
}

angst66 · **angst66** » 06.04.16 10:26

Xisp писал(а):Вы забанили робота гугла

Забанил бота по ip , поддавшись паранойе. Получилось несколько сот страниц в таблице банлист. Очистил таблицу, теперь гугл увидел форум, сайтмэп, аж трясется от радости.

**ostridm** » 06.04.16 10:56

Всем привет,

немного подковырял версию 1.0.6

1) научил бережно обращаться с памятью, ранее 256 метров нехватало для генерации мапа для 31000 урлов теперь хватает 192, ниже не смотрел
2) для яндекса заменил путь в индексном файле с <board url>/store/shredder/N.xml <board url>/sitemap.N.xml
3) добавил эвент чтобы посторонние расширения могли вонзаться в sitemap

админку не менял
локализацию не менал

Прошу автора взглянуть на изменения и при желании - забрать.

с уважением.

Скрытый текст. Вы не состоите в группах, которым доступен этот текст.

**Shredder** » 06.04.16 11:00

ostridm
ооо, спасибо!) посмотрим обязательно)

ostridm писал(а):2) для яндекса заменил путь в индексном файле с <board url>/store/shredder/N.xml <board url>/sitemap.N.xml

Тут не совсем понял. В чём смысл?

**ostridm** » 06.04.16 11:04

в прошлом году (или позапрошлом или два тому...) яшка ругался когда sitemap лежал в каталоге и из него были ссылки на другой каталог не под ним
то есть
<root>/sitemap.xml
<root>/viewtopic.php?t=1 - гут
<root>/forum/viewtopic.php?t=2 - гут

но

<root>/store/sitemap.xml
<root>/viewtopic.php?t=1 - ошибка
<root>/forum/viewtopic.php?t=2 - ошибка

**Shredder** » 07.04.16 04:43

ostridm
Запустил отредактированную карту, при попытке открыть любой индексный файл пишет No route found for "GET /sitemap.1.xml"
Основная страница открывается нормально.

**ostridm** » 07.04.16 08:24

вы пробовали выключить и снова включить - чтобы подцепился routing.yml ?

**Shredder** » 07.04.16 09:15

А, так вот для чего нужно при обновлении отключать... Да, теперь заработало.

Добавлено спустя 43 минуты 17 секунд:
Выпустил версию 1.0.7-beta с предложенными изменениями. Нужно протестировать.

ostridm
Вас указывать в авторах?

И ещё вопрос: для реврайта индексных файлов со стороны сервера используются те же самые правила, что и для основного файла? С серверами ничего дополнительного мутить не придётся?

TB11 · **TB11** » 07.04.16 10:46

Люди, помогите, пожалуйста.
до внесения настроек на сервер, карта сайта не работает.
После внесения на сервер nginx, указанных в первом посте настроек, карта сайта запускается.
При этом, перестаёт открываться главная страница форума, выдает 403 ошибку. Все остальные страницы, с буквами-цифрами после слеша, открываются.
Сейчас 3.1.5, в выходные попробую обновиться до 3.1.8, но это не поможет.
Есть предложения, где искать проблему или как её устранить? может дописать что-то в сервере или в форуме?

**Shredder** » 07.04.16 11:05

TB11
Ждите, когда ответит кто-нибудь, кто понимает в настройке серверов.