wormik » 2007-12-06 09:42:54

мне кажется было бы очень кстати....кол-во проиндексированных страниц роботами........момент попадания в индек, момент выбывания из индекса (если бан) или там даже попадание новых страниц в индекс....+ ко всему смс уведомления....а за это уже и денешку можно брать......

Admin » 2007-12-06 13:33:04

wormik написал:

кол-во проиндексированных страниц роботами

Практически имеющийся отчет Поисковые боты. С той лишь разницей, что боты одной поисковой системы могут заходить на одну и ту же страницу в течение дня несколько раз.

По поводу остального, хорошие замечания. Только надо обдумать реализацию.

Добавлено спустя     7 минут   4 секунды:
Проверка наличия страниц сайта в индексе требует дополнительных ресурсов, что так или иначе требует доработки и вероятно будет реализовано не в ближайшее время.

Спасибо за пожелания!

wormik » 2007-12-06 14:37:55

Admin написал:

wormik написал:

кол-во проиндексированных страниц роботами

Практически имеющийся отчет Поисковые боты. С той лишь разницей, что боты одной поисковой системы могут заходить на одну и ту же страницу в течение дня несколько раз.

По поводу остального, хорошие замечания. Только надо обдумать реализацию.

Добавлено спустя     7 минут   4 секунды:
Проверка наличия страниц сайта в индексе требует дополнительных ресурсов, что так или иначе требует доработки и вероятно будет реализовано не в ближайшее время.

Спасибо за пожелания!

да что уж такие большие ресурсы требуются?????...........дык делайте полный комплекс платным...хотяб по баксу и то....ну или там еще скока......только конечно чтоб побольше сервисов было

Admin » 2007-12-06 14:58:04

Добавлено в раздел Планы.

llenivo » 2007-12-06 16:44:49

Так постепенно Inetlog из просто счетчика превратится в полный SEO-пакет :) И завоюет весь рунет.

wormik » 2007-12-06 21:01:08

llenivo написал:

Так постепенно Inetlog из просто счетчика превратится в полный SEO-пакет :) И завоюет весь рунет.

не вижу ничего в этом дурного

llenivo » 2007-12-07 10:54:59

я тоже.

groove » 2007-12-07 14:09:52

Для бесплатной версии можно сделать проще: считывать КОЛИЧЕСТВО страниц в индексе, не поименно, и записывать, а потом выдавать отчет:
04-12-2007 - 10 стр
05-12-2007 - 200 стр
06-12-2007 - 1000 стр.
07-12-2007 - 0 страниц (БАН)

erima » 2007-12-08 01:27:30

groove написал:

04-12-2007 - 10 стр
05-12-2007 - 200 стр
06-12-2007 - 1000 стр.
07-12-2007 - 0 страниц (БАН)

вот эта идея мне тоже очень нравится )))

evgikon » 2007-12-12 13:11:05

да что уж такие большие ресурсы требуются?????...........дык делайте полный комплекс платным...хотяб по баксу и то....ну или там еще скока......только конечно чтоб побольше сервисов было

Да именно большие, это для одного сайтика кажется сделал запрос вида: rhost="com.domain"|rhost="com.domain.*" в Yandex и получил html из которого простым регулярным выражением извлек нужную циферку. А если сайтов 1000, 10000, 100000 , то простенькое регулярное выражение уже требует нехилых ресурсов. Плюс Яндекс особо настырные в пален запросов к нему ip блокирует и показывает CAPCHA , то есть сразу возникает проблема использования прокси и того где их на постоянной основе и в большом количестве брать
И вообще это нетипичная задача для статистики, те данные которые поступают счетчику естественным для счетчика образом ничего не говорят о количестве проиндексированных страниц. По визитам робота можно сделать вывод сколько проиндексировано, но с ошибкой, потому что визит робота на страницу не говорит о том, что страница проиндексирована или будет проиндексирована - робот может посетить страницу, но в индекс она включена не будет.
Так что единственный способ получать точные цифры это парсинг выдачи Yandex по запросу с rhost и Google по запросу site, а это уже требует отдельных ресурсов и для статистики не типичная и не тривиальная задача.