Комментарии на сайте Блог холостого бомжа

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (Евгений)

Евгений — Thu, 20 May 2010 15:51:11 +0000

А при таком запросе капчу не дает
function rip_from_url($url, $ref = «», &$cookie = false, &$page, $reg = «», $mode = 0) {
$agent = «Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1) Gecko/20061010 Firefox/2.0″;
$url = parse_url($url);
if ($proxy != «») {$proxy = explode(«:», $proxy); $fp = fsockopen ($proxy[0], $proxy[1], $errno, $errstr, 30);}
else $fp = fsockopen ($url['host'], 80, $errno, $errstr, 30);
if (!$fp) {$err = 1;} else {
$err = 0;
$request = «GET {$url['path']}».(isset($url['query']) ? «?» : «»).»{$url['query']} HTTP/1.1\r\n»;
$request .= «Host: {$url['host']}\r\n»;
$request .= «User-Agent: {$agent}\r\n»;
$request .= «Referer: {$ref}\r\n»;
if ($cookie) $request .= «Cookie: $cookie\r\n»;
$request .= «Connection: close\r\n»;
$request .= «\r\n»;
fwrite ($fp, $request);
$responseHeader = »;
$responseContent = »;
do {$responseHeader.= fread($fp, 1);}
while (!preg_match(‘/\\r\\n\\r\\n$/’, $responseHeader));
if (!strstr($responseHeader, «Transfer-Encoding: chunked»))
{
while (!feof($fp))
{
$responseContent.= fgets($fp, 128);
}
}else{
while ($chunk_length = hexdec(fgets($fp)))
{
$responseContentChunk = »;
$read_length = 0;
while ($read_length 0) $cookie = $out[1];
}
if (preg_match(‘~HTTP/1.[01] 302~mi’, $responseHeader)!==false) {
preg_match(‘~Location: (.*?)\r\n~mi’, $responseHeader, $out);
if (count($out)>0) {
$redirect = $out[1];
rip_from_url($redirect, $ref, $cookie, $responseContent);
}
}
$page = $responseContent;
if (!isset($reg) || $reg != «»){
preg_match_all($reg, $responseContent, $out);
switch ($mode) {
case 0: return $out[1]; break;
}}
}
}

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (Евгений)

Евгений — Thu, 20 May 2010 15:18:11 +0000

У меня дает капчу сразу при первом запросе. Может яндекс на куки проверяет?
А показать пользователю капчу легко, он введет значение, оно передается в скрипт и скрипт должен сделать запрос уже с оветом на капчу. Кто-то пробовал, работает?

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (Евгений)

Евгений — Thu, 20 May 2010 06:36:48 +0000

У меня появляется капча все время. С чем это связано?
Слишком мног запросов?

Комментарий к записи Тви-трансялция с Optimization 2009 (Conception-688)

Conception-688 — Fri, 26 Mar 2010 02:44:44 +0000

Conception-688…

хороший сайт софту здесь http:// softing.do.am/, зайходите, не пожалеете…

Комментарий к записи Яндекс банит ресурсы у ленивых модераторов (Макс Травиан)

Макс Травиан — Thu, 03 Dec 2009 17:47:50 +0000

Ресурсы, определенно, бросать нельзя. По-моему, лучшим выходом будет – найти заинтересованных людей, которые на общественных началах станут модераторами. Если постараться, такие люди найдутся. А ладее можно будет либо сосредоточиться на продвижении, либо совсем забить на ресурсы :О))

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (indigo-software)

indigo-software — Wed, 02 Dec 2009 03:58:07 +0000

Ручной парсер Yandex wordstat http://indigo-software.blogspot.com/2009/12/yandex-wordstat.html
моя реализация.

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (singlehomeless)

singlehomeless — Sun, 27 Sep 2009 19:09:53 +0000

Maikl, технически сделать это можно, но при такой массированной дойке, Яндекс врубит капчу. О том, как передать капчу с Яндекса к пользователю есть выше в комментах, но скрипт не будет работать автономно, надо будет сидеть и вводить ему капчи. Соответственно, тут надо или к сервису антикапче цеплять или же ручками и потихонечку

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (Maikl)

Maikl — Sun, 27 Sep 2009 08:59:14 +0000

Скрипт отличнейший!
Из всего разнообразия в сети первый, котрый дает одинаковые результаты с ручными с запросами.
А как модифицировать, что бы не по одному а по 200-300 запросам получить статистику за месяц. В иделале за весь период что сейчас Яша дает- 18 месяцев, по конкретному запросу и без сопуствующих запросов и без
«Что искали со словом «» »
Что еще искали люди, искавшие.
И вывод в файлик сделать, хотя можно и в Броузер оставить.

Собственно очень лень 200-300 раз лезть на Вордстат и пописывать нужные запросы и ручками перписывать. А потом запросы меняются…

Получится очень полезная штука имхо ))

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (blabla)

blabla — Mon, 10 Aug 2009 23:18:46 +0000

Спасибо, работает

Комментарий к записи Парсер выдачи «статистики запросов Яндекса» (wordstat) (singlehomeless)

singlehomeless — Mon, 27 Jul 2009 06:48:43 +0000

Для того, чтобы автоматизировать сбор кеев по определённой тематике.