граббер/чеккер для прокси-листа

Marr

Marr

Well-known member
06.11.2017
77
10
Добрый день!
Подскажите, пожалуйста, программы грабберов/чеккеров для составления собственного актуального прокси-листа

Спасибо!
 
r0hack

r0hack

DAG
Gold Team
29.09.2017
505
983
Воть, писал тоже недавно, но чекер там надо доработать чуть, граббит отлично:
PHP:
require 'phpQuery.php';

$file = 'socks5.html';
$proxyList = [];

$url = 'https://www.socks-proxy.net/';
$html = file_get_contents($url);

$doc = phpQuery::NewDocument($html);

foreach ($doc->find('table tbody tr') as $one_tbl) {
    $one_tbl = pq($one_tbl);
    $ip = $one_tbl->find('td:eq(0)')->text();
    $port = $one_tbl->find('td:eq(1)')->text();

    $socks = $ip . ':' . $port;

    //if (check('https://www.google.ru/', $socks))
        $proxyList[] = $socks;
}

//    запись в файл
if ($fp = fopen($file, "w")) {
    for ($i = 0; $i < count($proxyList); $i++)
        fwrite($fp, $proxyList[$i] . PHP_EOL);
    fclose($fp);
}

echo '<pre>';
print_r($proxyList);
echo '</pre>';
 
Marr

Marr

Well-known member
06.11.2017
77
10
Воть, писал тоже недавно, но чекер там надо доработать чуть, граббит отлично:
PHP:
require 'phpQuery.php';

$file = 'socks5.html';
$proxyList = [];

$url = 'https://www.socks-proxy.net/';
$html = file_get_contents($url);

$doc = phpQuery::NewDocument($html);

foreach ($doc->find('table tbody tr') as $one_tbl) {
    $one_tbl = pq($one_tbl);
    $ip = $one_tbl->find('td:eq(0)')->text();
    $port = $one_tbl->find('td:eq(1)')->text();

    $socks = $ip . ':' . $port;

    //if (check('https://www.google.ru/', $socks))
        $proxyList[] = $socks;
}

//    запись в файл
if ($fp = fopen($file, "w")) {
    for ($i = 0; $i < count($proxyList); $i++)
        fwrite($fp, $proxyList[$i] . PHP_EOL);
    fclose($fp);
}

echo '<pre>';
print_r($proxyList);
echo '</pre>';
лучше самому писать, чем готовое брать?
 
r0hack

r0hack

DAG
Gold Team
29.09.2017
505
983
лучше самому писать, чем готовое брать?
Конечно, тем более, это не что-то мегасложное, на что нужно недели для разработки, а за пару часов можно. Плюс под себя подгоняешь и опыт )
 
  • Нравится
Реакции: Dr.Lafa
Мы в соцсетях: