[VB.NET] Исходники прокси-парсера.

Discussion in 'С/С++, C#, Rust, Swift, Go, Java, Perl, Ruby' started by z0mbyak, 8 Aug 2010.

  1. z0mbyak

    z0mbyak Active Member

    Joined:
    10 Apr 2010
    Messages:
    536
    Likes Received:
    200
    Reputations:
    293
    Доброго времени суток, уважаемые форумчане.

    Вот склепал тут парсер для прокси с нескольких сайтов...

    Особенности:

    Язык: VB.NET (Visual Studio 2008)

    [+] Работает:)
    [+] Может парсить любой сайт с проксями, на котором они не зашифрованы (в исходном коде страницы)
    [-] Разбирает только ip-прокси (то есть только в цифровом виде), потому что это вообще мой первый парсер:)

    Данный софт разработан, потому что захотелось попробывать:)
    Работает на регулярке (ip:port) ибо с регуляркой по тегам я так нифига и не разобрался...

    Скриншот:

    [​IMG]

    Ссылка на архив с исходником:
    http://slil.ru/29543620

    Пароль к архиву: forum.antichat.ru

    Ссылка на компил:
    http://slil.ru/29543625

    З.Ы. Как бы еще и чекер в довесок написать? Мож поможете линком на документацию? или советом?-)
     
    1 person likes this.
  2. greki_hoy

    greki_hoy Member

    Joined:
    4 Mar 2010
    Messages:
    326
    Likes Received:
    57
    Reputations:
    41
    2z0mbyak молодец, только можно еще прикрутить чтоб он парсил ответы гугля на предмет ссылок на сайты со списками проксей у гугля спрашивать что нить такое free proxy socks proxy list и парсить ссылки на сайты из ответов а потом по этим сайтам пройтись в глубину на несколько ссылок кстати это тоже опционально можно сделать
     
  3. z0mbyak

    z0mbyak Active Member

    Joined:
    10 Apr 2010
    Messages:
    536
    Likes Received:
    200
    Reputations:
    293
    Дело в том, что он парсит не все сайты, а только не защищенные, а таких очень мало....
    По поводу глубины....да он сейчас это умеет, только делается это ручками... введи ссылку на страницу, потом на следующую...и так далее....
     
    #3 z0mbyak, 8 Aug 2010
    Last edited: 8 Aug 2010
  4. keen6

    keen6 New Member

    Joined:
    7 Apr 2010
    Messages:
    46
    Likes Received:
    4
    Reputations:
    0
    А можно пример защищенного сайта?
     
  5. z0mbyak

    z0mbyak Active Member

    Joined:
    10 Apr 2010
    Messages:
    536
    Likes Received:
    200
    Reputations:
    293
    Ну например http://www.proxydb.ru/ или spys.ru
     
    #5 z0mbyak, 8 Aug 2010
    Last edited: 8 Aug 2010
  6. keen6

    keen6 New Member

    Joined:
    7 Apr 2010
    Messages:
    46
    Likes Received:
    4
    Reputations:
    0
    Хм, а в чем его защищенность? Прокси есть в исходном коде страницы. Даже при выключенном js. :confused:
     
  7. z0mbyak

    z0mbyak Active Member

    Joined:
    10 Apr 2010
    Messages:
    536
    Likes Received:
    200
    Reputations:
    293
    Прокси есть, а порт-то на картинке....:)
    У второго тоже самое только порт скриптом выдается...
     
  8. keen6

    keen6 New Member

    Joined:
    7 Apr 2010
    Messages:
    46
    Likes Received:
    4
    Reputations:
    0
    Да, сорри, не обратил внимание. :) Неужели таких сайтов больше? )
     
    #8 keen6, 8 Aug 2010
    Last edited: 8 Aug 2010
  9. z0mbyak

    z0mbyak Active Member

    Joined:
    10 Apr 2010
    Messages:
    536
    Likes Received:
    200
    Reputations:
    293
    Все нормальные сайты с фри проксями (по наполняемости и качеству) закрыты именно таким макаром...
     
  10. keen6

    keen6 New Member

    Joined:
    7 Apr 2010
    Messages:
    46
    Likes Received:
    4
    Reputations:
    0
    Хы, все эти прокси есть и на незащищенных сайтах ^^
     
    #10 keen6, 8 Aug 2010
    Last edited: 8 Aug 2010