А давайте спарсим файлообменник

Discussion in 'Песочница' started by vinosh, 15 Jul 2013.

  1. vinosh

    vinosh Member

    Joined:
    29 Oct 2011
    Messages:
    73
    Likes Received:
    16
    Reputations:
    5
    Давно я хотел создать эту статейку, но всё как то руки не доходили... И вот сегодня я всё таки решился.

    С чего всё началось
    Давно я хотел создать эту статейку, но всё как то руки не доходили... И вот сегодня я всё таки решился.

    Началось всё с того что я решил написать свой первый парсер. Не много осознав основы, передо мной встала необходимость решить что же именно я буду парсить, что было бы интересно, а может быть ещё и выгодно. Не особо долго думая над перебором вариантов я остановился не на самом очевидном, и потому весьма интересном варианте, который редко (на мой взгляд) используют другие. Я положил глаз на файлообменные сайты, а т.к. на Ачате я бываю не так редко, одним из лучших сайтов мне показался Zalil.ru

    Причин почему именно его было несколько, одной из основных это конечно же простота в его работе. Например каждый новый файл получает ссылку в виде http://zalil.ru/xxxxxxxx (+1), все файлы хранятся не менее 10-ти дней, за счёт этого можно спарсить последние 10 суток вообще не нарываясь на слова "такого файла не существует / был удалён". Да и html код данного сайта было парсить весьма приятно :)

    Честно говоря я не особо верил в то что смогу найти действительно что-то интересное на этом замечательном ресурсе, но у меня получилось.
    К моему удивлению самыми интересными оказались файлы *.txt, в них было всё... совсем всё... Вот не большой список таких файлов:
    Code:
    792486XXX88.zip - Все ЛС данного пользователя в ВК
    792731XXX21.zip - Все ЛС данного пользователя в ВК
    891956XXX09.zip - Все ЛС данного пользователя в ВК
    892285XXX59.zip - Все ЛС данного пользователя в ВК
    Crowley_39.txt - список логин:пасс хз от чего
    ddddddddddddd.txt - VPN логин до 14.08.2013 :)
    ddddddddddddd2.txt - VPN логин до 14.08.2013 :)
    DUBrute-2.1-UPDATE-03.03.12.zip 
    good.txt - Логины маилов (не валид)
    good2.txt - Логины маилов (не валид)
    KAED.txt - Стихотворение :)
    list.txt - Список порнухи на yadi.sk :D
    new 2.txt - Логины FTP
    proxies.txt - проксики
    PROXY.txt - и так понятно
    srv1.txt - не совсем понятный список IP
    wand.dat - кто знает тот поймёт
    WOT_Checker_by_Alt.TEAM.exe - Название говорит само за себя, но запускать не хочу :)
    База_(1к).txt - 1к логинов от E-mail'ов (не чекал)
    мой_сайт.txt - Несколько IP D-Link роутеров с стандартными логинами
    номер.txt - Список сотовых номеров
    Приват_БАЗА[MAIL_ADN_YANDEX].txt - База маилов (не чекал)
    Приват_базы.txt - Реально рабочая база логинов mail.ru
    Паспорт2.png - Страница прописки паспорта (Паспорт1.png я так и не нашёл))) )
    Скайпы.txt - Логины и баланс Skype
    
    Конечно интересных файлов на много больше, но я и так не мало выложил.
    И что же получается, один проход на 5к файлов у меня занял примерно минут 40 (один поток, сходил покушал), и после этого я внезапно получил пару тысяч проксей, 2 акка VPN, рабочую базу маилов, хоть селлером становись, и не сразу ведь реальный селлер поймёт как именно слили его товар.

    О чём я хочу сказать
    Кто виноват и что же делать? Да в общем то заливая в открытом виде подобные файлы Вы же сами и виноваты, ведь даже сайтовый пароль, лично мне, брутить будет лень :)

    В общем то в этой теме я хотел обратить Ваше внимание на Вашу же наивность, ведь вы реально считаете что если вы залили файл на файловый хостинг то его больше никто не увидит кроме тех кому вы дадите ссылку, а по факту я посмотрел 5 тысяч ваших файлов за пару часов. Из 5к файлов под сайтовым паролем оказалось только 152 файла (+ неизвестно сколько ZIP и RAR)

    Не много рекламы.
    Лично я очень и очень люблю zalil.ru. Это действительно замечательный ресурс и по этой причине этот пост вовсе не является чем то вроде "Антирекламы", напротив именно его я рекомендую всем своим друзьям и знакомым.
    Поэтому лично от меня огромный кусок уважения администрации данного ресурса! Всех благ в развитии Вам ребят.

    Эпилог
    Ради Вашего интереса, выкладываю содержимое некоторых файлов :)
    Но дабы это всё не удалили, всё же частично их маскирую.

    proxies.txt (10/224):
    Code:
    199.71.215.200:21
    200.12.63.104:8080
    200.27.175.70:3128
    201.140.128.208:8080
    201.218.25.82:8080
    202.102.48.205:8080
    Original source: http://proxies24.blogspot.com
    202.115.16.44:2323
    202.116.160.89:80
    202.69.107.114:3128
    203.162.144.83:3128
    
    srv1.txt (10/308181):
    Code:
    64.71.97.11 1rip.com
    64.7.192.93 1rip.com
    64.7.192.86 1rip.com
    64.7.192.85 1rip.com
    64.71.233.103 1rip.com
    64.71.233.102 1rip.com
    64.71.230.202 1rip.com
    64.71.188.231 1rip.com
    64.71.165.248 1rip.com
    64.71.165.246 1rip.com
    64.71.152.43 1rip.com
    
    KAED.txt (Full):
    Code:
    Вот есть колбаса и ее жрет Койот,
    И больше его ничего не волнует.
    
    А вот Эсгалель, она души сосет,
    И с ней колбасой поделился Койот,
    Который пивко вместе с водочкой пьет
    И больше его ничего не волнует.
    
    А вот Инквизитор, он водку бухает,
    И всех он яоем своим осветляет,
    И он Эсгалель очень хочет убрать,
    Чтоб не могла она души сосать,
    И с ним очень часто пьет пиво Койот,
    Но выпивка эта его не волнует.
    
    А вот робот-Вайпер с железками в коже,
    найти язык общий с любым легко может,
    И он с Инквизитором часто бухает,
    И Эсги он с ним подшофе обсуждает,
    Что злится на них, все пытаясь сказать
    Что ей нельзя из них души сосать,
    И с ними троими пьет пиво Койот,
    Которого это опять не волнует.
    
    А это вот я, я долдон и медвед,
    И я постоянно кричу всем ПРЕВЕД,
    За что робот-Вайпер своим Шотоканом
    Наносит мне, блин, иллюзорные раны,
    Со мной Инквизитор так часто бухает,
    И, выпив, он шепотом мне сообщает,
    Что злой Эсгалель, демонический гад,
    Забрать мою душу всегда будет рад, 
    От этих замутов страдает Койот,
    Но это его, как всегда, не волнует!
    
    А был еще Номад, он помер недавно,
    Хотя в Жри Кишках рисовал очень справно,
    И он завсегда наносил мне визит,
    Теперь мой портрет надо мною висит,
    Единственный Вайпера вытащить мог,
    Звонит ему "Вайпер, ты будешь?", - "А? Ок!",
    Не знал Инквизитора, ну и прекрасно,
    Ведь пить с Инквизитором крайне опасно,
    и к Эсги Сергей относился нейтрально,
    Что для него было крайне похвально,
    И у него тату сделал Койот,
    Хотя впрочем это его не волнует.
    
    
    А это Кретин - капитан Врачевидность;
    С ноги может выписать вам инвалидность.
    Он пашет на даче своей, словно робот
    Где, к сожаленью, не успел побыть Номад,
    Кем мой портрет не один нарисован,
    Который на кладбище нынче закопан.
    Я же был на Кретиновой даче, 
    Там я был схвачен и отхуячен.
    Вайпер разок таскал иуда уголь,
    Хоть был той работой смертельно напуган
    Инквиза не знает он, ну и прекрасно:
    Ведь пить Инквизитору с нашим Кретином - опасно.
    Он Эсги всегда самогона нальёт, 
    Которого выпить не может Койот,
    Которого это совсем НЕ ЕБЁТ!!!
    
    Неважно вообще-то, что делал Койот...
    Все просто - его ничего не волнует!
    
    База_(1к).txt (7/1000):
    Code:
    sebz71@hotmail.com:270777
    just_XXXXXow@hotmail.com:123456
    smithee001@yahoo.com:rogers001
    maXXXXhgw@web.de:drachen12
    jijXXXXXX@yahoo.com:marija
    roXXX_rnd@hotmail.com:straight6
    tduXX37@yahoo.com:fuzzle
    
    номер.txt (17/420966):
    Code:
    79202954XXX
    7930806XXX9
    792029XXX08
    79226XXX777
    793XXX81721
    79XXX500208
    XXX52512277
    79202XXX629
    7930XXX6838
    79308XXX730
    7920291XXX2
    793080XXX08
    79202XXX911
    79308XXX913
    79202XXX092
    7929XXX0009
    792XXX99692
    
    list.txt (full):
    Code:
    [1] Star Wars XXX: A Porn Parody
    df-xxx-star-wars
    
    part 1 - http://yadi.sk/d/xOJ5mXgn6l_Zy
    part 2 - http://yadi.sk/d/7fMDXwhM6l_cS
    ------------------------------------------
    [2] Tomb Raider XXX: An Exquisite Films Parody
    df-xxx-tomb-raider
    part 1 - http://yadi.sk/d/bs2cS8Lp6le26
    part 2 - http://yadi.sk/d/saVVPZRR6le2a
    ------------------------------------------
    [3] Scream XXX: A Porn Parody
    df-xxx-scream
    part 1 - http://yadi.sk/d/xm3rd2FJ6le_Y
    part 2 - http://yadi.sk/d/-WL39JbI6le_i
    ------------------------------------------
    [4] Buffy the Vampire Slayer XXX: A Parody
    df-xxx-buffy
    part 1 - http://yadi.sk/d/Rx6JrHoD6lfOO
    part 2 - http://yadi.sk/d/vlhvdT3_6lfOU
    ------------------------------------------
    [5] Official Psycho Parody
    df-xxx-psycho
    part 1 - http://yadi.sk/d/tbvEMTZA6lfpa
    part 2 - http://yadi.sk/d/RcZ6UMGO6lfpe
    ------------------------------------------
    [6] Xena XXX: An Exquisite Films Parody
    df-xxx-xena
    part 1 - http://yadi.sk/d/D6vOO2qH6lg0U
    part 2 - http://yadi.sk/d/QL1zLunh6lg0c
    ------------------------------------------
    [7] Spider-Man XXX: A Porn Parody
    df-xxx-spider-man
    full - http://yadi.sk/d/cRXzDSCP6lgA0
    ------------------------------------------
    [8] Avengers XXX: A Porn Parody
    df-xxx-avengers
    part 1 - http://yadi.sk/d/HJBqjrCT6lhNp
    part 2 - http://yadi.sk/d/HTaE__bx6lhNz
    ------------------------------------------
    [9] Zorro XXX: A Pleasure Dynasty Parody
    df-xxx-zorro
    part 1 - http://yadi.sk/d/UaUPokvp6ljGA
    part 2 - http://yadi.sk/d/5DSwbTMZ6ljGa
    ------------------------------------------
    [10] Thor: A XXX Parody
    df-xxx-thor
    part 1 - http://yadi.sk/d/xAQAfePy6lkvN
    part 2 - http://yadi.sk/d/xHoj0GXO6lkvr
    ------------------------------------------
    [11] Scooby Doo: A XXX Parody
    df-xxx-scooby-doo
    part 1 - http://yadi.sk/d/wJJ4RBWD6lmb9
    part 2 - http://yadi.sk/d/IvMZQ4zT6lmbX
    ------------------------------------------
    [12] Official Bad Teacher Parody
    df-xxx-bad-teacher
    full - http://yadi.sk/d/JzCaGUPV6molc
    ------------------------------------------
    [13] Iron Man XXX: An Axel Braun Parody
    df-xxx-iron-man
    part 1 - http://yadi.sk/d/G5o-Lt3x6n0aS
    part 2 - http://yadi.sk/d/bYu6UbXA6n0bw
    ------------------------------------------
    [14] Superman XXX: A Porn Parody
    df-xxx-superman
    part 1 - http://yadi.sk/d/ErVfSCjN6n6wi
    part 2 - http://yadi.sk/d/veFMIL8k6n6xY
    ------------------------------------------
    [15] Batman XXX: A Porn Parody
    df-xxx-batman
    part 1 - http://yadi.sk/d/TTswr68a6nARo
    part 2 - http://yadi.sk/d/gk46wF4T6nAS4
    ------------------------------------------
    [16] BATFXXX : A Dark Night Parody
    df-xxx-batfxxx
    part 1 - http://yadi.sk/d/BNICTaA-6nBmG
    part 2 - http://yadi.sk/d/4YDpdjM46nBmS
    part 3 - http://yadi.sk/d/Uw9OZZ7i6nBmq
    part 4 - http://yadi.sk/d/E5UzMWvC6nBmy
    ------------------------------------------
    [17] The Sex Files: A Dark XXX Parody
    df-xxx-sex-files
    part 1 - http://yadi.sk/d/RtUBm8eS6nElA
    part 2 - http://yadi.sk/d/vJ99v8Dl6nElS
    ------------------------------------------
    [18] The Sex Files 2: A Dark XXX Parody
    df-xxx-sex-files-2
    part 1 - http://yadi.sk/d/nt-7tMr_6nJ3n
    part 2 - http://yadi.sk/d/7zNFN_dD6nJ4L
    ------------------------------------------
    [19] Training Day: A XXX Parody
    df-xxx-training-day
    part 1 - http://yadi.sk/d/FXaAudUs6nONa
    part 2 - http://yadi.sk/d/N93NjUl_6nOOO
    ------------------------------------------
    [20] Pirates
    df-xxx-pirates
    full - http://yadi.sk/d/PjUct4_L6nTN3
    ------------------------------------------
    [21] Pirates II: Stagnetti's Revenge
    df-xxx-pirates-2
    part 1 - http://yadi.sk/d/1Mr6ZfVc6nWp1
    part 2 - http://yadi.sk/d/QGjEPmuY6nWpp
    ------------------------------------------
    [22] Fly Girls
    df-xxx-fly-girls
    full - http://yadi.sk/d/FUvupaYD6nhAX
    ------------------------------------------
    [23] Code of Honor
    df-xxx-code-of-honor
    part 1 - http://yadi.sk/d/VssCSPPc6no3g
    part 2 - http://yadi.sk/d/4R5aDgOr6no4s
    ------------------------------------------
    [24] Superman vs. Spider-Man XXX: An Axel Braun Parody
    df-xxx-superman-vs-spider-man
    full - http://yadi.sk/d/FVP4Zb2F6nuHi
    ------------------------------------------
    [25] This Ain't Charmed XXX
    df-xxx-charmed
    full - http://yadi.sk/d/9gNXrTAR6o1MN
    ------------------------------------------
    [26] This Ain't Dracula XXX
    df-xxx-dracula
    part 1 - http://yadi.sk/d/OCxVg4tH6oSBi
    part 2 - http://yadi.sk/d/jJcf2gNh6oSCy
    ------------------------------------------
    [27] The Dark Knight XXX: A Porn Parody
    df-xxx-dark-knight
    part 1 - http://yadi.sk/d/TCurqW396oMCq
    part 2 - http://yadi.sk/d/LTpQsLX06oMF8
    part 3 - http://yadi.sk/d/ITm7VjyT6oMGI
    part 4 - http://yadi.sk/d/XILOquIt6oMHQ
    part 5 - http://yadi.sk/d/MlkmXzVo6oMIm
    
    Ну и на последок пример вывода из моего парсера:
    Code:
    4553 http://zalil.ru/34632502  1.JPG   67.27KB 
    4554 http://zalil.ru/34632501  odnoklassniki.rar   216.32KB 
    4555 http://zalil.ru/34632500  12072013168.jpg   620.58KB 
    4556 http://zalil.ru/34632499  [rutracker.org].t4380192.torrent   12.93KB 
    4557 http://zalil.ru/34632498  CDKeyFixer.zip   647.59KB 
    4558 http://zalil.ru/34632497  Фото.rar   771.17KB 
    4559 http://zalil.ru/34632496  Bambinomania._Price._17.06.2013_7.1.xls   8.1MB 
    4560 http://zalil.ru/34632495  onisf.txt   28B 
    4561 http://zalil.ru/34632494  [STEAM_0_0_1327431938]Demo_dlia_otbana_esli_zabanili.rar   7.07MB 
    4562 http://zalil.ru/34632493  oibdcypdthvv.txt   40B 
    4563 http://zalil.ru/34632492  nkwaijnh.txt   28B 
    4564 http://zalil.ru/34632491  Безымянный3.jpg   633.19KB 
    4565 http://zalil.ru/34632490  Безымянный2.jpg   484.63KB 
    4566 http://zalil.ru/34632489  medicalequation.apk   881.25KB 
    4567 http://zalil.ru/34632488  mpeg4+card.JPG   2.07MB 
    4568 http://zalil.ru/34632487  Безымянный.jpg   415.36KB 
    4569 http://zalil.ru/34632486  Отчет_КАМАЗ_июнь.rar   7.63MB 
    4570 http://zalil.ru/34632485  0.jpg   14.42KB 
    4571 http://zalil.ru/34632484  udtools_v1.rar   173.2KB 
    4572 http://zalil.ru/34632483  dxb_kbp.pdf   40.75KB 
    4573 http://zalil.ru/34632482  стата.rar   1.43MB 
    4574 http://zalil.ru/34632481  AntiAFK.exe   446.85KB 
    4575 http://zalil.ru/34632480  PICT3510.JPG   4.38MB 
    4576 http://zalil.ru/34632479  de_inferno0000.bmp   1.37MB 
    4577 http://zalil.ru/34632478  Новая_папка.zip   92.27KB 
    4578 http://zalil.ru/34632477  PICT1023.JPG   4.57MB 
    4579 http://zalil.ru/34632476  ЮлЯкА2проджект_2.wav   36.18MB 
    4580 http://zalil.ru/34632475  PICT1022.JPG   4.72MB 
    4581 http://zalil.ru/34632474  PICT0040.JPG   5.53MB 
    4582 http://zalil.ru/34632473  Прайс_лист_весна-лето_2013.xls   50KB 
    4583 http://zalil.ru/34632472  _DSC6511.JPG   7.88MB 
    4584 http://zalil.ru/34632471  Crimson_Street.torrent   15.89KB 
    4585 http://zalil.ru/34632470  _DSC6510.JPG   8.1MB 
    4586 http://zalil.ru/34632469  _DSC6504.JPG   8.05MB 
    4587 http://zalil.ru/34632468  _DSC2457.JPG   4.94MB 
    4588 http://zalil.ru/34632467  EPFL_TH1509.pdf   22.69MB 
    4589 http://zalil.ru/34632466  Ortmann_INTOK-ORM-SCHS-02-N1_press.pdf   36.53MB 
    4590 http://zalil.ru/34632465  счёт_и_ТР_за_органику-2.xls   43KB 
    4591 http://zalil.ru/34632464  Мастер_файл_ООК-11-005-12.doc   31.02MB 
    4592 http://zalil.ru/34632463  ChOrg\'er(CHEATES.ORG)v3.1.rar   3.21MB 
    4593 http://zalil.ru/34632462  image.jpg   1.23MB 
    4594 http://zalil.ru/34632461  111.rar   2.56MB 
    4595 http://zalil.ru/34632460  Казимир_III_0167_г._н.э._1070.Civ5Save   828.94KB 
    4596 http://zalil.ru/34632459  elementclient.exe   5.17MB 
    4597 http://zalil.ru/34632458  Voice_mail.wav   56.29KB 
    4598 http://zalil.ru/34632457  ДОРОГИ.rar   11MB 
    4599 http://zalil.ru/34632456  ЮлЯкА2проджект_1.wav   36.96MB 
    4600 http://zalil.ru/34632455  квартет.xls   27.5KB 
    4601 http://zalil.ru/34632454  PICT0044.JPG   2.53MB 
    4602 http://zalil.ru/34632453  elementclient.exe   5.16MB 
    4603 http://zalil.ru/34632452  Мой_отчет.doc   596KB 
    4604 http://zalil.ru/34632451  PICT0026.JPG   1.9MB 
    4605 http://zalil.ru/34632450  bisnes018.jpg   3.68MB 
    4606 http://zalil.ru/34632449  bisnes014.jpg   702.93KB 
    4607 http://zalil.ru/34632448  bisnes_ikonomika1.jpg   3.35MB 
    4608 http://zalil.ru/34632447  upgrade.rar   30.02MB 
    4609 http://zalil.ru/34632446  резюме_2013.rar   283.83KB 
    4610 http://zalil.ru/34632445  CubeCom.rar   31.6MB 
    4611 http://zalil.ru/34632444  DSYS   1.53MB 
    4612 http://zalil.ru/34632443  Generals_loader.exe   204.19KB 
    4613 http://zalil.ru/34632442  _DSC9122.JPG   4.22MB 
    4614 http://zalil.ru/34632441  TeamViewerPortable.zip   8.41MB 
    4615 http://zalil.ru/34632440  _DSC7689.JPG   9.39MB 
    4616 http://zalil.ru/34632439  Garena_config.exe   34.55KB 
    4617 PASS http://zalil.ru/34632438  Новый_текстовый_документ_(4).txt   376B 
    4618 http://zalil.ru/34632437  _DSC7672.JPG   7.18MB 
    4619 http://zalil.ru/34632436  Мон_Компани.7z   47.12KB 
    4620 http://zalil.ru/34632435  History.doc   679KB 
    4621 http://zalil.ru/34632434  _DSC7321.JPG   9.27MB 
    4622 http://zalil.ru/34632433  Wild_arms_undub.iso.torrent   13.17KB 
    
    Ну в общем то это пока всё, всем удачи, и следите за своими файлами :)
     
    #1 vinosh, 15 Jul 2013
    Last edited: 15 Jul 2013