Чем загрузить около 50к файлов ?

Discussion in 'Болталка' started by Axeee, 5 Nov 2015.

  1. Axeee

    Axeee Elder - Старейшина

    Joined:
    26 Nov 2008
    Messages:
    286
    Likes Received:
    15
    Reputations:
    0
    Есть список около 50к прямых ссылок на файлы (тхт)
    Во что можно этот список загрузить, что бы в автоматическом режиме все скачалось и при совпадении имен переименовывалось ?

    есть вариант через download master все сделать, но он больше 2к ссылок не хочет брать, а вручную ппц муторно все делать..
     
  2. \/IRUS

    \/IRUS Elder - Старейшина

    Joined:
    3 Aug 2012
    Messages:
    371
    Likes Received:
    497
    Reputations:
    37
    wget -i файл
     
    hahanovB, makag and Axeee like this.
  3. Axeee

    Axeee Elder - Старейшина

    Joined:
    26 Nov 2008
    Messages:
    286
    Likes Received:
    15
    Reputations:
    0
    есть еще какие то варианты у кого нибудь ? может что то на подобии доунлоад мастер есть ? (главное что бы софт справлялся с большим количеством линков)
     
  4. aka dexter

    aka dexter Elder - Старейшина

    Joined:
    23 Jun 2006
    Messages:
    540
    Likes Received:
    799
    Reputations:
    74
    в три подхода не вариант?
     
    makag likes this.
  5. Axeee

    Axeee Elder - Старейшина

    Joined:
    26 Nov 2008
    Messages:
    286
    Likes Received:
    15
    Reputations:
    0
    не, тут не 3 подхода, а 25 получается, т.к. файлов 50к, а что когда будет 100 или 200к ?
    нужно как то разом..
     
  6. M_script

    M_script Members of Antichat

    Joined:
    4 Nov 2004
    Messages:
    2,582
    Likes Received:
    1,310
    Reputations:
    1,557
    Есть софт. Писал для себя. Можно скачать хоть миллиард файлов. Только оригинальные имена файлов и разширение не сохраняет. Имя файла - порядковый номер.
     
  7. Axeee

    Axeee Elder - Старейшина

    Joined:
    26 Nov 2008
    Messages:
    286
    Likes Received:
    15
    Reputations:
    0
    а если ссылка не доступна или по какой то причине не удалось скачать файл, то порядковый номер пропускается ?

    Нельзя ли в этом софте загрузить параллельно список названий для файлов по порядку, например, что бы выглядело так:

    грузим список ссылок:
    ссылка1
    ссылка2
    ссылка3
    ...

    грузим список названий:
    название1
    название2
    название3
    ...

    и при скачивании файла по ссылке1 файл переименовывался в название1, а если к примеру файл под ссылка2 не скачался по какой то причине, то пропускалось название2 и при скачивании по ссылке3 файл переименовывался в название3, т.е. не сбивалось бы ничего..
     
  8. Axeee

    Axeee Elder - Старейшина

    Joined:
    26 Nov 2008
    Messages:
    286
    Likes Received:
    15
    Reputations:
    0
    вроде то что нужно, но не могу понять как работать через прокси.. подскажи если не сложно (прокси без авторизации)

    \\ з.ы. вроде разобрался
     
    #8 Axeee, 6 Nov 2015
    Last edited: 6 Nov 2015
  9. Axeee

    Axeee Elder - Старейшина

    Joined:
    26 Nov 2008
    Messages:
    286
    Likes Received:
    15
    Reputations:
    0
    подскажи какую команду дополнительно прописывать, что бы пропускал файлы больше 30 мб во время скачивания