Как закачать\скачать\выкачать сайт целиком

15.06.2009, рубрики: FreeBSD, Linux | Теги: , , | 24 комментария »

Очень часто бывают ситуации когда нужно скачать сайт целиком, чтобы потом его смотреть в оффлайн (без подключения к сети интернет). Для этого существуют много программ, но все они предпочтительно для ОС Windows.  Что же делать если у вас ОС Linux или FreeBSD, не отчаивайтесь, сайт можно скачать с помощью стандартной программы wget.

Рассмотрим примеры:

wget http://www.free-pc-help.ru/ — скачает первую страницу сайта

wget -r http://www.free-pc-help.ru/ — скачает первую страницу сампы и пойдет рекурсивно по ссылкам глубиной до 5. Такую скачку лучше не делать, без ограничения он тебе полинтернета выкачает.

wget -r -L http://www.free-pc-help.ru/ — то же что и предудущий, но будет ходить только по относительным ссылкам (ключ -L). Т.е. гарантия того, что будет выкачан только free-pc-help.ru

wget -r -L -np http://free-pc-help.ru/faq/index.html — то же, что предыдущий, но не будет подниматься выше http://free-pc-help.ru/faq/ т.е. можно скачать только один раздел сайта

wget -r -L -np -k http://free-pc-help.ru/faq/index.html -— то же, что предыдущий, но все ссылки будут приведеты к относительному виду (ключ -k), т.е. сайт можно будет просматривать на компе, переходя по ссылкам... Ключ -k тебе просто необходимо использовать

— Q квота
при выкачивании сайта целиком или толпы файлов остановится при превышении лимита. Пример: -Q2m (два мегабайта)

— m
зеркалирование сайта. Удобно при обновлении ранее скачанного сайта. Вытаскивает только изменившиеся файлы

Самое мощное — accept- и reject-листы (при рекурсивном обходе с параметром -r)

— A список
выкачивание только файлов с заданными шаблонами или расширениями. Например, -A doc, rtf забирает только вордовские документы

— R список
выкачивание только файлов, не имеющих перечисленные шаблоны или расширения. Например, -R avi закачивает все, кроме avi-файлов

В списках допускаются шаблонные выражения. Например, можно написать -A [0-9]«*.pdf» и выкачать только файлы, имена которых начинаются с цифры и оканчиваются на pdf. Разумеется структура каталогов также будет скопирована, но все остальные файлы — нет

Если остались вопросы, задавайте в коментариях.


24 комментария на запись “Как закачать\скачать\выкачать сайт целиком”

  1. 1 Артем сказала в 8:33, 01.05.2010:

    Спасибо, полезная статейка, использовал wget только для загрузки файлов с докачкой ...

  2. 2 Роман сказала в 1:32, 15.06.2012:

    Спасибо! В винде пользовался доунлоадером (кажется так — давно это было:) простенькая до ужаса програмка, но в linux все гораздо проще. Знание — сила!

  3. 3 sozdaniesaitov сказала в 20:43, 11.11.2012:

    Скачал свой сайт на пробу. Пока непонятно как его посмотреть. Будем разбираться

  4. 4 Kuikicody сказала в 14:41, 08.02.2021:

    viagra sale free samples to uk viagra buy viagra onlie

  5. 5 JbbvReupt сказала в 16:25, 08.02.2021:

    best canadian mail order pharmacies top rated online canadian pharmacies canadianpharmacyusa24h

  6. 6 Jbnbloums сказала в 20:44, 08.02.2021:

    canadian pharmacies pharmacy prices online pharmacy without a prescription

  7. 7 Jbnvloums сказала в 7:54, 16.02.2021:

    payday loans in portland maine magnum cash loan fast free cash loans

  8. 8 JbbnReupt сказала в 13:24, 16.02.2021:

    cialis and bladder cancer cialis belgique en pharmacie cialis dosage yahoo answers

  9. 9 AhbzReupt сказала в 20:47, 16.02.2021:

    cash advance online for unemployment cash advance in philadelphia ms quick cash loan number

  10. 10 Gvdbloums сказала в 20:37, 22.04.2021:

    tadalafil professional 20 mg boxtadafil.com liquid tadalafil reviews

  11. 11 LrbsReupt сказала в 2:15, 24.04.2021:

    levitra 20 mg cena levitra how long use levitra

  12. 12 Rfvbjerry сказала в 12:09, 25.04.2021:

    buy cialis/canada cileve.com viagra,cialis india

  13. 13 FbsfReupt сказала в 18:33, 27.04.2021:

    buy generic viagra online uspharmus.com Imodium

  14. 14 LrbsReupt сказала в 13:51, 01.05.2021:

    levitra strength levitra discount card levitra women

  15. 15 Rfvbjerry сказала в 9:35, 02.05.2021:

    cialis superactive cileve.com cialis free offer

  16. 16 Lbsojerry сказала в 9:26, 05.05.2021:

    how to buy cialis online? ucialisdas.com cialis purchase canada

  17. 17 JebgReupt сказала в 13:21, 05.05.2021:

    generic viagra online pharmacylo.com Prothiaden

  18. 18 Rebfjerry сказала в 9:20, 06.05.2021:

    cialis uk rcialisgl.com — best place to get cialis without pesricption buy cialis generic online 10 mg

  19. 19 Moossy сказала в 12:12, 09.05.2021:

    what is stromectol used for

  20. 20 BbshGoky сказала в 22:38, 09.05.2021:

    viagra boys loxviagra.com — can a woman take viagra does insurance cover viagra

  21. 21 Moishhig сказала в 9:05, 10.05.2021:

    ivermectin

  22. 22 Gtnbloums сказала в 12:42, 10.05.2021:

    where to buy generic viagra jokviagra.com viagra mechanism of action

  23. 23 LebnReupt сказала в 0:26, 13.05.2021:

    cheap drugs online pharmacy meds big pharmacy online

  24. 24 AnooReupt сказала в 19:57, 13.05.2021:

    viagra 32 stГјck llviagra.com how much viagra should be taken


Оставить комментарий


  • три − = один