Консультация № 174165
12.11.2009, 15:23
35.00 руб.
0 23 5
Уважаемые эксперты,

подскажите, пожалуйста, (желательно бесплатную) программу для автоматической закачки с сайта вывешенных на нём файлов.
В частности, имеется библиотека латышских газет: http://data.lnb.lv/digitala_biblioteka/laikraksti/index3.htm
Как скачать оттуда все выложенные номера не вручную? Разные газеты и номера там в разных директориях.
Я смотрела Free Download Manager - но то ли не разобралась в настройках, то ли он для таких целей не предназначен.

Обсуждение

Неизвестный
12.11.2009, 15:47
общий
это ответ
Здравствуйте, Anjali.

Могу порекомендовать Вам программу Teleport_Pro, которой сам пользовался (инсталляционный файл прилагаю). Правда, программа - условно-бесплатная (кажется, она бесплатно выполняет некоторое количество закачек). Но можете попробовать. Программа Teleport_Pro довольно проста в обращении и интуитивно понятна. Только не забудьте предварительно задать глубину скачивания (по умолчанию она равна 3 и, как правило, этого бывает вполне достаточно).

Подробнее см. здесь:
http://ru.wikipedia.org/wiki/Teleport_Pro

Имеется также краткое описание этой программы на русском языке
http://soft.mail.ru/article_page.php?id=83,
в котором говорится и о другой подобной программе WebCopier.
Прикрепленные файлы:
Неизвестный
12.11.2009, 15:55
общий
это ответ
Здравствуйте, Anjali!
Вам сможет помочь программа Teleport Pro (скачать с оффсайта). Она, к сожалению, не бесплатна. Но пробная версия имеет ограничение лишь на количество закачиваемых файлов и на 40 запусков. Попробовав, Вы можете приобрести лицензионную версию программы и использовать её без ограничений. Стоимость полной версии от 40 до 50 долларов.
<b>Возможности программы<b>:
- Многопоточная закачка, способная намного повысить скорость закачки файлов.
- Поддержка нескольких режимов скачивания:
- Полная копия («зеркало») сайта, с сохранением структуры каталогов.
- Копия сайта для просмотра оффлайн.
- Скачивание отдельных файлов.
- При скачивании можно задать маску файлов, которые нужно исключить либо наоборот включить в список (например, все картинки, или все архивы).
- Выбор глубины прохода по сайту, либо ограничения по доменному имени.
- По умолчанию ссылки между страницами сайта заменяются на локальные ссылки.
- Замена исключённых из скачивания ссылок реальными URL, местом на диске, куда они должны были сохраниться, либо сообщением об отсутствии — по выбору пользователя.
- Скачка по расписанию.
- Ограничение массового скачивания (для предотвращения бана на сайте).

Установив и настроив программу, Вы можете сделать копию всей структуры сайта, либо его части (в частности, то, где находится архив номеров газеты). Лично я пользуюсь и вполне доволен этой программой, когда необходимо разобраться со структурой, либо с кодом страниц.
Неизвестный
12.11.2009, 16:00
общий
Anjali:
Еще нашел для Вас ссылку, где можно подробно, по шагам прочитать, как работать с программой Teleport_Pro:
http://telpro.narod.ru/nachalo/hag1.htm

На странице http://telpro.narod.ru/program.htm даются ссылки и на другие программы, которые можно использовать для Вашей цели. Возможно в их числе имеются и бесплатные .
давно
Посетитель
1034
421
12.11.2009, 16:30
общий
это ответ
Здравствуйте, Anjali.
Я уже на похожий вопрос отвечал, Вопрос № 102442
Я его процитирую:
WebGulp 1.14 - Офлайновый браузер с расширенными возможностями. С помощью WebGulp можно:
загружать вебсайты для дальнейшего просмотра в "оффлайне"...
SXBandMaster 0.94 build 10 - Многофункциональная программа, выполняющая функции таких программ, как звонилка, менеджер закачек (поддерживается закачка файлов с сервера по протоколам HTTP, FTP, на сервер по протоколу FTP), оффлайн браузер (закачка сайтов с возможностью их дальнейшего просмотра на локальном диске), почтовый клиент и синхронизатор времени.
HTTrack 3.41 Final - Программа для создания копий веб-сайтов на жестком диске для их последущего просмотра. HTTrack допускает докачку прерванных загрузок, создавать копий каталогов и отдельных веб-страниц, графических и других файлов. При необходимости HTTrack может отыскивать "зеркала" сайта.
Выбирайте, все программы freeware.

В приложение вопрос и мой ответ.

Приложение:
Вопрос № 102442
Рассылка: / КОМПЬЮТЕРЫ И ПО / Помощь пользователю ПО / Другие программы

Здравствуйте, уважаемые эксперты! Нужна хорошая бесплатная программа, позволяющая скачать целый сайт целиком или частично, желательно, чтобы она могла работать с флешки. Все, что попадалось, просило денег:(


Отправил: xbuzzee, Студент
Дата отправки: 18.09.2007, 16:45
Поступило ответов: 5
Состояние: Закрыт (ушёл в рассылку)

• Ответ № 184182 от Пешков Сергей Васильевич, Практикант
Здравствуйте, xBuzzee!
WebGulp 1.14 - Офлайновый браузер с расширенными возможностями. С помощью WebGulp можно:
загружать вебсайты для дальнейшего просмотра в "оффлайне"...
SXBandMaster 0.94 build 10 - Многофункциональная программа, выполняющая функции таких программ, как звонилка, менеджер закачек (поддерживается закачка файлов с сервера по протоколам HTTP, FTP, на сервер по протоколу FTP), оффлайн браузер (закачка сайтов с возможностью их дальнейшего просмотра на локальном диске), почтовый клиент и синхронизатор времени.
HTTrack 3.41 Final - Программа для создания копий веб-сайтов на жестком диске для их последущего просмотра. HTTrack допускает докачку прерванных загрузок, создавать копий каталогов и отдельных веб-страниц, графических и других файлов. При необходимости HTTrack может отыскивать "зеркала" сайта.
Выбирайте, все программы freeware.
Ответил: Пешков Сергей Васильевич, Практикант
Дата отправки: 18.09.2007, 19:16
Неизвестный
12.11.2009, 17:42
общий
12.11.2009, 23:18
это ответ
Здравствуйте, Anjali.
Первый вариант, очень простой. В Вашем браузере выполнить в меню "Файл"--- "Сохранить как...(Ctrl + S)" . В итоге сохраняется веб-страница На Ваш компъютер. При нажатии на отдельные ссылки сохраняется pdf- файл с нужным номером газеты.
Второй вариант: MetaProducts Portable Offline Browser 5.7.3126, очень простая программа, позволяет сохранять веб-страницы. Есть Portable--версии, работающие без установки, есть версии, которые надо устанавливать.
Вот ссылки:
ВЫРЕЗАНО
5
Оценка не столько за первоначальный ответ, сколько за дальнейшее обсуждение. Указание про Firefox оказалось самым полезным и оптимальным для данной цели. По крайней мере, более удобного и одновременно простого способа пока никто не предложил.
Неизвестный
12.11.2009, 17:59
общий
Anjali:
Здравствуйте, Anjali!
Мой ответ:
"Первый вариант, очень простой. В Вашем браузере выполнить в меню "Файл"--- "Сохранить как... (Save as...)---(Ctrl + S)" . В итоге сохраняется веб-страница На Ваш компъютер. При нажатии на отдельные ссылки сохраняется pdf- файл с нужным номером газеты.
Второй вариант: MetaProducts Portable Offline Browser 5.7.3126, очень простая программа, позволяет сохранять веб-страницы. Есть Portable--версии, работающие без установки, есть версии, которые надо устанавливать."
МОГУ ДОПОЛНИТЬ МОЙ ОТВЕТ.
Насчет Free Dowload Meneger тоже все просто: нажимаете кнопку с плюсом ( она слева, самая крайняя, под меню "Файл"), копируете туда в выскакивающее окошко Ваш адрес http://data.lnb.lv/digitala_biblioteka/laikraksti/index3.htm нажимаете "ОК" и та веб- страница без проблем закачивается на Ваш компъютер. Free Dowload Meneger есть и в Portable-варианте.
Папка этой программы по умолчанию C:\Downloads. В эту папку сохраняются закачки. Открываете эту папку и находите там сохраненную закачку .
А чтоб скачать нужные Вам номера газет в pdf , в этой программе тоже надо зайти на страницу c pdf-файлами и можно скачать их как по одному (сама закачка занимает очень мало времени), так и все необходимые файлы (плюсом добавлять закачки)
Неизвестный
12.11.2009, 22:07
общий
Что-то у меня пока не получается.
Веб-страницы - да, закачиваются (только они мне не нужны), а вот файлы с них - пока не удалось.
Неизвестный
12.11.2009, 22:37
общий
Программы скачивают ВСЕ веб-страницы (которые, повторю, мне абсолютно не нужны) - но ни одна не скачала номера газет.
Насколько я вижу, директории газет лежат в http://data.lnb.lv/nba01/ - но программы не хотят оттуда ничего закачивать. В частности, SXBandMaster 0.94 build 10 не находит index.htm - и сразу же прекращает работу.
давно
Мастер-Эксперт
680
2811
13.11.2009, 00:22
общий
HTTrack пользусь, там (как и в аналогичных off-line-браузерах) можно отфильтровать именно по формату файла, что именно надо скачать с указанной стартовой страницы.
давно
Мастер-Эксперт
680
2811
13.11.2009, 00:23
общий
Anjali:
Мы проверим эту страницу.
Неизвестный
13.11.2009, 00:41
общий
Попробовала и HTTrack - он тоже самостоятельно не находит .pdf файлы. Они размещены на разных страницах и в разных директориях сайта. В том и неудобство - иначе можно было бы быстро скачать эти файлы вручную.
давно
Посетитель
1034
421
13.11.2009, 06:25
общий
Anjali:
Предложу еще один вариант, его я даже проверил у себя.
Программы, на которых я этот "метод" пробовал: Firefox (последний) с дополнением flashgot, и для закачки Download MasterDownload Master. Также проверил на Maxthon. По сути вам нужна только эта качалка!
1. Заходим на страницу, где лежат PDF файлы газет, к примеру, я зашел сюда. Главное, чобы вы увидели номера газет в PDF!
2. Нажимаем правой кнопкой мыши на странице и выбираем Закачать ВСЕ при помощи Download Master. Download Master вам выдаст список Захвачено со страницы: ..., ПКМ и выбираем Отметить все с расширением "pdf". Нажимаете OK. Подтверждаете закачку всех файлов.
Это не много дольше, чем вариант с Offline browser, но тоже вариант.
[offtop]У меня не стоит ни одного Offline browser. С их настройками помочь не смогу. Но планирую поставить HTTrack. И повозиться с настройками, но не сейчас.[/offtop]
Неизвестный
13.11.2009, 14:12
общий
[q=1034][/q]

Выбираю "Закачать всё..." - а он говорит: "в предоставленном тексте подходящих URL не найдено". PDF на странице есть.
Неизвестный
13.11.2009, 14:20
общий
Насколько я понимаю, если я загружаю в тот же HTTrack страницу http://data.lnb.lv/digitala_biblioteka/laikraksti/Auseklis/index.htm (с pdf на ней) - они не скачиваются по той причине, что находятся в директории http://data.lnb.lv/nba01/Auseklis/1906/ - то есть даже по одной газете скачать автоматически нельзя?
Неизвестный
13.11.2009, 14:58
общий
Цитата: 21138
Почему нельзя????См мой комментарий
Неизвестный
13.11.2009, 15:27
общий
Цитата: 21138
Насчет закачивания стандартным браузером ("Файл"--- "Сохранить как... (Save as...)---(Ctrl + S)"). Да , сохраняется веб-страница , на которой есть ссылки, которые перенаправляют на сайт ( если посмотреть на адресную строку в Вашем браузере, то открытый в браузере сохраненный файл будет с адресом диска, на котором Вы сохраняете (это-- C или D....), а при нажатии на ссылки в сохраненном файле--- уже будет адрес страницы сайта).
А есть ссылки, с которых скачивается pdf-файл ( с нужнным Вам номером газеты). Это и есть с Вашим примером. И скачиваются pdf-файлы тоже очень быстро.
Неизвестный
13.11.2009, 15:29
общий
Они все закачивают только html страницы - а pdf ни за что.
Неизвестный
13.11.2009, 15:37
общий
Цитата: 21138
У меня стоит Mozilla Firefox. Ради интереса я браузером сохранил Ваш сайт, щелкнул на ссылку-- и автоматически запустилось скачивание pdf-файла. И заняло это меньше минуты. pdf--там в виде ссылок
И с Free Dowload Meneger, о которой Вы спрашиваете-- тоже не проблем!
Насчет Free Dowload Meneger тоже все просто: нажимаете кнопку с плюсом ( она слева, самая крайняя, под меню "Файл"), копируете туда в выскакивающее окошко Ваш адрес http://data.lnb.lv/digitala_biblioteka/laikraksti/index3.htm нажимаете "ОК" и та веб- страница без проблем закачивается на Ваш компъютер. Free Dowload Meneger есть и в Portable-варианте.
Папка этой программы по умолчанию C:\Downloads. В эту папку сохраняются закачки. Открываете эту папку и находите там сохраненную закачку .
А чтоб скачать нужные Вам номера газет в pdf , в этой программе тоже надо зайти на страницу c pdf-файлами и можно скачать их как по одному (сама закачка занимает очень мало времени), так и все необходимые файлы (плюсом добавлять закачки)
Неизвестный
13.11.2009, 15:44
общий
[q=295318][/q]
У меня, во-первых, так не происходит - автоматически скачивание не запускается (ни Firefox, ни IE). Во-вторых, газет и годов там много - и по одному номеру добавлять очень долго.
Неизвестный
13.11.2009, 16:03
общий
Цитата: 21138
А насчет Free Dowload Meneger-- насколько понятно мое объяснение?
Насчет IE-- может быть,
а по Firefox-- [b]это браузер с собственной автоматической закачкой!!!!![/b]--- значит надо искать обновления, плагины ( в поисковике можно найти) , либо чем-то "намусорено" в системе . Вот форум http://forum.mozilla-russia.org/viewtopic.php?id=21639
либо перейти на Opera
Неизвестный
13.11.2009, 16:19
общий
Anjali:
Цитата: 295318
Кроме того, браузер может блокировать автоматическое скачиванияе для предотвращения заражения вирусами. Надо отключить эту опцию.
Неизвестный
13.11.2009, 16:41
общий
Да, пожалуй, самый лучший способ - это установить плагин для Firefox. Установила DownThemAll - наконец-то хоть какой-то результат.
давно
Мастер-Эксперт
680
2811
14.11.2009, 00:25
общий
это ответ
Здравствуйте, Anjali.
HTTrack вполне успешно справляется с этой задачей при выставлении правильных настроек.
После того как ввели имя проекта и адрес стартовой страницы (указанной Вами), нужно нажать на кнопку Задать параметры.
В появившемся окне на вкладке Фильтры в текстовом поле, где написаны фильтры, у Вас должно быть написано (просто замените этой строкой то, что там было):
+*.pdf -*.png -*.gif -*.jpg -*.css -*.js -ad.doubleclick.net/* -mime:application/foobar
обратите внимание: параметр, который задает закачку файлов формата pdf, должен быть с плюсом, остальные с минусом.
На вкладке Ограничения необходимо установить глубину захвата ссылок. Для этого нажать на черный треугольник в разворачивающемся списке Макс. глубина и выбрать нужное число. Я указала 10.
Нажать ОК Нажать Далее. Нажаать Готово. Начнется закачка.
Как видите, нужные Вам файлы прекрасно и весьма быстро закачиваются






5
С указанными настройками действительно работает! Огромное спасибо!
Форма ответа