\m/ 80's metal \m/ :: View topic - Нужна прога для скачки сайтов на винт

ДВД Саватажа

Glot wrote:

ДВД Саватажа

а что, уже вышел?! :shok:

Уже третья попытка выкачать метал архивы. До этого с матами юзал Телепорт и WinHTTrack - ни как не мог нормально настроить все исключения и правила, чтобы не загружалось лишнее. Да и постоянные слеты и сохранение всех страниц в один каталог

Посмотрим что из этого выйдет

М-А три этих для сервак меняли

Любопытно, сколько вся база будет весить

интересно узнать

Author:	Glot [ 04 Nov 2007 ]
Post subject:	Нужна прога для скачки сайтов на винт
Отцы, подскажите прогу, которая грабит целиком сайты, желательно с родным Русским языком, а то я ставил пару прог и ничерта не понял как они работают, но ничего не качают, или скачивают только титульную страницу сайта.

Author:	Scatterbrain [ 04 Nov 2007 ]
Post subject:
Teleport Pro зы. Только если вознамерился скачать сайт Трашмагеддон, забудь эту идею

Author:	Glot [ 04 Nov 2007 ]
Post subject:
Пока ты не сказал, я и не хотел. :) З.ы. Спасибо, сейчас качну)

Author:	Scatterbrain [ 04 Nov 2007 ]
Post subject:
А, Володь, Мэтал-Архивы так же не рекомендую качать =)) Ну, в общем, сам поймешь, почему

Author:	Glot [ 04 Nov 2007 ]
Post subject:
Прога супер! Спасибо огромное, а не рекоммендуешь, видимо из-за объёма?

\m/ 80's metal \m/ http://80metal.com/

Нужна прога для скачки сайтов на винт http://80metal.com/viewtopic.php?f=19&t=248	Page 1 of 1

Author:	Durrell Wayne [ 05 Nov 2007 ]
Post subject:
Glot wrote: ДВД Саватажа а что, уже вышел?!

Author:	Glot [ 05 Nov 2007 ]
Post subject:
Durrell Wayne wrote: Glot wrote: ДВД Саватажа а что, уже вышел?! Не, я бутлеговские рипы сливаю!

Author:	istar [ 16 Feb 2009 ]
Post subject:
Подниму эту старую тему. Насчет метал архивов, скачать в принципе все реально через Телепорт (но похоже нужно в несколько подходов с указанием фильтров и начальных страниц), но зайти потом в каталог, куда сохранялись десятки тысяч страниц Все просто напросто зависает. А я все-таки пробую скачать, чисто ради научного интереса, а не результата Видел на одном форуме, кто то скачал весь метал-архивес с работающим поисковым движком и готов поделится на двд взамен на что-нибудь интересное

Author:	istar [ 19 Feb 2009 ]
Post subject:
Юзаю сейчас Offline Explorer, мега вещь! Уже третья попытка выкачать метал архивы. До этого с матами юзал Телепорт и WinHTTrack - ни как не мог нормально настроить все исключения и правила, чтобы не загружалось лишнее. Да и постоянные слеты и сохранение всех страниц в один каталог (а их по расчетам больше 300-500 тысяч ) Тут ни один файл менеджер не выдержит открытие такой папки. В Offline Explorer же можно все просто и быстро настроить (только чтобы разобраться детально пришлось прочитать есь хелп (причем он сразу на русском, ибо один из разработчиков из России ) и почитать форум, где сидит сам разработчик и всем помогает). Но это стоило того, потому как теперь лишний хлам не грузится, картинки (в теории) должны загрузиться все. Посмотрев в очередь скачиваемых файлов не обнаружил ничего особо лишнего, а главное там десятки тысяч картинок, а очередь ведь все растет и растет ) В настройках есть пункт - не перегружать папки (то есть в корне каталога проекта создаются подпапки, в которых не более 1100 страниц) и это не влияет никак на работоспособность скаченного сайта. Еще радует факт, что после загрузки сайта его можно экспортировать или в chm (но тут имеет место ограничение файла до 1,5 гиг, ибо такой формат), или в exe (встроенный браузер и нет ограничения на размер файла - видимо это самый лучший вариант). Впрочем можно экспортировать и в html Посмотрим что из этого выйдет.

Author:	Scatterbrain [ 19 Feb 2009 ]
Post subject:
istar wrote: Уже третья попытка выкачать метал архивы. До этого с матами юзал Телепорт и WinHTTrack - ни как не мог нормально настроить все исключения и правила, чтобы не загружалось лишнее. Да и постоянные слеты и сохранение всех страниц в один каталог М-А три этих для сервак меняли istar wrote: Посмотрим что из этого выйдет Любопытно, сколько вся база будет весить

Author:	Yyz [ 27 Feb 2009 ]
Post subject:
Вот еще программулина одна HTTrack Website Copier 3.43-3

Author:	Nevermore [ 28 Feb 2009 ]
Post subject:
кажется ни одна из них не может скачать содержание закрытого дока с ннм.ру даже если в данный момент я залогинен в ИЕ на сайте

Author:	istar [ 28 Feb 2009 ]
Post subject:
в теории, OE должен справиться Читал форум техподдержки, там вопрос о скачивании закрытых сайтов (конечно имея парольный доступ) поднимался. Просто в настройках проекта нужно указать нужный логин и пароль. Ну еще придется фильтры хорошенько настроить

Page 1 of 1	All times are UTC + 2 hours
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group http://www.phpbb.com/

Author:	Glot [ 04 Nov 2007 ]
Post subject:
Да уж, круто! оставлю я себе лучше местечко под ДВД Саватажа, сейчас Avatar - pre Savatage 1981 года качаю!

Author:	Durrell Wayne [ 05 Nov 2007 ]
Post subject:
да, а что касается архивов, объём там не единственная загвоздка. не пробовал, но сильное подозрение что их громоздкий и глючный пхп движок на локалхосте просто не поднять до мало мальски адекватно рабочего состояния, по крайней мере, не потратив на это времени и сил совершенно несоразмерных желаемому результату. тем более, что они сами в нём давно и накрепко заблудились, судя по всему.

Author:	Scatterbrain [ 19 Feb 2009 ]
Post subject:
istar wrote: интересно узнать Ммм.... ммм.... уже ж делился. Качал в году 2005 всю базу. Весила примерно 500 метров В сжатом виде около 80 получалось. Дальше счёл это бесполезным занятием и забросил База ведь постоянно пополняется и меняется

Author:	istar [ 19 Feb 2009 ]
Post subject:
насчет пополнения - должно быть без проблем, а вот обновления существующих страниц - гиблое дело Но посмотрим, если все получится, можно что-нибудь придумать