\m/ 80's metal \m/

Информационно-аналитический форум "80 см пыли" (In Search We Trust) "У нас никто никуда не спешит"
Me For You - http://me-4u.com
It is currently 28 Nov 2024

All times are UTC + 2 hours

Spoiler
Chat - temporary registration for foreign users (please leave your application here)







Post new topic Reply to topic  [ 20 posts ] 
Author Message
 
PostPosted: 04 Nov 2007 
труъ антисионист
User avatar
Joined: 01 Aug 2007
Posts: 4544
Lоcаtion: Откуда и большинство из нас
Age: 43
Name: Дядя Вова
Отцы, подскажите прогу, которая грабит целиком сайты, желательно с родным Русским языком, а то я ставил пару прог и ничерта не понял как они работают, но ничего не качают, или скачивают только титульную страницу сайта.

_________________
Image
Image


Top
 Profile  
 
 
PostPosted: 04 Nov 2007 
Хиппей (support team)
User avatar
Joined: 30 Jul 2007
Posts: 131643
Lоcаtion: Киев (Kyiv, UA)
Age: 51
Name: Andrey
Teleport Pro

зы. Только если вознамерился скачать сайт Трашмагеддон, забудь эту идею
:nunu: :fingal:


Top
 Profile E-mail  
 
 
PostPosted: 04 Nov 2007 
труъ антисионист
User avatar
Joined: 01 Aug 2007
Posts: 4544
Lоcаtion: Откуда и большинство из нас
Age: 43
Name: Дядя Вова
Пока ты не сказал, я и не хотел. :)
З.ы. Спасибо, сейчас качну)

_________________
Image
Image


Top
 Profile  
 
 
PostPosted: 04 Nov 2007 
Хиппей (support team)
User avatar
Joined: 30 Jul 2007
Posts: 131643
Lоcаtion: Киев (Kyiv, UA)
Age: 51
Name: Andrey
А, Володь, Мэтал-Архивы так же не рекомендую качать =)) Ну, в общем, сам поймешь, почему :pardon:


Top
 Profile E-mail  
 
 
PostPosted: 04 Nov 2007 
труъ антисионист
User avatar
Joined: 01 Aug 2007
Posts: 4544
Lоcаtion: Откуда и большинство из нас
Age: 43
Name: Дядя Вова
Прога супер! Спасибо огромное, а не рекоммендуешь, видимо из-за объёма?

_________________
Image
Image


Top
 Profile  
 
 
PostPosted: 04 Nov 2007 
Хиппей (support team)
User avatar
Joined: 30 Jul 2007
Posts: 131643
Lоcаtion: Киев (Kyiv, UA)
Age: 51
Name: Andrey
Ага, отдельно бд М-Архивов скачать не получается, а весь сайт еще год назад весил больше 800 метров. :nea:


Top
 Profile E-mail  
 
 
PostPosted: 04 Nov 2007 
труъ антисионист
User avatar
Joined: 01 Aug 2007
Posts: 4544
Lоcаtion: Откуда и большинство из нас
Age: 43
Name: Дядя Вова
Да уж, круто! оставлю я себе лучше местечко под ДВД Саватажа, сейчас Avatar - pre Savatage 1981 года качаю!

_________________
Image
Image


Top
 Profile  
 
 
PostPosted: 05 Nov 2007 
Занудный сыч, сопсна
User avatar
Joined: 20 Aug 2007
Posts: 260
Lоcаtion: Москва
Age: 47
Name: Тимофей
Glot wrote:
ДВД Саватажа

а что, уже вышел?! :shok:

_________________
"Если бы Николая Баскова не существовало, его следовало бы слепить из говна, Путиномы и оладьев" (с) yasviridov.livejournal.com
***
Don't say it's over till is over
***


Top
 Profile  
 
 
PostPosted: 05 Nov 2007 
Занудный сыч, сопсна
User avatar
Joined: 20 Aug 2007
Posts: 260
Lоcаtion: Москва
Age: 47
Name: Тимофей
да, а что касается архивов, объём там не единственная загвоздка. не пробовал, но сильное подозрение что их громоздкий и глючный пхп движок на локалхосте просто не поднять до мало мальски адекватно рабочего состояния, по крайней мере, не потратив на это времени и сил совершенно несоразмерных желаемому результату. тем более, что они сами в нём давно и накрепко заблудились, судя по всему.

_________________
"Если бы Николая Баскова не существовало, его следовало бы слепить из говна, Путиномы и оладьев" (с) yasviridov.livejournal.com
***
Don't say it's over till is over
***


Top
 Profile  
 
 
PostPosted: 05 Nov 2007 
труъ антисионист
User avatar
Joined: 01 Aug 2007
Posts: 4544
Lоcаtion: Откуда и большинство из нас
Age: 43
Name: Дядя Вова
Durrell Wayne wrote:
Glot wrote:
ДВД Саватажа

а что, уже вышел?! :shok:

Не, я бутлеговские рипы сливаю!

_________________
Image
Image


Top
 Profile  
 
 
PostPosted: 16 Feb 2009 
Персональный статус
User avatar
Joined: 16 Jul 2008
Posts: 222
Lоcаtion: Киров
Age: 35
Name: Олег
Подниму эту старую тему.
Насчет метал архивов, скачать в принципе все реально через Телепорт (но похоже нужно в несколько подходов с указанием фильтров и начальных страниц), но зайти потом в каталог, куда сохранялись десятки тысяч страниц :crazy: Все просто напросто зависает. А я все-таки пробую скачать, чисто ради научного интереса, а не результата :umnik:
Видел на одном форуме, кто то скачал весь метал-архивес с работающим поисковым движком и готов поделится на двд взамен на что-нибудь интересное :meloman:


Top
 Profile  
 
 
PostPosted: 19 Feb 2009 
Персональный статус
User avatar
Joined: 16 Jul 2008
Posts: 222
Lоcаtion: Киров
Age: 35
Name: Олег
Юзаю сейчас Offline Explorer, мега вещь! :dance:
Уже третья попытка выкачать метал архивы. До этого с матами юзал Телепорт и WinHTTrack - ни как не мог нормально настроить все исключения и правила, чтобы не загружалось лишнее. Да и постоянные слеты и сохранение всех страниц в один каталог (а их по расчетам больше 300-500 тысяч :shok: ) Тут ни один файл менеджер не выдержит открытие такой папки.
В Offline Explorer же можно все просто и быстро настроить (только чтобы разобраться детально пришлось прочитать есь хелп (причем он сразу на русском, ибо один из разработчиков из России :true: ) и почитать форум, где сидит сам разработчик и всем помогает). Но это стоило того, потому как теперь лишний хлам не грузится, картинки (в теории) должны загрузиться все. Посмотрев в очередь скачиваемых файлов не обнаружил ничего особо лишнего, а главное там десятки тысяч картинок, а очередь ведь все растет и растет :true: ) В настройках есть пункт - не перегружать папки (то есть в корне каталога проекта создаются подпапки, в которых не более 1100 страниц) и это не влияет никак на работоспособность скаченного сайта.
Еще радует факт, что после загрузки сайта его можно экспортировать или в chm (но тут имеет место ограничение файла до 1,5 гиг, ибо такой формат), или в exe (встроенный браузер и нет ограничения на размер файла - видимо это самый лучший вариант). Впрочем можно экспортировать и в html :pardon:
Посмотрим что из этого выйдет. :umnik: :crazy:


Top
 Profile  
 
 
PostPosted: 19 Feb 2009 
Хиппей (support team)
User avatar
Joined: 30 Jul 2007
Posts: 131643
Lоcаtion: Киев (Kyiv, UA)
Age: 51
Name: Andrey
istar wrote:
Уже третья попытка выкачать метал архивы. До этого с матами юзал Телепорт и WinHTTrack - ни как не мог нормально настроить все исключения и правила, чтобы не загружалось лишнее. Да и постоянные слеты и сохранение всех страниц в один каталог

М-А три этих для сервак меняли :oops:
istar wrote:
Посмотрим что из этого выйдет

Любопытно, сколько вся база будет весить :shok:


Top
 Profile E-mail  
 
 
PostPosted: 19 Feb 2009 
Персональный статус
User avatar
Joined: 16 Jul 2008
Posts: 222
Lоcаtion: Киров
Age: 35
Name: Олег
Scatterbrain wrote:
М-А три этих для сервак меняли

:crazy: не знал, но дело было явно в кривости моих рук и в этом калькуляторе, - так называемом "компьютере". :pardon:
Scatterbrain wrote:
Любопытно, сколько вся база будет весить

Много много гигов, не меньше 6 (не сжатый), если все правильно скачается.
Уже скачалось около 900 метров, а очередь все растет и растет :fingal:
Андрей, поделись пожалуйста своим опытом загрузки М-А, интересно узнать :oops:


Top
 Profile  
 
 
PostPosted: 19 Feb 2009 
Хиппей (support team)
User avatar
Joined: 30 Jul 2007
Posts: 131643
Lоcаtion: Киев (Kyiv, UA)
Age: 51
Name: Andrey
istar wrote:
интересно узнать

Ммм.... ммм.... уже ж делился.
Качал в году 2005 всю базу. Весила примерно 500 метров :crazy: В сжатом виде около 80 получалось. Дальше счёл это бесполезным занятием и забросил :pardon: База ведь постоянно пополняется и меняется :cry:


Top
 Profile E-mail  
 
 
PostPosted: 19 Feb 2009 
Персональный статус
User avatar
Joined: 16 Jul 2008
Posts: 222
Lоcаtion: Киров
Age: 35
Name: Олег
насчет пополнения - должно быть без проблем, а вот обновления существующих страниц - гиблое дело :oops: Но посмотрим, если все получится, можно что-нибудь придумать :true:


Top
 Profile  
 
 
PostPosted: 27 Feb 2009 
"ну типа, хэви-метал это круто и все такое..." ©
User avatar
Joined: 31 Aug 2008
Posts: 902
Lоcаtion: Запорожье
Name: Саня
Вот еще программулина одна HTTrack Website Copier 3.43-3


Top
 Profile  
 
 
PostPosted: 28 Feb 2009 
мiзантропъ
User avatar
Joined: 01 Aug 2007
Posts: 2248
Lоcаtion: UA
Age: 54
Name: Вася Пупкін
кажется ни одна из них не может скачать содержание закрытого дока с ннм.ру даже если в данный момент я залогинен в ИЕ на сайте

_________________
Image
Image
Too Little Much Too Late...


Top
 Profile  
 
 
PostPosted: 28 Feb 2009 
Персональный статус
User avatar
Joined: 16 Jul 2008
Posts: 222
Lоcаtion: Киров
Age: 35
Name: Олег
в теории, OE должен справиться :oops: Читал форум техподдержки, там вопрос о скачивании закрытых сайтов (конечно имея парольный доступ) поднимался. Просто в настройках проекта нужно указать нужный логин и пароль. Ну еще придется фильтры хорошенько настроить


Top
 Profile  
 
 
PostPosted: 28 Feb 2009 
мiзантропъ
User avatar
Joined: 01 Aug 2007
Posts: 2248
Lоcаtion: UA
Age: 54
Name: Вася Пупкін
да перепробовал уже все... главную страницу дока нормально качает а все новости уже без логина :(

_________________
Image
Image
Too Little Much Too Late...


Top
 Profile  
 
Display posts from previous:  Sort by  
Post new topic Reply to topic  [ 20 posts ] 

All times are UTC + 2 hours


Who is online

Users browsing this forum: No registered users and 1 guest


You cannot post new topics in this forum
You cannot reply to topics in this forum
You cannot edit your posts in this forum
You cannot delete your posts in this forum

Search for:
Яндекс.Метрика
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group