Как скачать архив дневника с HTTrack Website Copier

[kxena]

Друзья!
В связи с последними событиями на diary.ru, думаю, что многие задались вопросом, как спасти всё, что нажито непосильным трудом. Многие провели на этом ресурсе годы. Моей собственной днявочке 8 лет! А это более тысячи постов и контент, который я больше нигде не публиковала. В том числе довольно редкий, ценный или ностальгически приятный. Само собой, как и многие уже, я заказала у администрации архив своего дневника и цитатника. Но, думаю, что особо рассчитывать на него не стоит. Во-первых, насколько оперативно реагирует администрация на запросы мы в курсе, а во-вторых, если таких желающих окажется даже пара тысяч... ну, вы понимаете. Потому, спасение утопающих - дело рук самих утопающих. Я скачала копию дневника целиком с помощью HTTrack Website Copier. Эта программа удобная, русскоязычная и главное - бесплатная. Как её установить и настроить ниже приведена инструкция с картинками. + И ссыль на PDF. Отдельно спасибо essilt за помощь в тестировании всего этого процесса ))



Сначала несколько хитростей:

1. Вовремя нескольких проб и подбора разных параметров программы, я пробовала качать архив с мобильной версии, потому что она не нагружена дизайном. Мне дизайна не жаль, он ценности не представляет, главное посты и картинки.
2. Еще один лайвхак, который может помочь - скачивание не с главной страницы дневничка, а со списка ваших тем (тегов). У меня это kxena.diary.ru/?tags Это поможет разбить все ваши сообщения по темам и в каждой будет не over9000 постов, а гораздо меньше, что позволит скачать быстрее.
3. Сообщество может скачать тот у кого есть от него пароль.
4. Качаться будет долго, в зависимости от глубины сканирования и количества информации. Мой забирался около 4 часов.
5. Если закачку понадобится прервать и затем продолжить - это возможно. Просто вы останавливаете скачивание. Потом, когда нужно, открываете сохранённый проект скачивания .whtt и продолжаете с теми же параметрами.
6. Я не пробовала, но думаю, что с помощью сохраненного проекта скачивания .whtt можно будет обновлять архив дневника. Указывать только режим обновления закачки.

ВНИМАНИЕ! Как показал последний тест, чтобы скачать закрытые записи программе нужны специальные настройки. Инструкция и актуальные фильтры здесь

Ну, а теперь пошаговая инструкция:

1. Скачать саму программу с www.httrack.com/page/2/en/index.html.

2. Узнать, какую именно версию программы вам нужно скачивать 32-х или 64-х разрядную, можно так:
- Войти в "Панель управления"
- В ней перейти "Панель управления\Система и безопасность\Система". В открывшемся окошке в пункте "Тип системы" будет написано, например: 64-разрядная.

3. Далее нужно запустить программу и установить HTTrack Website Copier по этапам:

картинки этапов

4. Когда программа запустится, нужно выбрать язык – русский.



5. Потом задать имя проекта, категорию (можно не задавать), каталог, куда сохранять ваш дайр. Нажать «Далее». ВНИМАНИЕ: Во избежание проблем лучше называйте проект и каталог на английском, без кавычек и апострофов!.



6. На следующей вкладке указать параметры скачивания. Выберите режим "Загрузить сайты" - если скачиваете впервые. Так же есть режимы для продолжения и обновления ранее созданного проекта. Задайте веб-адреса через кнопку «Добавить URL» ). Можно задать несколько адресов. Например, если вы хотите скачать не весь дневник, а контент по конкретным тегам. Далее нажимайте на кнопку «Задать параметры...».


7. По кнопке «Задать параметры...» появится окно, где надо задать параметры на вкладках.
ВНИМАНИЕ! Чтобы скачать и закрытые записи, требуются специальные настройки. Рекомендации с сайта программы.

Прокси. Снять галочку "Использовать прокси для ftp-закачки"


Качалка. Поставить последнюю галочку "Использовать старый протокол HTTP"


Структура


Ограничения скачивания. Максимальную глубину внешних ссылок указываем 0. Максимальная глубина для вашего дневника может потребоваться большей или меньшей, скорость скачивания тоже изменится:


Фильтры скачивания, чтобы забрать только дневник, а не весь интернет


Готовые фильтры для дневника здесь.

ВНИМАНИЕ! Можно скопировать фильтры к себе, но заменив login в строчках +*login.diary.ru/* и -diary.ru/sms/?shorthelp&shortname=login&com=0, на нужный.
Приведенные исключения я попыталась настроить так, чтобы скачать страницу с темами, библиотеку изображений, профиль, цитатник, сообщения и комментарии к ним.
Теги MORE должны открываться.
Изображения, включенные в сообщения, отображаться.
Я исключила так же скачивание: с youtube, с давно отвалившегося prostopleer, рекламу яндекса, ролики с кино-сайта, mail.ru.

8. Когда все настроено, останется запустить скачивание



9. Скачивание будет идти долго. Перед скачиванием с мобильной версии убедитесь, что она отображает подзамочные записи, если вы залогинены!

10. После скачивания рекомендую пройтись по страницам архива и убедиться, что все нужное удалось забрать. Особенно закрытые записи. В крайнем случае, если что-то не попадет в закачку, то уже намного проще сохранить это вручную.

Искренне надеюсь, что это кому-то поможет, и что все дружно мы не положим любимые дайри Всем добра, удачного спасенного контента, а дайрям долгих лет и воскрешения



 

@темы: Полезные ссылки, Мысли вслух, ПЧ

Comments

[essilt]

Юзерам: мой контент за 8 лет (два с лишним кило записей) качался десять с лишним часов. Так что запасайтесь терпением...

[Santonica]

спасибо за совет и инструкцию!

[MirrinMinttu]

Спасибо!

[Anihir]

Спасибо)

[kxena]

essilt,
Aesir, MirrinMinttu, да не за что, надеюсь хоть что-то поможет спасти. Открытому дневнику точно. У меня самой есть закрытые записи, но не много, продублированные и их уже вручную унесла.

[киса в свитере]

спасибо! У меня лапки, но, может, умолю сына мне это сделать.

[киса в свитере]

Узнать, какую именно версию программы вам нужно скачивать 32-х или 64-х разрядную, можно так: - Войти в "Панель управления" - В ней перейти "Панель управления\Система и безопасность\Система". В открывшемся окошке в пункте "Тип системы" будет написано, например: 64-разрядная.

у меня ХР в меню Панели управления нету Система и безопасность. Где ж её искать?

[kxena]

киса в свитере,

у меня ХР в меню Панели управления нету Система и безопасность. Где ж её искать?

тебе вот так надо делать: youtu.be/Kh7QwA

[киса в свитере]

поищу!

[Cattea]

kxena, спасибо большое, очень полезно. Но, если возможно, сделайте инструкцию для чайников для закрытых записей.

[MirrinMinttu]

Фу ты, меня комп даже на страницу этой программы не пустил - заорал, что его там повредят безвозвратно, что ааааааа! там воруют допуски, взламывают аккаунты! - и вырубил интернет вообще Да ладно. Большая часть этого дневника давно дублирутся на жж, а то, чего там нет, потихоньку переношу на дрим.

[kxena]

MirrinMinttu,

меня комп даже на страницу этой программы не пустил - заорал, что его там повредят безвозвратно, что ааааааа! там воруют допуски, взламывают аккаунты!

Ого, чегой-та он )) Так-то у меня даже Каспер пропустил, хотя он параноик еще тот и своих-то не всегда пропускает ))
Cattea, я постараюсь

[Алиция Рэйвен]

Спасибо большое за инструкцию!

[Lalayt]

Огромное спасибо!
но вот єто Можно скопировать фильтры к себе, но заменив login в строчках +*login.diary.ru/* и -diary.ru/sms/?shorthelp&shortname=login&com=0, на нужный. немного непонятно. Что это значит, где менять-то?

[MirrinMinttu]

kxena, у меня Нортон, и защита от провайдера, и, кажется, в Леново что-то встроено. Он упорно не хотел ставить даже мю-торрент в свое время.

[kxena]

Lalayt, то есть ты копируешь к себе вместо +*login.diary.ru/* +*lalayt1982.diary.ru/*
вместо -diary.ru/sms/?shorthelp&shortname=login&com=0 -diary.ru/sms/?shorthelp&shortname=lalayt1982&com=0

[Lalayt]

kxena, спасибо) я так и думала, но не могла не уточнить.

[Lalayt]

Что-то ничего не получается. Делаю все, как написано, нажимаю закачать, проходит секунда буквально, программа пишет создано зеркало и все. Я понимаю, что дело в моих кривых руках, но может у кого-то такое было?

[kxena]

Lalayt, она тебе при закачке генерирует еще и лог, посмотри что в нем, или скинь не в U-mail

[Lalayt]

kxena, лог это hts-log?

[kxena]

Lalayt, да

[киса в свитере]

у меня появилась папка диар
. Но мне кажется, это не то, что надо. Не мог же днев моментально скачаться. Он очень большой, с 2011г и множество записей в день, в том числе видео, картинки, большие тексты.
,

[kxena]

киса в свитере, у тебя подзамочный дневник для его скачивания нужны еще настройки, я как раз занимаюсь еще одной инструкцией на эту тему )

[киса в свитере]

kxena, буду4 ждать. А то сын ткнулся, и сказал, что, похоже, ничего не получается.

[Skjelle]

Меня тут на вас вывело перепостами - подпишусь на запись, чтобы не прозевать инструкции

[kxena]

Skjelle, велком

[Эйнэри]

Спасибо за подробную инструкцию, особенно список фильтров. Однако подзамочные записи он действительно не качает, и страницы выглядят так, будто я не залогинена. Вытащу вручную, но все же странно.

[kxena]

Эйнэри, для подзамочных инструкция почти готова, я к тому же обновлю там список фильтров и скачивание должно пойти в разы быстрее. Программа поддерживает обновление закачки с новыми параметрами

[Akiva-san]

Спасибо вам за инструкцию, тоже жду информацию насчёт закрытых дневников - попробовала закачать, всё через секунды прервалось.

[Дарницкий Шпион]

простите идиота, а данным образом можно сохранить дневник, закрытый под белый список?