Холиварофорум

ОБИТЕЛЬ ЗЛА И ЗАВИСТИ™: ПЕЧЕНЬКИ, ПОПКОРН, ДИСКУССИИ О ЛИТЕРАТУРЕ

НЕ ВСЁ, ЧТО ГОВОРЯТ НА ХОЛИВАРКЕ, – ПРАВДА!

Вы не вошли.

Объявление

Чтобы комментировать, зарегистрируйтесь. Ваш ник на форуме отображаться не будет.

Обсуждение ситуации с дайри. Анон, помни! Ссылка – серебро, скрин – золото!

#1 2017-11-01 10:23:29

Анон

АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Ложноножка треда Дайри-катастрофы

КАК СКАЧАТЬ

Перед скачиванием дневника любым способом, если вы залогинены, обязательно сделайте в настройках это!
Настройки дайри - Работа тегов: IMG, MORE, J - Порядок работы тега [MORE]..[/MORE]
Галка должна быть на "скрытая часть грузится одновременно со страницей"

Как скачать любой дневник или любое сообщество с помощью Offline Explorer

Скачать здесь (версия портабл)
Инструкция 1
Инструкция 2
Инструкция 3
Если кому важны теги, то вычеркните их из списка в инструкции, туда они внесены; в списке исключений прописывайте ссылки, которые вы себе в эпиграфе разместили, если такие есть.
Есть несколько вариантов экспорта. Экспортируй Каталог или chm с оглавлением :)
https://imgur.com/a/1zkIX
Перед экспортом можно смело удалять папки с именами diary.ru, https@platform.twitter.com, https@yastatic.net, www.google-analytics.com и прочую ерунду, которая просочится через фильтры. На всякий случай можно проверить, есть что-то в папке или нет (картинки), если нет, удаляйте.

Как скачать открытый/открытое дневник/соо с помощью Телепорт Про
Скачать открытый дневник/соо с помощью httrack

Официальный сайт

Мини-гайд

Устанавливаешь программу (классика: next, i agree, next, next, finish; можно указать папку, в которую хочешь установить программу). Запускаешь (launch). Потом, ЕМНИП, нажимаешь Next, вводить имя папки, в которую будешь сохранять, снова next. Потом директорию (как при сохранении картинки: диск такой-то, папки такие-то). Потом в белое окошко с надписью URL вставляешь, скажем, pravdoruboklon.diary.ru. Требование proxy можно проигнорировать. Когда начинают мелькать синие полоски, уходишь на пару дней или несколько часов заниматься своими делами (хоть в том же интернете). Закончится процесс должен сам, останется только нажать Next, Finish и смотреть, что за бардак насохранялся.

Что ещё работает для скачивания закрытых для незарегистрированных дневников
Скачать умылы
Скачать БИ Оффлайн Эксплорером

Как избавиться от ошибки "Попробуйте через 20 секунд" в скачанном дневнике: найти папку diary.ru/js и удалить файл journal2.

Отредактировано (2017-11-01 10:24:35)


#26 2017-11-01 19:22:19

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Offline Explorer: https://rutracker.org/forum/viewtopic.php?t=5417186.
При создании нового проекта в свойства -> проект -> пароли -> мастер паролей зайти под своим логином.
Только не бросайся сразу качать, там надо в настройках поковыряться.
Она у меня все записи подняла, это раз. И два, дневник на 50+ страниц скачала только до десятой.

Не только у тебя подняла древние записи, 7 страниц сегодня автовыложилось, постов еще с 2007 года -_-
Причем вразброс, - и 2007 и 2010 есть, и средние.

потому что внутренний браузер сам нажимает на все кнопки, чтобы сохранить тебе итоговые страницы. Неудобно, ссука! Пойду лучше открою ненадолго весь дневник и httrack скачаю.
Кстати, поудалять, подписаться куда не надо и др. он тоже может. Я без инструкции соваться не буду(

Отредактировано (2017-11-01 19:29:41)

#27 2017-11-01 19:35:35

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Кстати, поудалять, подписаться куда не надо и др. он тоже может. Я без инструкции соваться не буду(

Расскажешь потом как все вышло?

#28 2017-11-01 19:43:49

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Кстати, поудалять, подписаться куда не надо и др. он тоже может. Я без инструкции соваться не буду(

Расскажешь потом как все вышло?

Пока что я пробовал три раза, выставлял "без уровня" - попытался скачать все дайри, выставлял уровень 1 - не нашел пароль, выставлял 1 и "открыть все во внутреннем браузере и сохранить" - начал нажимать на кнопки...

Отредактировано (2017-11-01 19:55:24)

#29 2017-11-01 20:17:38

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

А маски в Offline Explorer кто-нибудь настраивать пробовал?

Анон пишет:

Пока что я пробовал три раза, выставлял "без уровня" - попытался скачать все дайри, выставлял уровень 1 - не нашел пароль, выставлял 1 и "открыть все во внутреннем браузере и сохранить" - начал нажимать на кнопки...

Я ставил у себя уровень 12, все проходило, но посты все равно поднимались.

#30 2017-11-01 20:29:08

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Ооооо, у меня даже не лапки, а руки крюки из жопки.
Но мне простительно, я стописят лет ничо не сохраняла браузером. Вопрос. Первую страницу дневника браузер сохраняет исправно, на следующей ругается, что такое уже есть.
Где-то адрес изменить или что? Не, я, конечно , разберусь, но может вы быстрее подскажете?

#31 2017-11-01 20:33:46

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Ооооо, у меня даже не лапки, а руки крюки из жопки.
Но мне простительно, я стописят лет ничо не сохраняла браузером. Вопрос. Первую страницу дневника браузер сохраняет исправно, на следующей ругается, что такое уже есть.
Где-то адрес изменить или что? Не, я, конечно , разберусь, но может вы быстрее подскажете?

Сохранять через "Сохранить как", он тебе предложит выбрать место и задать имя.
Вот в строке "имя" (или там название), первой странице задаёшь имя 001, второй странице имя 002 и так далее.

#32 2017-11-01 20:37:29

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

А маски в Offline Explorer кто-нибудь настраивать пробовал?

А что это такое вообще?
Я нам этой вкладке тестирую только "загружать с начального сервера" и "до 1 ссылки с других". Пока вроде нормально пилит (только, сука, поднимает)
В маски ткнулся, понял, что сейчас себе всю голову сломаю.

#33 2017-11-01 20:37:30

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Ага, спасибо. Я же помню, что что-то там с адресом. Совсем заржавела с телефона ходимши, забыла, как с  компом дружить. Спасибо.

#34 2017-11-01 21:08:11

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Бггг, аноны, а вы при загрузке этим эксплорером потом проверяли свои подписки и цитатник? У меня он на все подписался и добавил в цитатник посты, которые были в избранном, например хддд

#35 2017-11-01 21:30:14

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

А что это такое вообще?

По идее через них можно настроить, чтобы не ходил по ненужным кнопкам и ссылкам. Но я пока не до конца понимаю, как именно.

#36 2017-11-01 22:07:00

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Качаю с помощью Дискокачалки. Там можно указать, по каким ссылкам не переходить и не скачивать, то есть по идее быстрее.

Чтт такое "Дискокачалка"?

#37 2017-11-01 22:08:16

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Эх, похоже, самый надёжный и безбаговый способ - ручками, ручками.

#38 2017-11-01 22:59:27

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Эх, похоже, самый надёжный и безбаговый способ - ручками, ручками.

Пока я ручками буду сохранять, уже этот дайриапокалипсис пройдет и следующий начнется(((

#39 2017-11-02 00:14:31

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

У кого-нибудь есть архивы крипи-тредов с правдоруба и дятловцев оттуда же?  :timid:

Я собирался, но не знаю, соберусь ли. Но архив крипи-однострочников уже сделал. Интересно, админ Скреб-Поскреб будет архив делать или самому скачать ?

#40 2017-11-02 00:16:36

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Какой-то добрый Анон обещал написать инструкцию в обед. Уж полночь приблизилась, а он больше не появлялся( Анон, если ты это читаешь, я очень жду. Не тороплю тебя, если что, только совсем не пропадай, пожалуйста.

#41 2017-11-02 00:42:46

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Качаю с помощью Дискокачалки. Там можно указать, по каким ссылкам не переходить и не скачивать, то есть по идее быстрее.

Можешь поподробнее рассказать, чо к чему, пожалуйста? :( Я очень тупой анон.

#42 2017-11-02 00:45:24

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Какой-то добрый Анон обещал написать инструкцию в обед. Уж полночь приблизилась, а он больше не появлялся( Анон, если ты это читаешь, я очень жду. Не тороплю тебя, если что, только совсем не пропадай, пожалуйста.


Анончик, тебе именно дневник (посты) нужен или комментарии тоже? И, если комментарии, много их у тебя?
Просто я могу скинуть относительно простой способ выкачать дневник эксплорером, а вот с комментами пока ебусь и не выходит :/
Но будут только чисто посты - с катами, картинками, смайликами, но только посты.

#43 2017-11-02 02:36:12

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Просто я могу скинуть относительно простой способ выкачать дневник эксплорером, а вот с комментами пока ебусь и не выходит :/
Но будут только чисто посты - с катами, картинками, смайликами, но только посты.

Спасибо, анончик, но мне нужно скачать несколько фандомных фестов (чужих, если что, хозяева давным-давно сгинули), так что нужно с комментами обязательно, увы.

#44 2017-11-02 02:48:29

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон, скинь плиз хоть как посты качать. Может кто посмотрит и дальше что придумает.

#45 2017-11-02 02:52:57

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон, скинь плиз хоть как посты качать. Может кто посмотрит и дальше что придумает.

И мне, и мне тоже нужно как посты качать! Я вообще сейчас сижу и Навальноправду лапками руками сохраняю(

#46 2017-11-02 03:15:31

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

У меня, кстати, в ручками сохраненных страницах моря не работали. Не раскрывались. Но, может, это только у меня так.

#47 2017-11-02 03:45:30

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Так, смотрите. Метод для выкачивания дневника, работает только с постами, зато со всеми катами, форматированием и картинками.
Ссылки работать не будут! и комменты тоже не сохранятся!
Но если надо сохранить именно инфу из дневников/цитатников, проканает.

Но! параллельно прога выкачивает хуеву тучу хлама, поэтому метод довольно затратный.
Лично мне проще сейчас грохнуть один винт на все вот это вот и потом сидеть пару лет разбирать, - чем сейчас нормально сохранять ручками, зато в запарке "успею не успею". Но если у вас мало места, лучше подождать кого-то с более прямыми руками.


Тестирую на дежурке. СКАЧИВАЮ ТОЛЬКО ПОСТЫ! В дежурке сейчас дохера постов, from показывает 5940, в страницах это 298.
Эксплорер пахал примерно два часа и сейчас подвис на попытках достучать до сейвпика. Хотя я ему уже всеми способами отрубал подключения к нему, всё равно упорно туда пингует. Но дневник на 130+ страниц слямзил в три минуты. Так что, видимо, только сейвпик всё дело и тормозит.
Итак. Шесть тыщ постов дежурки, со всеми картиночками-гифочками под катами, голосовалками и прочими перделками кто что в посты выносил, да ещё и со всем хламом, который Эксплорер создал параллельно - весит 3 гига. Это чтобы понимать.
Дневник на 130+ страниц занял гиг; там тоже картинок дохера.


Метод следующий.

1. Настройки дайри - Работа тегов: IMG, MORE, J - Порядок работы тега [MORE]..[/MORE]
Галка должна быть на "скрытая часть грузится одновременно со страницей"


2. Теперь нужно узнать адрес самой последней страницы дневника, который будете выкачивать. Берете адрес вида http://pravdoruboklon.diary.ru/, добавляете к этому ?from= - и дальше сколь угодно большое число. На Дежурку понадобилось 6000, так что если вы писали меньше, чем Дежурка, можете сразу брать эту ссылку, только адрес поменяйте :)
http://ВАШАДРЕС.diary.ru/?from=6000
Таким образом вы окажетесь на предпоследней странице дневника - а вам нужна последняя.
У Дежурки она имеет адрес http://pravdoruboklon.diary.ru/?from=5940
Это число (5940) надо запомнить.


3. Дальше идете в прогу, тычете в кнопку "Новый проект".
Вам откроется окно с настройками, я выставлял такие:

вкладка АДРЕС - Имя проекта "ААААААА" :)
вкладка ИЗМЕНЕНИЯ ФАЙЛОВ - "не загружать существующие"
вкладка ПАРОЛИ - мастер паролей - ввел свои @логин-пароль
вкладка ПАПКА ЗАГРУЗКИ - создал папку на внешнем винте, вида d: diary


Дальше самое важное:

вкладка УРОВЕНЬ - поставить галку и указать уровень 0 (а то подпишетесь на все треды и это в самом лучшем случае)

вкладка МАКРОСЫ URL - в поле "Начальный адрес" нужно вставить строчку вида:
http://ВАШАДРЕС.diary.ru/?from={:0..NNNN}
где "вашадрес" - это адрес нужного дневника, а NNNN то самое число, которое вы запоминали в п.2.
Для Правдоруба у меня выставлен такой адрес: http://pravdoruboklon.diary.ru/?from={:0000..5940}

Дальше "Применить", дальше "ОК", дальше выделить созданный проект и "Загрузить" (кнопка вверху или правой кнопкой мыши по имени проекта, верхняя строчка).


В папку будет скачиваться бешеное количество дублей.
298 страниц Дежурки по факту превратились в 5940 страниц, из которых каждые двадцать друг друга дублируют.
Связано это с тем, что для дайри ссылки типа http://pravdoruboklon.diary.ru/?from=0 , http://pravdoruboklon.diary.ru/?from=1 , http://pravdoruboklon.diary.ru/?from=2 и так далее вплоть до http://pravdoruboklon.diary.ru/?from=19 равноценны, а прога не видит, что это одно и то же, и скачивает как двадцать уникальных адресов. Но как ей задать шаг в двадцать страниц, я не допёр :( Но хоть так инфу скачал (к тому же давно хотел выкинуть СПН )))

Скачанные страницы будут лежать в указанной в п.3 папке в подпапке с именем ВАШАДРЕС.diary.ru

У меня там, соответственно, 5940 файлов без расширения с именем типа @from=0005
Опера их спокойно открывает как хтм страничку. В принципе, если переименовать в @from=0005.htm, будет просто открывать как хтм, без вопросов "а чо? а как?" Долгими зимними вечерами без дайри как раз будет чем заняться.

Вот что с комментами делать - хз.

#48 2017-11-02 03:52:22

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Вот что с комментами делать - хз.

А вот какой смысл в Дежурке без комментов? Там же самый смак в комментах, а не в постах.

#49 2017-11-02 03:55:17

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:

Анон, скинь плиз хоть как посты качать. Может кто посмотрит и дальше что придумает.

И мне, и мне тоже нужно как посты качать! Я вообще сейчас сижу и Навальноправду лапками руками сохраняю(

Анон, в принципе для сохранения любого треда можно использовать тот же метод. Только макрос надо вписывать другой.
Вот сейчас для теста запустил скачиваться одну из шерлокоправд, там 62 страницы комментов, то есть все 2000 набили.
Макрос такой: http://pravdoruboklon.diary.ru/p2139284 … 000..2000}
И соответственно для любого треда берешь ссылку из урл этого треда, а потом добавляешь ?from={:0000..2000}

Скачает он, конечно, всё через задницу с кучей дублей, но мне просто любопытно, сколько гигов может уйти на один дежуркотред со всеми гифками. Отпишусь, когда закончит (или когда спать пойду).

Но вообще треды, имхо, сохранять проще одной страницей. В смысле просто проге методично скармливаешь все адреса постов из дежурки, да, все шесть тысяч, - и пьешь спокойно чаёк, ищешь следующий урл.

Задача открыть такой архив будет, конечно, не для слабых компов, но по крайней мере инфа точно сохранится, без дублей и заебательства.

#50 2017-11-02 03:56:20

Анон

Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти

Анон пишет:
Анон пишет:

Вот что с комментами делать - хз.

А вот какой смысл в Дежурке без комментов? Там же самый смак в комментах, а не в постах.

Специально для тебя ведь написал, что способ для сохранения дневников. А тестирую на дежурке, потому что ее можно рассматривать как дневник с огромным количеством постов.

Подвал форума

Под управлением FluxBB
Модифицировал Visman

[ Сгенерировано за 0.043 сек, 6 запросов выполнено - Использовано памяти: 1004.08 Кбайт (Пик: 1.03 Мбайт) ]

18+