Холиварофорум
Вы не вошли.
Объявление
Холиварка празднует День Чтеца!
Ознакомиться с праздничными чтениями можно в соответствующем разделе
#1 2017-11-01 10:23:29
- Анон
АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Ложноножка треда Дайри-катастрофы
Как избавиться от ошибки "Попробуйте через 20 секунд" в скачанном дневнике: найти папку diary.ru/js и удалить файл journal2.
Отредактировано (2017-11-01 10:24:35)
#26 2017-11-01 19:22:19
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Анон пишет:Offline Explorer: https://rutracker.org/forum/viewtopic.php?t=5417186.
При создании нового проекта в свойства -> проект -> пароли -> мастер паролей зайти под своим логином.
Только не бросайся сразу качать, там надо в настройках поковыряться.
Она у меня все записи подняла, это раз. И два, дневник на 50+ страниц скачала только до десятой.Не только у тебя подняла древние записи, 7 страниц сегодня автовыложилось, постов еще с 2007 года -_-
Причем вразброс, - и 2007 и 2010 есть, и средние.
потому что внутренний браузер сам нажимает на все кнопки, чтобы сохранить тебе итоговые страницы. Неудобно, ссука! Пойду лучше открою ненадолго весь дневник и httrack скачаю.
Кстати, поудалять, подписаться куда не надо и др. он тоже может. Я без инструкции соваться не буду(
Отредактировано (2017-11-01 19:29:41)
#27 2017-11-01 19:35:35
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Кстати, поудалять, подписаться куда не надо и др. он тоже может. Я без инструкции соваться не буду(
Расскажешь потом как все вышло?
#28 2017-11-01 19:43:49
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Анон пишет:Кстати, поудалять, подписаться куда не надо и др. он тоже может. Я без инструкции соваться не буду(
Расскажешь потом как все вышло?
Пока что я пробовал три раза, выставлял "без уровня" - попытался скачать все дайри, выставлял уровень 1 - не нашел пароль, выставлял 1 и "открыть все во внутреннем браузере и сохранить" - начал нажимать на кнопки...
Отредактировано (2017-11-01 19:55:24)
#29 2017-11-01 20:17:38
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
А маски в Offline Explorer кто-нибудь настраивать пробовал?
Пока что я пробовал три раза, выставлял "без уровня" - попытался скачать все дайри, выставлял уровень 1 - не нашел пароль, выставлял 1 и "открыть все во внутреннем браузере и сохранить" - начал нажимать на кнопки...
Я ставил у себя уровень 12, все проходило, но посты все равно поднимались.
#30 2017-11-01 20:29:08
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Ооооо, у меня даже не лапки, а руки крюки из жопки.
Но мне простительно, я стописят лет ничо не сохраняла браузером. Вопрос. Первую страницу дневника браузер сохраняет исправно, на следующей ругается, что такое уже есть.
Где-то адрес изменить или что? Не, я, конечно , разберусь, но может вы быстрее подскажете?
#31 2017-11-01 20:33:46
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Ооооо, у меня даже не лапки, а руки крюки из жопки.
Но мне простительно, я стописят лет ничо не сохраняла браузером. Вопрос. Первую страницу дневника браузер сохраняет исправно, на следующей ругается, что такое уже есть.
Где-то адрес изменить или что? Не, я, конечно , разберусь, но может вы быстрее подскажете?
Сохранять через "Сохранить как", он тебе предложит выбрать место и задать имя.
Вот в строке "имя" (или там название), первой странице задаёшь имя 001, второй странице имя 002 и так далее.
#32 2017-11-01 20:37:29
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
А маски в Offline Explorer кто-нибудь настраивать пробовал?
А что это такое вообще?
Я нам этой вкладке тестирую только "загружать с начального сервера" и "до 1 ссылки с других". Пока вроде нормально пилит (только, сука, поднимает)
В маски ткнулся, понял, что сейчас себе всю голову сломаю.
#33 2017-11-01 20:37:30
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Ага, спасибо. Я же помню, что что-то там с адресом. Совсем заржавела с телефона ходимши, забыла, как с компом дружить. Спасибо.
#34 2017-11-01 21:08:11
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Бггг, аноны, а вы при загрузке этим эксплорером потом проверяли свои подписки и цитатник? У меня он на все подписался и добавил в цитатник посты, которые были в избранном, например хддд
#35 2017-11-01 21:30:14
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
А что это такое вообще?
По идее через них можно настроить, чтобы не ходил по ненужным кнопкам и ссылкам. Но я пока не до конца понимаю, как именно.
#36 2017-11-01 22:07:00
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Качаю с помощью Дискокачалки. Там можно указать, по каким ссылкам не переходить и не скачивать, то есть по идее быстрее.
Чтт такое "Дискокачалка"?
#37 2017-11-01 22:08:16
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Эх, похоже, самый надёжный и безбаговый способ - ручками, ручками.
#38 2017-11-01 22:59:27
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Эх, похоже, самый надёжный и безбаговый способ - ручками, ручками.
Пока я ручками буду сохранять, уже этот дайриапокалипсис пройдет и следующий начнется(((
#39 2017-11-02 00:14:31
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
У кого-нибудь есть архивы крипи-тредов с правдоруба и дятловцев оттуда же?
Я собирался, но не знаю, соберусь ли. Но архив крипи-однострочников уже сделал. Интересно, админ Скреб-Поскреб будет архив делать или самому скачать ?
#40 2017-11-02 00:16:36
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Какой-то добрый Анон обещал написать инструкцию в обед. Уж полночь приблизилась, а он больше не появлялся( Анон, если ты это читаешь, я очень жду. Не тороплю тебя, если что, только совсем не пропадай, пожалуйста.
#41 2017-11-02 00:42:46
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Качаю с помощью Дискокачалки. Там можно указать, по каким ссылкам не переходить и не скачивать, то есть по идее быстрее.
Можешь поподробнее рассказать, чо к чему, пожалуйста? :( Я очень тупой анон.
#42 2017-11-02 00:45:24
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Какой-то добрый Анон обещал написать инструкцию в обед. Уж полночь приблизилась, а он больше не появлялся( Анон, если ты это читаешь, я очень жду. Не тороплю тебя, если что, только совсем не пропадай, пожалуйста.
Анончик, тебе именно дневник (посты) нужен или комментарии тоже? И, если комментарии, много их у тебя?
Просто я могу скинуть относительно простой способ выкачать дневник эксплорером, а вот с комментами пока ебусь и не выходит :/
Но будут только чисто посты - с катами, картинками, смайликами, но только посты.
#43 2017-11-02 02:36:12
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Просто я могу скинуть относительно простой способ выкачать дневник эксплорером, а вот с комментами пока ебусь и не выходит :/
Но будут только чисто посты - с катами, картинками, смайликами, но только посты.
Спасибо, анончик, но мне нужно скачать несколько фандомных фестов (чужих, если что, хозяева давным-давно сгинули), так что нужно с комментами обязательно, увы.
#44 2017-11-02 02:48:29
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Анон, скинь плиз хоть как посты качать. Может кто посмотрит и дальше что придумает.
#45 2017-11-02 02:52:57
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Анон, скинь плиз хоть как посты качать. Может кто посмотрит и дальше что придумает.
И мне, и мне тоже нужно как посты качать! Я вообще сейчас сижу и Навальноправду лапками руками сохраняю(
#46 2017-11-02 03:15:31
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
У меня, кстати, в ручками сохраненных страницах моря не работали. Не раскрывались. Но, может, это только у меня так.
#47 2017-11-02 03:45:30
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Так, смотрите. Метод для выкачивания дневника, работает только с постами, зато со всеми катами, форматированием и картинками.
Ссылки работать не будут! и комменты тоже не сохранятся!
Но если надо сохранить именно инфу из дневников/цитатников, проканает.
Но! параллельно прога выкачивает хуеву тучу хлама, поэтому метод довольно затратный.
Лично мне проще сейчас грохнуть один винт на все вот это вот и потом сидеть пару лет разбирать, - чем сейчас нормально сохранять ручками, зато в запарке "успею не успею". Но если у вас мало места, лучше подождать кого-то с более прямыми руками.
Тестирую на дежурке. СКАЧИВАЮ ТОЛЬКО ПОСТЫ! В дежурке сейчас дохера постов, from показывает 5940, в страницах это 298.
Эксплорер пахал примерно два часа и сейчас подвис на попытках достучать до сейвпика. Хотя я ему уже всеми способами отрубал подключения к нему, всё равно упорно туда пингует. Но дневник на 130+ страниц слямзил в три минуты. Так что, видимо, только сейвпик всё дело и тормозит.
Итак. Шесть тыщ постов дежурки, со всеми картиночками-гифочками под катами, голосовалками и прочими перделками кто что в посты выносил, да ещё и со всем хламом, который Эксплорер создал параллельно - весит 3 гига. Это чтобы понимать.
Дневник на 130+ страниц занял гиг; там тоже картинок дохера.
Метод следующий.
1. Настройки дайри - Работа тегов: IMG, MORE, J - Порядок работы тега [MORE]..[/MORE]
Галка должна быть на "скрытая часть грузится одновременно со страницей"
2. Теперь нужно узнать адрес самой последней страницы дневника, который будете выкачивать. Берете адрес вида http://pravdoruboklon.diary.ru/, добавляете к этому ?from= - и дальше сколь угодно большое число. На Дежурку понадобилось 6000, так что если вы писали меньше, чем Дежурка, можете сразу брать эту ссылку, только адрес поменяйте 
http://ВАШАДРЕС.diary.ru/?from=6000
Таким образом вы окажетесь на предпоследней странице дневника - а вам нужна последняя.
У Дежурки она имеет адрес http://pravdoruboklon.diary.ru/?from=5940
Это число (5940) надо запомнить.
3. Дальше идете в прогу, тычете в кнопку "Новый проект".
Вам откроется окно с настройками, я выставлял такие:
вкладка АДРЕС - Имя проекта "ААААААА"
вкладка ИЗМЕНЕНИЯ ФАЙЛОВ - "не загружать существующие"
вкладка ПАРОЛИ - мастер паролей - ввел свои @логин-пароль
вкладка ПАПКА ЗАГРУЗКИ - создал папку на внешнем винте, вида d: diary
Дальше самое важное:
вкладка УРОВЕНЬ - поставить галку и указать уровень 0 (а то подпишетесь на все треды и это в самом лучшем случае)
вкладка МАКРОСЫ URL - в поле "Начальный адрес" нужно вставить строчку вида:
http://ВАШАДРЕС.diary.ru/?from={:0..NNNN}
где "вашадрес" - это адрес нужного дневника, а NNNN то самое число, которое вы запоминали в п.2.
Для Правдоруба у меня выставлен такой адрес: http://pravdoruboklon.diary.ru/?from={:0000..5940}
Дальше "Применить", дальше "ОК", дальше выделить созданный проект и "Загрузить" (кнопка вверху или правой кнопкой мыши по имени проекта, верхняя строчка).
В папку будет скачиваться бешеное количество дублей.
298 страниц Дежурки по факту превратились в 5940 страниц, из которых каждые двадцать друг друга дублируют.
Связано это с тем, что для дайри ссылки типа http://pravdoruboklon.diary.ru/?from=0 , http://pravdoruboklon.diary.ru/?from=1 , http://pravdoruboklon.diary.ru/?from=2 и так далее вплоть до http://pravdoruboklon.diary.ru/?from=19 равноценны, а прога не видит, что это одно и то же, и скачивает как двадцать уникальных адресов. Но как ей задать шаг в двадцать страниц, я не допёр :( Но хоть так инфу скачал (к тому же давно хотел выкинуть СПН )))
Скачанные страницы будут лежать в указанной в п.3 папке в подпапке с именем ВАШАДРЕС.diary.ru
У меня там, соответственно, 5940 файлов без расширения с именем типа @from=0005
Опера их спокойно открывает как хтм страничку. В принципе, если переименовать в @from=0005.htm, будет просто открывать как хтм, без вопросов "а чо? а как?" Долгими зимними вечерами без дайри как раз будет чем заняться.
Вот что с комментами делать - хз.
#48 2017-11-02 03:52:22
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Вот что с комментами делать - хз.
А вот какой смысл в Дежурке без комментов? Там же самый смак в комментах, а не в постах.
#49 2017-11-02 03:55:17
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Анон, скинь плиз хоть как посты качать. Может кто посмотрит и дальше что придумает.
И мне, и мне тоже нужно как посты качать! Я вообще сейчас сижу и Навальноправду лапками руками сохраняю(
Анон, в принципе для сохранения любого треда можно использовать тот же метод. Только макрос надо вписывать другой.
Вот сейчас для теста запустил скачиваться одну из шерлокоправд, там 62 страницы комментов, то есть все 2000 набили.
Макрос такой: http://pravdoruboklon.diary.ru/p2139284 … 000..2000}
И соответственно для любого треда берешь ссылку из урл этого треда, а потом добавляешь ?from={:0000..2000}
Скачает он, конечно, всё через задницу с кучей дублей, но мне просто любопытно, сколько гигов может уйти на один дежуркотред со всеми гифками. Отпишусь, когда закончит (или когда спать пойду).
Но вообще треды, имхо, сохранять проще одной страницей. В смысле просто проге методично скармливаешь все адреса постов из дежурки, да, все шесть тысяч, - и пьешь спокойно чаёк, ищешь следующий урл.
Задача открыть такой архив будет, конечно, не для слабых компов, но по крайней мере инфа точно сохранится, без дублей и заебательства.
#50 2017-11-02 03:56:20
- Анон
Re: АРХИВЫ С DIARY.RU и АРХИВИРОВАНИЕ. Собираем то, что успели спасти
Анон пишет:Вот что с комментами делать - хз.
А вот какой смысл в Дежурке без комментов? Там же самый смак в комментах, а не в постах.
Специально для тебя ведь написал, что способ для сохранения дневников. А тестирую на дежурке, потому что ее можно рассматривать как дневник с огромным количеством постов.