Скачивайте журналы целиком (обновлено 10.10.2024)

[xedrox]

LJSD comments - консольная утилита для выкачивания не-подзамочных постов (с картинками и комментариями в заданном вами количестве страниц) из ЖЖ по годам в удобный оффлайн-формат. Без авторизации, так что паролем рисковать не нужно, будет выкачано только публичное.

(Хотите выкачать всё в PDF, включая подзамочное - используйте blogbooker.com )

Comments

[alexispokrovski]

Спасибо за отличную программу!

[moshushi]

Спасибо

[alexispokrovski]

Ещё раз спасибо за утилиту.

Недавно скачивал довольно объёмный журнал. Пару лет скачало as expected. Потом сервер стал (видимо) ограничивать (нет логов; окно закрывалось, заведомо не докачав год), а ещё потом забанили IP на примерно сутки (логи есть).

В мануале написано, что качает в 4 потока. Когда ещё не забанили, заметил, что утилита открывает одновременно 400-500 соединений.

Нельзя ли ввести настройку скорости скачивания / нагрузки на сервер? Готов сделать сам, если будет разрешение автора.

[xedrox]

Если запущен один экземпляр программы, проблем быть не должно - там больше 4 потоков нет, не будет больше 4 одновременных запросов, если только с вашего IP ещё кто-то что-то с ЖЖ не качает. В крайнем случае с другого адреса / ПК можно попробовать.

Поэтому 400-500 соединений не может быть. Там pool = ThreadPool(4) и в каждом потоке поочерёдное скачивание. Вероятно, брандмауэр считает по числу запросов в минуту (?), потому такое число получается.

а вот ввести настройку можно, как руки дойдут, это несложно. На перспективу отложу.

Сохранить ВСЁ ( от слова всё )

[kshibaev]

Здравствуйте в буквальном смысле этого слова , т.е. БУДЬТЕ ВСЕ ЗДОРОВЫ

RE: Сохранить ВСЁ ( от слова всё )

[xedrox]

Пока скачивание с авторизацией не планируется.
Личные подзамочные посты обычно интересны только автору. Программа создавалась для общеполезных журналов типа emdrone, amantonio или zhenziyou

RE: Сохранить ВСЁ ( от слова всё )

[raketchik]

Есть такая программа ljarchive
Она позволяет скачивать всё содержимое своего журнала, включая комментарии и подзамочные посты.
https://sourceforge.net/projects/ljarchive/

[lx_photos]

Кроме картинок.

[denis_zel]

Долго искал способ, и Ваш сработал.

Благо Дарю!
Поклон