Забанили в ЖЖ, лол

[noddeat]

...мій домашній IP. Скрипт бекапу мій геніальний перебором бекапив сторінки, бо рекурсивний wget чомусь тіки 2000 записів за бекапив з 3000.

Тому я зробив так:

#!/bin/bash
for entry in `seq 461 850000`;
do
wget --convert-links --no-clobber http://noddeat.livejournal.com/$entry.html
done


Це дозволяє гарантовано забекапити всі записи, але генерує велику кількість помилок 404. Пахне DOS-ом, правда? Правильно, подумав ЖЖ і забанив мене. Знак, шо треба потихеньку звідси йти (мені було ліньки, тому з ЖЖ звалили всі, крім мене).

Comments

[knedlyk.livejournal.com]

ну власне, ти одна така викопна людина.

[noddeat.livejournal.com]

Схоже, недовго. По плану мав у 2017 закінчити (10 років блогу), але, може, і швидше вийде.

[mrgall.livejournal.com]

Думаю краще спочатку зібрати список ID записів а потім вже по них прогнати wget. Або скористатися експортом всього контенту на іншу платформу (для прикладу, у Wordpress).

[noddeat.livejournal.com]

Ех, якби цей список можна було так просто дістати. А так доводиться тягнути по черзі записи, потім звідти витягувати адресу наступної.

[mrgall.livejournal.com]

У них є можливість експортувати записи, правда лише по місяцю за раз: http://www.livejournal.com/support/faq/8.html

[noddeat.livejournal.com]

в курсі. Ну, треба було раніше робити бекапи, ага. 112 місяців я писав цей блог.

[mrgall.livejournal.com]

В мене в тій формі виходить експортувати список ID за місяць приблизно за секунду (ще 5 секунд йде на зміну року), загальний список можна зробити за допомогою grep:
grep -h -v "itemid" noddeat-*

[whinchat]

Ха, радикальный способ. И какое же соотношение hit/miss?

[noddeat.livejournal.com]

Вар’юється залежно від частоти моїх постів та популярності ЖЖ загалом. У 2007-2009 роках помилок 404 було найбільше. І на цьому етапі мене забанили.

Останні записи:
832492
832209

Тобто, 1 hit на 300.