Автор Гілка: Чи можна взяти DLOU на СD?  (Прочитано 6389 раз)

Відсутній Вуйко з полонини

  • Кореспондент
  • ***
  • дописів: 181
  • Карма: +0/-0
На канікули їду додому в Чернівці, де нажаль немає інтернета. Покищо я навіть не уявляю як це має бути,тому починаю готуватися в заготовленні інформації.
Ось і виникає у мене таке питання:
Чи не могли б панство адміністратори поділитися зі мною знанями у вигдяі DLOU записаною на СД? Був би надзвичайно вдячним і щасливим.

P.S.: я зараз в Києві
« Змінено: 2007-06-18 01:14:09 від body »
"Don't waste your time or time will waste you" Matthew Bellamy

Відсутній miwa

  • Літератор
  • ******
  • дописів: 1111
  • Карма: +0/-0
Re: Чи можна взяти DLOU на СD?
« Відповідей #1 : 2007-06-18 08:31:08 »
А що вам заважає зробити wget -r?
Читайте документацію - вона кермує.

Відсутній Вуйко з полонини

  • Кореспондент
  • ***
  • дописів: 181
  • Карма: +0/-0
Re: Чи можна взяти DLOU на СD?
« Відповідей #2 : 2007-06-18 11:34:52 »
А що вам заважає зробити wget -r?
Дорогий інтернет :"-(
"Don't waste your time or time will waste you" Matthew Bellamy

Відсутній rangel

  • Графоман
  • ****
  • дописів: 281
  • Карма: +0/-0
  • Python programmer
Re: Чи можна взяти DLOU на СD?
« Відповідей #3 : 2007-06-19 00:24:10 »
Чомусь не зміг скачати  :-[
Виконав$ wget -rp http://docs.linux.org.uaскачало всього два файла: головна сторінка і robots.txt   :-/

Що я зробив не так?
Roman Suprotkin

Відсутній cadca

  • Письменник
  • *****
  • дописів: 955
  • Карма: +0/-0
  • free like beer
Re: Чи можна взяти DLOU на СD?
« Відповідей #4 : 2007-06-19 08:34:40 »
Чомусь не зміг скачати  :-[Виконав$ wget -rp http://docs.linux.org.uaскачало всього два файла: головна сторінка і robots.txt   :-/

Що я зробив не так?
wget -nc -t10 -k -r -l inf -np http://docs.linux.org.ua -a DLOU.log &так мало б спрацювати ::)
Ubuntu 20.04/18.04; CentOS 7.x

Praporshic

  • Гість
Re: Чи можна взяти DLOU на СD?
« Відповідей #5 : 2007-06-19 11:40:38 »
Але не працює. І ось чому:
Цитата
#
# Sorry, wget in its recursive mode is a frequent problem.
# Please read the man page and use it properly; there is a
# --wait option you can use to set the delay between hits,
# for instance.
#
User-agent: wget
Disallow: /
« Змінено: 2007-06-19 11:45:50 від Praporshic »

Відсутній Yaroslav Fedevych

  • Літератор
  • ******
  • дописів: 1069
  • Карма: +0/-0
  • Людина — ніщо, справа — все
Re: Чи можна взяти DLOU на СD?
« Відповідей #6 : 2007-06-19 12:25:10 »
Мої вітання.

Рекурсивні роботи справді заборонені, і то з тієї причини, що так доволі просто можна покласти сервер на лопатки.

З інтернетом справді туго? Я можу зробити дамп і вислати його на диску звичайною поштою. Але цю послугу треба буде оплатити (а може б цю справу на конвеєр поставити? Зрештою, ДЛОУ теж мусить із чогось "жити").

Відсутній cadca

  • Письменник
  • *****
  • дописів: 955
  • Карма: +0/-0
  • free like beer
Re: Чи можна взяти DLOU на СD?
« Відповідей #7 : 2007-06-19 12:40:16 »
Але не працює. І ось чому:
Цитата
#
# Sorry, wget in its recursive mode is a frequent problem.
# Please read the man page and use it properly; there is a
# --wait option you can use to set the delay between hits,
# for instance.
#
User-agent: wget
Disallow: /
А що заважає, наприклад, додати опцію: :)-U "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)"
Ubuntu 20.04/18.04; CentOS 7.x

Відсутній Yaroslav Fedevych

  • Літератор
  • ******
  • дописів: 1069
  • Карма: +0/-0
  • Людина — ніщо, справа — все
Re: Чи можна взяти DLOU на СD?
« Відповідей #8 : 2007-06-19 12:44:09 »
Тому що wget, коли дивиться в robots.txt, шукає там себе, а не юзерагент.

zzandy

  • Гість
Re: Чи можна взяти DLOU на СD?
« Відповідей #9 : 2007-06-19 13:07:14 »
Тому що wget, коли дивиться в robots.txt, шукає там себе, а не юзерагент.

Це не так. (a.k.a. Брехня!)

Відсутній Yaroslav Fedevych

  • Літератор
  • ******
  • дописів: 1069
  • Карма: +0/-0
  • Людина — ніщо, справа — все
Re: Чи можна взяти DLOU на СD?
« Відповідей #10 : 2007-06-19 13:26:03 »
Тому що wget, коли дивиться в robots.txt, шукає там себе, а не юзерагент.

Це не так. (a.k.a. Брехня!)
Перевір. Мені вже назвати адресу, на котру має прийти ящик віскі? ;)

Відсутній Yaroslav Fedevych

  • Літератор
  • ******
  • дописів: 1069
  • Карма: +0/-0
  • Людина — ніщо, справа — все
Re: Чи можна взяти DLOU на СD?
« Відповідей #11 : 2007-06-19 15:44:00 »
До речі -- а як шановний All дивиться на пропозицію? Отримати за копійки (до 25 грн., вартість виготовлення/пересилки включена) диск з документацією в HTML-форматі, сконвертованими в man man-сторінками та ще деякими goodies, особливо якщо інтернет у місцевість возять фірами?

zzandy

  • Гість
Re: Чи можна взяти DLOU на СD?
« Відповідей #12 : 2007-06-19 16:39:27 »
Перевір. Мені вже назвати адресу, на котру має прийти ящик віскі? ;)

Тобто ставки такі. В даний момент мій wget качає з длоу без проблем. Просто у .wgetrc написано robots = off. Чарез якийсь час повернуся з повним тріумфом з приводу --user-agent (-U).


>> Мда, тріумфа чогось не виходить... він дійсно зупиняється на robots.txt, незважаючи на -U. Але спосіб звантажити весь длоу за допомогою wget-у все-таки є.
« Змінено: 2007-06-19 17:07:52 від zzandy »

Відсутній cadca

  • Письменник
  • *****
  • дописів: 955
  • Карма: +0/-0
  • free like beer
Re: Чи можна взяти DLOU на СD?
« Відповідей #13 : 2007-06-19 18:57:26 »
Мені вже назвати адресу, на котру має прийти ящик віскі? ;)
Несіть мені  ;D
Але спосіб звантажити весь длоу за допомогою wget-у все-таки є.
Звичайно: запуск wget перший раз -> витираємо весь вміст файлу robots.txt + усі файли які вже завантажено -> повторний запуск wget з опцією -nc (файл robots.txt для нього вже існує  ;D) -> безперешкодно завантажуємо вміст ДЛОУ 8-)
Ubuntu 20.04/18.04; CentOS 7.x

zzandy

  • Гість
Re: Чи можна взяти DLOU на СD?
« Відповідей #14 : 2007-06-19 19:03:46 »
Малося на увазі robots = off