Форум русскоязычного сообщества Ubuntu


Следите за новостями русскоязычного сообщества Ubuntu в Twitter-ленте @ubuntu_ru_loco

Автор Тема: Ищу программку для грабления страничек  (Прочитано 887 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн Sergey Vilgelm

  • Автор темы
  • Новичок
  • *
  • Сообщений: 8
    • Просмотр профиля
    • Личный
Здравствуйте,
в общем нужна программка для создания копий web-страничек.
Но простой аналог teleport не подойдет.
Требования такие:
1. Скачивать странички с указанным уровнем вложенности.
2. Вести базу по страничкам.
3. Полнотекстовый поиск.

Идеал - расширение ScrapBook для Firefox, но должно быть отдельным приложением.
« Последнее редактирование: 06 Октября 2010, 11:57:59 от Separator »

Оффлайн dieselist

  • Активист
  • *
  • Сообщений: 525
    • Просмотр профиля
    • diesel.pp.ua
Re: Ищу программку для грабления страничек
« Ответ #1 : 06 Октября 2010, 12:03:24 »
wget -r site.name
остальные включи (напр. уровни вложенности) - по вкусу.
базу, правда, не ведет. но, думаю, можно и самому на том же шеле написать какую-то обвязку, которая будет доделывать то, что тебе надо.
Ubuntu, Gentoo, RHEL, AIX

Оффлайн sanb

  • Активист
  • *
  • Сообщений: 404
    • Просмотр профиля
Re: Ищу программку для грабления страничек
« Ответ #2 : 06 Октября 2010, 12:19:13 »
Хотел просто дать ссылку https://forum.ubuntu.ru/index.php?topic=115518.0 но потом прочёл и понял что вопрос значительно шире и что самому нужно что-то подобное.
Как я понял вам нужен веб-органайзер для создания базы знаний так сказать.

Я пока остановился на ScrapBook'е + подбираю сейчас приложение для ведения заметок.
И я как раз искал решение с минимальным количеством телодвижений для сохранения инфы из веба что здраво imho

Ещё мечтаю накопленное экспортировать в wiki
« Последнее редактирование: 06 Октября 2010, 12:25:08 от sanb »

Оффлайн Sergey Vilgelm

  • Автор темы
  • Новичок
  • *
  • Сообщений: 8
    • Просмотр профиля
    • Личный
Re: Ищу программку для грабления страничек
« Ответ #3 : 06 Октября 2010, 12:28:18 »
:)
Как скачать wget'ом уже давно разобрался, даже gwget поставил
« Последнее редактирование: 06 Октября 2010, 12:30:15 от Separator »

Оффлайн Lion-Simba

  • Старожил
  • *
  • Сообщений: 1126
    • Просмотр профиля
Re: Ищу программку для грабления страничек
« Ответ #4 : 06 Октября 2010, 12:33:00 »
3. Полнотекстовый поиск.
А может Google Desktop натравить на папку со скаченными страницами?
Оказываю индивидуальную платную техподдержку широкого профиля. Обращаться в ЛС или Jabber.

Оффлайн Sergey Vilgelm

  • Автор темы
  • Новичок
  • *
  • Сообщений: 8
    • Просмотр профиля
    • Личный
Re: Ищу программку для грабления страничек
« Ответ #5 : 06 Октября 2010, 13:54:27 »
3. Полнотекстовый поиск.
А может Google Desktop натравить на папку со скаченными страницами?
Можно и так, но чем нравиться ScrapBook  - все скачанные странички организуются в дерево документов

 

Страница сгенерирована за 0.015 секунд. Запросов: 20.