Клуб любителей ASPLinux

В какой-то степени да - аналог, а входящий трафик WWWOffle может вообще радикально "уменьшить до нуля", поскольку с точки зрения логической организации он сохраняет все просмотренные ранее страницы не как объекты кеша, а как локальный контент, полностью дублирующий то, что было загружено из Интернет. Т.е. фактически в локальной сети максимальную пользу от эксплуатации WWWOffle в качестве локального спула веб-контента можно получить в тех случаях, когда, например, Вам нужно на некоторое время закрыть шлюзовой выход в инет, но при этом очень желательно оставить пользователям возможность посещать все наиболее востребованные в силу специфики их "рабочего процесса" интернет-страницы. В принципе, настроив WWWOffle в связке с MnoGoSearch, Вы даже можете продублировать большую часть функций традиционных Google, Yandex и прочих, так что пользователи смогут искать нужную им информацию в таком вот "виртуальном интернет", формально запрашивая даные за пределами интернет-шлюза, но фактически получая их из кеша. Таким образом, шлюз может периодически подновлять в режиме "онлайн" действительно нужные для работы пользователей страницы и через WWWOffle уже в режиме "оффлайн" отдавать их клиентам по запросу, полностью отрезав доступ к реальному интернет из локалки (и обеспечив при этом беспрецедентный уровень безопасности).
Хотя, разумеется, WWWOffle может использоваться и в качестве обычного кеширующего прокси (например, такого, как SQUID, например), но при этом не будет задействована львиная доля его функциональности, связанной с возможностью организации виртуального (локального) интернет.
Так что если Вам нужно сделать частичку внешнего мира полноценной составляющей интранет (при этом, разумеется, не обязательно действительно полностью перекрывать все выходы в интернет - нужно только очень чётко определить список из множества доступных клиентам доменов, так что сами страницы процентов на 90 будут подгружаться из кеша, хранящегося на шлюзе, а данные заполнения всевозможных форм, любая постоянно обновляемая информация (текущие курсы валют, например) - будут отправляться и приниматься уже через соединение с реальным удалённым сервером), то WWWOffle - это на все 100% Ваш выбор. Если нужно при проведении долговременной профилактики на шлюзе предоставлять клиентам доступ к интернет-ресурсам, наиболее востребованным ими (для осуществления трудовой деятельности, а не для каких-либо иных целей), пусть этот доступ будет и не совсем полноценным (но это всё же лучше, чем ничего) и даже вовсе виртуальным ;-), то - опять же - WWWOffle - Ваш безальтернативный выбор.
А вот если нужен просто кеширующий прокси для выхода через него в интернет - да, безусловно можно и WWWOffle использовать, - но при этом следует учитывать то, что Вы лишитесь всей сопутствующей SQUID'у обширной инфраструктуры, т.е., например, Вы уже не сможете воспользоваться утилитами подсчёта трафика, анализирующими логи SQUID, функциями антивирусного сканирования трафика, встроенными во многие расширенные версии SQUID, а также реализуемыми через использование специальных редиректоров (хотя можно, конечно, воспользоваться HAVP, для которого я недавно написал HOWTO по установке/использованию (см. в соотв. раздел этого сайта)). Опять же, насколько я знаю, WWWOffle не поддерживает протокол взаимодействия кеширующих прокси ICP, позволяющий связать их в иерархическую структуру, способную порой многократно сократить входящий трафик для сложных многоуровневых сетей (со множеством маршрутизаторов, на каждом из которых можно и нужно поставить SQUID). Вообще существует немало полезных программ, рассчитанных на совместное со SQUID использование, так что если Вам действительно ни одна из них не нужна, да и организовывать взаимодействие кешей на маршрутизаторах сети по протоколу ICP Вам совершенно ни к чему (в виду того, что у Вас всего один маршрутизатор), то Вы смело можете заменить SQUID на WWWOffle, иначе - стоит подумать над тем, есть ли какая-либо необходимость в том, чтобы хранить на шлюзе 2 параллельных кеша, вместе создающих повышенную (пусть и не пропорционально количеству кешей) нагрузку на жёсткий диск, при использовании WWWOffle в связке со SQUID или же вполне можно обойтись одним SQUID, который, в общем, и так довольно эффективно справляется с характерными для него задачами.

Вот ссылка на статью о WWWOffle, в которой, я надеюсь, Вы сможете найти ответы на все интересующие Вас вопросы, поскольку они рассмотрены там достаточно подробно:
http://privoxy.asplinux.net/doc/articles/wwwoffle_note.html
А man'ы и довольно толковую документацию, в том числе на русском языке (вообще WWWOffle с Великим и Могучим определённо дружит), Вы найдёте в составе RPM-пакета.

---

Эй, оператор-астроном,
Нет звёзд и звёздных глаз -
Есть плац, пивная, гастроном
И горы из колбас!
Марк Мерман, "Никто кино так не снимал, как Лени Риффеншталь"

Разумеется, можно , а то для чего же этот форум существует :-?(наоборот, мне самому уже изрядно надоело одни монологи читать)!

---

Эй, оператор-астроном,
Нет звёзд и звёздных глаз -
Есть плац, пивная, гастроном
И горы из колбас!
Марк Мерман, "Никто кино так не снимал, как Лени Риффеншталь"

2 Goga777
Я конечно особо не мастак, но мог бы посоветовать попробовать установить через rpm
#rpm -ivh .rpm
или ну худой конец
#rpm -ivh -nodeps .rpm
А еще лучше - сконстроль собственную rpmку или поставь прогу из архива "с официального сайта: http://gedanken.demon.co.uk/. Размер тарболла с исходниками составляет вполне приемлемые даже для выкачивания по модему 990Кб (версия 2.8)"
Я как раз отсюда и ставил. Версия правда чуть постарше, но да не страшно, через ./C-M-M I.

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

А кстати с трансмитом все в норме, да и сейчас повторно на страницу ответа зашел резко.

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Здраствуйте. Рад, что кому то не лень было разбираться в моей бредятине =)
1) ipup.local и ipdown.local в каталоге /etc/ppp создал, написал в них что полагается)
2) из kppp настройки убрал - теперь походу они не пригодятся.
3) Номера портов я не менял, но

[root@localhost ~]# wwwoffle -config -c /etc/wwwoffle/wwwoffle.conf
wwwoffle[3290] Warning: Failed to connect socket to 'localhost' port '8081' [Connection refused].
wwwoffle[3290] Fatal: Cannot open connection to wwwoffle server localhost port 8081.

ставил другие порты - то же самое. Может просто надо было другие пробовать.
4) [root@localhost ~]# service wwwoffled start
wwwoffled: unrecognized service
Что навело меня на мысль, что он или запущен, или не запустится из-за того, что я его как нибудь по-кривому постаавил. Но в kdeшной process table я его не нашел. Правда, подумал, что сервисы пишутся куда нибудь еще. Проверить не смог.
5) Размер папки с кэшем 1,6 метра. Сдается мне - так было и сначала.
6) В конфиге больше ничего не менял, кроме как запретил кэш картинок за ненадобностью.
7) И самое дикое - я никак не могу понять, запущен он или нет))
Содержание etc/hosts
127.0.0.1 localhost.localdomain localhost
Пока это все достижения.

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Re_2_9A4172:
А вот и собственно автор статьи, вот уж никак не ожидал что мне доведётся хоть когда-нибудь пересечься с 9A4172 на форуме!

Нет, боюсь, там проблема посерьёзней. На самом деле, судя по тому, что service wwwoffled start выдаёт "unrecognized service", wwwoffled у Toper_Harley и в самом деле нет. Как вообще-то такое могло получиться, если он устанавливал wwwoffle из rpm-пакета - ума не приложу. Ну разве что была допущена опечатка при наборе команды service... Иначе я этого объяснить не могу. Сомнительно, что хотя бы в принципе возможно в полубессознательном состоянии ввести что-то типа: su -c "rm -f /etc/init.d/wwwoffled", а потом искренне удивляться: дескать, "а чего это у меня wwwoffle не работает".

Re_2_Toper_Harley:

Кстати, что самое интересное, оказывается, что вполне правомерен и обратный вариант: оказывается wwwoffle можно указать, чтобы при переключении в режим "онлайн" он заодно устанавливал соединение с провайдером (например, вызывал [/b]ifup ppp0[/b]), и при при переходе из "онлайн" в "оффлайн" - заодно выполнял сброс соединения (например, командой ifdown ppp0)

Ну... не знаю даже. Вполне возможно, что KPPP вызывает PPPD для установления соединения с провайдером после дозвона таким образом, что содержимое ip(up|down).local вообще не используется (например, вместо них исполняются скрипты под условными кодовыми наименованиями "при соединении" и "при разъединении"). Вообще рекомендую настроить интернет-соединение "поднятием" настоящего сетевого интерфейса ppp0 (ifup ppp0/ifdown ppp0), о чём подробно написано в официальном FAQ на сайте community.asplinux.ru (ссылку, если хотите, поищу у себя)

Вот это действительно ОЧЕНЬ странно и объяснить я сей казус просто не могу. Скажите, а у Вас в каталоге /etc/init.d вообще есть файл wwwoffled? Если есть, попробуйте выполнить: chmod u+x /etc/init.d/wwwoffled; /etc/init.d/wwwoffled start и дайте обязательно приведите здесь полный вывод этих двух команд (первая делает файл /etc/init.d/wwwoffled исполняемым, если он таковым не был, а вторая - прямой вызов сервиса wwwoffled (вообще команду service по историчяеским причинам (поскольку на самом деле сервисы хранятся в каталоге /etc/rc.d/init.d, а /etc/init.d - это всего лишь сиволическая ссылка на него) используют только для того, чтобы полное имя каталога не писать, хотя для /etc/init.d совсем небольшая экономия механического ресурса клавиатуры )).

Так посмотрите же, есть всё-таки в "псевдографическом" окошке программы ntsysv сервис wwwoffled и отмечен ли он "галочкой". Если есть и отмечен, то wwwoffled у Вас при старте должен загружаться, если есть и не отмечен, то надо поставить отметку (наведите стрелками клаиатуры курсор на wwwoffled и поставьте отметку "пробелом"). А вот если его там вообще нет... - ну можно, конечно, попробовать в ручную выполнить chkconfig --add wwwoffled; chkconfig --level 35 wwwoffled on, но сдаётся мне, что это Вам не поможет.

В общем, как говорится, для начала доложите обстановку, а там уже будем принимать решение по обстоятельствам...

---

Эй, оператор-астроном,
Нет звёзд и звёздных глаз -
Есть плац, пивная, гастроном
И горы из колбас!
Марк Мерман, "Никто кино так не снимал, как Лени Риффеншталь"

Переставил
[root@localhost ~]# /sbin/service wwwoffled start
Starting wwwoffled: [ ОК ]
просто первый раз я хоть и свалял rpm-ку, но ставил из тарбола. Кривизна (как рук, так и установки) - как следствие.
Эээ... но вопросы все равно будут )) Только чуть позже.

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Здраствовать всем модераторам этого форума, да и всем линуксоидам тоже!
Вопрос такой:
The full pathname of the top level cache directory (spool directory)
# (default=/var/spool/wwwoffle....)
А там у меня почему то ее нету. Хотя все запускается-работает...
Я так понял за все то время, прошедшее с момента, как я ее переставил кэша так и не накопилось... Ну да не страшно. Теперь сам вопрос: обойдется ли все это дело тем, что нужно просто создать по адресу папку с таким названием. Но там помнится была куча вложенных... Или просто в конфиге прописать другой адрес?

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

wwwoffle ведет лог работы, находится он в /var/log/wwwoffled. Можно запустить его в debug-режиме (я уже, кажется, писал об этом): /usr/sbin/wwwoffled -d 6 По результатам будет видно, кэширует ли wwwoffle что-нибудь. Если нет - пишите, попробуем разобраться

Да, походу это проливает свет...

[root@localhost ~]# /usr/sbin/wwwoffled -d 6 
wwwoffled[4121] 1135339474: Important: WWWOFFLE Demon Version 2.9-beta (with zlib,without ipv6) started. 
wwwoffled[4121] 1135339474: Information: WWWOFFLE Read Configuration File '/etc/wwwoffle/wwwoffle.conf'. 
wwwoffled[4121] 1135339474: Information: Running with uid=101, gid=102. 
wwwoffled[4121] 1135339474: Warning: Failed to bind server socket to '0.0.0.0' port '8080' [Address already in use]. 
wwwoffled[4121] 1135339474: Fatal: Cannot create HTTP server socket. 

Я конечно анализирую это, но мнение профи хотелось бы услышать...

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Стартовый сервис запускается нормально.
Предложенная команда не выводит ничего т. е.

[root@localhost ~]# netstat - na | grep 8080 
[root@localhost ~]#  

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Goga777

В точности то, что вы хотите с помощью WWWOffle сделать вряд ли можно, но можно попробовать поэкспериментировать с настройками секции OnlineOptions (посмотрите комментарии в конфиге - больше информации вы найдете только в исходниках ).
Можно также включить кэш браузера и соответствующим образом его (браузер) настроить. С этой точки зрения рекомендую Opera и Konqueror (особенно первый).
Оба этих способа, естественно, можно применять одновременно.
А собственно, чем вам не нравится переключение режимов online-offline? Если вы находитесь в режиме offline, то контент будет браться из кэша, но если нажать F5, страница будет поставлена в очередь закачки; позднее (или сразу же) все из очереди закачки можно загрузить командой fetch.
Или вы хотите использовать WWWOffle на выделенке для экономии трафика? Из собственного опыта замечено, что на достаточно быстром канале WWWOffle сильно тормозит и грузит процессор (да-да, у меня уже выделенка, скорость - до 1 Мбит/с ).

Toper_Harley:
Странно все это... Попробуйте что-ли поменять номер порта wwwoffle на 8008, например. Что будет?
И приведите здесь, пожалуйста, содержимое секции StartUp wwwoffle.conf, а также все параметры, которые вы поменяли в конфиге.

То есть, последний пример я зря...

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Получилось вот это:

[root@localhost data]# killall wwwoffled
[root@localhost data]# wwwoffled -d 6
wwwoffled[4999] 1135514560: Important: WWWOFFLE Demon Version 2.9-beta (with zlib,without ipv6) started.
wwwoffled[4999] 1135514560: Information: WWWOFFLE Read Configuration File '/etc/wwwoffle/wwwoffle.conf'.
wwwoffled[4999] 1135514560: Information: Running with uid=101, gid=102.

По нажатию ctrl+c

wwwoffled[4999] Timestamp: Sun Dec 25 15:44:22 2005 
wwwoffled[4999] 1135514662: Important: Exit signalled. 
wwwoffled[4999] 1135514662: Important: Exiting. 
[root@localhost data]# 

Походу на самом деле я запускаю его дважды...
Первый раз при самой загрузке системы а вот когда второй? И как от этого избавиться?

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Ясно... То есть тем самым мы пришли к выводу, что сервис работает, стартуя при загрузке системы и при подключении к инету переходит в режим онлайн. Вобщем все хорошо... Но тогда почему кэш не прибавляется? По-моему конфиг по умолчанию предусматривает подгрузку каждой посещенной страницы в кэш?

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Написал все это в опере. В этот день все работало - накопилось 25 метров кэша. На следующий день при попытке зайти на гугль (на все) появляется

WWWOFFLE Ошибка удаленного хоста
Ваш запрос URL
http://www.google.com/
потерпел неудачу потому, что
Cannot open the HTTP connection to www.google.com port 80; [Name Lookup Non-Authoritative Answer Host not found].
В первый раз такое тоже было. А что я сделал тогда - на помню)) Помню, потом в нете лазил... В мозиле, который я через прокси не настраивал - все отображается.
Подскажите, в чем ошибаюсь:
1 сервис запускается при старте системы
2 при установке подключения переходит в -online
3 порты, с которыми работаЛо
http-port = 8008
wwwoffle-port = 8081
Мне пока просто нужно чтобы wwwoffle кэшировал любую посещенную страницу.

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

Спасибо за все предоставленные средства наблюдения. Все таки смог поймать сие безобразие - там с режимами offline-online трабл был. Счас все исправил. Контент пополняется.... )). Только вот если использовать оперскую качалку она не показывает размер закачиваемого файла и соответственно приблизительное время завершения. Как то непривычно))

---

Et non intremuit medulla mea -
И да не устрашился мой разум...

начал копаться в настройках, пока результатов нет.

включен кеш в Опере 100 мегабайт, Но все равно , при повторной загрузке одной и той же странички она - страничка почему-то грузится с инета, а не из кеша, хотя 5 минут назад я эту страничку грузил уже.

то, что надо вручную включать выключать эти режимы - а какой кстати, самый быстрый способ для этого ?
(я думаю, что через http://localhost:8080/control/)

дык команду fetch тоже надо давать вручную. Почему бы после F5 wwwoffle взять да и загрузить самому страничку , не спрашивая ни у кого разрешения ?

у меня gprs + спутниковый интернет. Давайте рассмотрим вариант - только gprs. Я хочу на яндексе что-то поискать. Набираю yandex.ru - пусть страничка грузится из кеша недельной давности - если надо я ее сам обновлю через F5. Итак, страничка загрузилась из кеша - набираю искомое слово, Энтер, пошел запрос на яндекс - уже в онлайне. Вот что я хочу....

кстати, вопрос - а какую прогу под линукс вы можете порекомендовать для мониторинга сетевого входящего и исходящего трафика. Чтобы можно было видеть в динамике скорость, трафик в виде графиков
вот здесь - скриншот проги netmedic под винды http://www.goodweb.ru/netmedic.htm#throughput
очень похожее я хотел бы и под линуксом иметь. Пока попробовал xosview - не понравилось как она графики рисует. Кроме того, она ошибочно показывает трафик между wwwoffle и Оперой - а зачем мне это надо ?

---

Удачи

Во)) Это точно. Может мы и слишком стали избалованы и не отличаемся аскетизмом, но с маленькой прозрачной гуишкой (а еще лучше панелью в браузер), с кнопками наиболее часто употребляемых команд, было бы имхо гораздо лучше.

---

Et non intremuit medulla mea -
И да не устрашился мой разум...