Рост сети Internet и объема находящейся в ней информации происходит по экспоненциальному закону. Следовательно, полоса пропускания глобальных каналов и мощность вычислительных ресурсов, требуемых для их обслуживания, также возрастают согласно данному закону. Как укротить эту "стихию"?

Единственным методом обуздания подобного роста является использование репликации. Независимо от того, на каком уровне — национальном, региональном или корпоративном — находится информация, по мере роста Internet ее необходимо перемещать на ближние узлы. Не имеет смысла, скажем, передавать одну и ту же популярную Web-страницу из Австралии в Северную Америку миллион раз в день, используя весьма дорогостоящий международный канал связи. Должен быть способ сохранять эту информацию после ее однократной передачи по каналу. К счастью, такой способ существует.

На помощь приходит бесплатно распространяемый пакет Squid (в переводе с английского — кальмар), являющийся кэширующим сервером и прокси-сервером одновременно. Он работает под управлением UNIX и поддерживает несколько протоколов, включая HTTP, FTP, Gopher и SSL.

Протокол FTP считается одной из старейших служб Internet. Несмотря на то, что он может применяться для решения различных внутренних задач организации, в Internet часто встречаются "анонимные FTP-серверы", с помощью которых пользователи могут загружать файлы, не имея учетной записи на данном узле.

Через FTP-серверы может распространяться программное обеспечение, документация и т.д. Как правило, доступ к ним осуществляется поверх протокола HTTP. Основное преимущество такого подхода заключается в том, что пользователи могут легко просматривать дерево доступных каталогов, видеть размеры файлов и даты их обновления. При добавлении новых файлов нет необходимости создавать какой-либо код HTML — достаточно поместить их в заданной зоне узла.

Для организации анонимного FTP-сервера создайте учетную запись псевдопользователя ftp, задайте соответствующий начальный каталог и сконфигурируйте серверный демон ftpd. Поскольку анонимный FTP-серверобщедоступен, необходимо правильно его настроить, чтобы важные файлы случайно не оказались доступными внешнему миру.

Usenet представляет собой программную систему, созданную в 70-х гг. для распространения по всему миру небольших сообщений ("статей"). В действительности речь идет не о типе сети, а лишь о наборе протоколов, форматов файлов и способов связи между узлами. В Usenet имеется большое число "групп новостей", аналогичных доскам объявлений, которые поддерживаются некоторыми Web-узлами и интерактивными службами. В наши дни Usenet в большинстве случаев вытесняется Web-службами. Многие провайдеры даже не предлагают пользователям услуги Usenet, и новые пользователи часто не знают о подобной возможности.

В Usenet применяется "широковещательный" метод доставки. В таком случае центральный узел, занимающийся распространением новостей, отсутствует. Когда пользователь создает ("публикует") новую статью, она посылается на сервер новостей его провайдера. Сервер провайдера предлагает эту статью другим узлам. Всякий раз, когда статья поступает на новый сервер, она рассылается всем остальным серверам, с которыми установлены двусторонние отношения. В статье содержится список адресов, не позволяющий серверам предлагать статьи тем узлам, где они уже есть.