- Юзенет
-
Юзнет (англ. Usenet сокр. от User Network) — компьютерная сеть, используемая для общения и публикации файлов. Usenet состоит из ньюсгрупп, в которые пользователи могут посылать сообщения. Сообщения хранятся на серверах, которые обмениваются ими друг с другом. Usenet оказал большое влияние на развитие современной Веб-культуры, дав начало таким широко известным понятиям, как ники, смайлы, подпись, модераторы, троллинг, флуд, флейм, бан, спам.
Содержание
Введение
Usenet — одна из старейших сетей, широко используемых до сих пор. Она появилась в 1980 году — задолго до того, как широкая публика получила доступ ко Всемирной паутине WWW. Система была разработана в Университете Дьюк (англ. Duke University). В настоящее время практически весь Usenet-трафик передаётся по Интернету, а формат сообщений и очень похож на электронную почту. Однако, если электронная почта используется для общения «один на один», то Usenet действует по принципу «один для всех». Сообщения, которые пользователь публикует ("постит" англ. posts) в Usenet, организуются в тематические категории, называемые новостными группами ("ньюзгруппами" англ. newsgroups) или конференциями, которые организуются в иерархию, подобную структуре доменных имён. Например, группы
sci.math
иsci.physics
находятся внутри иерархииsci
(сокращение от англ. science — наука). С помощью приложений для работы с Usenet можно подписаться на любые доступные конференции.При отправке сообщения, оно доступно только на его сервере. Но каждый news-сервер обменивается сообщениями с несколькими соседними, и таким образом сообщение распространяется на каждом news-сервере Интернета. Таким образом, отправка сообщения инициируется отправителем, а не получателем.
Провайдеры и новостные серверы
Многие Интернет-провайдеры в числе прочих услуг предоставляют бесплатный доступ к новостным серверам. Однако, далеко не каждый из них способен предложить доступ ко всем новостным группам и их содержимому. Объёмы публикуемой информации в Usenet колоссальны (по некоторым данным порядка 3—5 терабайт в сутки). Их хранение и пересылка предполагают большие расходы. Именно поэтому доступ к большей части информации предоставляется за плату специализированными новостными серверами. Объёмы информации для загрузки/публикации, сроки её хранения (retention) и скорость передачи влияют на стоимость их услуг. Основной объём трафика приходится на иерархию «бинарных» групп
alt.binaries.*
. Именно они предназначены для публикации файлов, именно в них пользователи делятся фотографиями, музыкой, фильмами, играми и программами. Именно их содержание частично или полностью оказывается недоступным пользователям бесплатных сервисов. Важно заметить, что обмена файлами как такового в понимании peer-to-peer нет. Фактически пользователи публикуют файлы и текстовые сообщения наподобие общего, разделенного на тематики, ftp-сервера. Публикуют особым образом, со вспомогательными и сопутствующими файлами, что вызвано спецификой Usenet. В дискуссионных подгруппах, где они предусмотрены, можно оставить сообщение, в котором попросить других участников «выложить» какой-либо материал по данной теме. Но «обмена» нет, т. е. чтобы что-либо скачать — ни с кем делиться, набирать рейтинги и прочее не надо — в этом смысле Usenet образно похож на обычный ftp-сервер.Некоторые платные сервера предлагают 256-битное SSL шифрование соединения с клиентом пользователя (NNTPS), исключающее какую-либо возможность контроля за содержимым передаваемой информации со стороны интернет-провайдера и третьих лиц.
Несмотря на некоторые недостатки (платный доступ, срок жизни публикаций (retention) и пр.), Usenet даже в эру пиринговых сетей остается популярным способом публикации и загрузки файлов. Многие релизы начинают свое шествие по глобальной сети именно из новостных групп (появляясь затем в Torrent, IRC, WWW, eDonkey), а многие из-за своих внушительных объёмов остаются только в Usenet. Максимально высокая скорость доступа, отсутствие необходимости обмениваться и делиться, передавая данные после и во время загрузки другим пользователям, обсуждение выкладываемых файлов и общение на данную тему, высокая анонимность и безопасность, зачастую уникальность и редкость доступного материала — это то, что Usenet может противопоставить P2P.
Список некоторых серверов
Платные
- Giganews http://www.giganews.com — один из немногих провайдеров, предоставляющих защищенный SSL-доступ и максимальный на данный момент бинарный retention — 240 дней
- Usenext http://www.usenext.com — ~130 дней
- YabNews http://www.yabnews.nl — 100 дней
- UseNetServer http://www.usenetserver.com — 105 дней
- Astraweb http://www.news.astraweb.com — ~120 дней
- NewsDemon http://www.newsdemon.com — 110 дней
- Teranews http://www.teranews.com — ~90 дней
- …
Крупные Usenet провайдеры, «дилеры»
- Highwinds-Media http://www.highwinds.com — feed, ISP outsourcing, 75 дней (отсутствуют «uncensored»-группы (материалы для взрослых), работает abuse отдел)
- Giganews http://www.giganews.com — feed, ISP outsourcing, 240 дней (все группы)
- pronews.com http://pronews.com — feed, ISP outsourcing
- NNTPServer http://nntpserver.com — feed, ISP outsourcing, 90 дней (большинство групп присутствует, в т. ч. «uncensored»)
- …
Бесплатные
Обсуждение актуальных бесплатных бинарных серверов идет в группах [1] и [2], которые можно найти на большей части news-серверов.
- Google Groups (http://groups.google.com) — позволяет работать только с текстовыми группами с помощью web-интерфейса.
- http://www.sforum.nl/nntp/show.php?l=en
- http://www.binaryfeeds.com
- …
Ссылки на сервера, предоставляющие доступ к текстовым новостным группам:
- http://www.dmoz.org/Computers/Usenet/Public_News_Servers/
- http://services.triceron.com/usenet/srvlist.php (постоянно обновляется; рейтинг, указано число доступных групп)
- http://news.aioe.org/ (сервер текстовых новостей, доступ в т. ч. по NNTPS)
Структура конференций
Основные иерархии конференций Usenet составляют «Большую Восьмёрку»:
comp.*
: обсуждение тем, связанных с компьютерами (comp.software
,comp.sys.amiga
);misc.*
: разнообразные темы (misc.education
,misc.forsale
,misc.kids
);news.*
: новости Usenet-a (news.groups
,news.admin
);rec.*
: развлечения и отдых (rec.music
,rec.arts.movies
);sci.*
: научные дискуссии (sci.psychology
,sci.research
);soc.*
: социальные темы (soc.college.org
,soc.culture.african
);talk.*
: разговоры, в том числе на «горячие» темы (talk.religion
,talk.politics
);humanities.*
: искусство, литература, философия (humanities.classics
,humanities.design.misc
).
Иерархия
alt.*
не подвластна процедурам, контролирующим ньюсгруппы «Большой Восьмёрки», и, как результат, менее организована. Но группы могут быть более специализированы: например, в «Большой Восьмёрке» может быть группа, посвящённая детской литературе, а вalt.*
— группа об определённом авторе. Бинарные файлы публикуются вalt.binaries.*
, что делает иерархиюalt
самой большой по объёму данных.Существуют иерархии предназначенные для определённого региона (
japan.*
), или обсуждения продуктов определённой компании (microsoft.*
).Иерархия
эхоконференции сети Фидонет на русском языке.
Загрузка и публикация файлов в Usenet
Сервера Usenet дублируют (частично или полностью) информацию хранящуюся друг у друга, чтобы их пользователи могли общаться между собой. Однако, работают они не синхронно. Каждый из них имеет свои ограничения на объём загружаемой информации с других серверов и/или сроки её хранения (англ. retention rate). Причем администрация сервера сама определяет, какие группы и в каком объёме синхронизовать. Каждый сервис стремится предоставить максимум своим пользователям. Платные серверы негласно приветствуют практически любой контент, в том числе нарушающий авторские права, отказываясь вести логи (протоколировать действия своих пользователей) и не имеют ограничений на публикацию файлов.
Среди факторов, осложняющих публикацию в Usenet, есть и ограничение на объём одной публикации (кол-во строк / мегабайт). На каждой серверной ферме администрация устанавливает свой лимит. Поэтому перед публикацией большие файлы, например, фильмы или образы дисков, нужно разбивать на части не более 50-ти мегабайт. Это — необходимая рекомендация и правило хорошего тона. Небольшие файлы лучше распространяются между серверами, сохраняется их целостность.
На случай возможной утраты, повреждения отдельных томов архивов или файлов, используются PAR2-файлы (англ. parchive, parity file), содержащие необходимые данные для контроля и коррекции ошибок. С их помощью файлы легко восстанавливаются и дополняются при частичной утрате. Обычно для работы с PAR2 используют утилиту QuickPar.
Все файлы, имеющиеся в Юзнете, будь то музыка, изображения, видео, программное обеспечение, образы дисков, игры и прочие, представлены в текстовой кодировкой и прикреплены к сообщению, точно так же, как и в электронной почте.
Большой популярностью пользуется кодировка yEnc, как наиболее компактная.
Некоторые тематические группы для поиска и публикации файлов
Фильмы и сериалы
- alt.binaries.dvd.*
- alt.binaries.tv
- alt.binaries.multimedia.*
- alt.binaries.ratdvd.*
- alt.binaries.movies.*
- alt.binaries.vcd.*
- alt.binaries.multimedia.anime (аниме-сообщество имеет несколько групп, подробнее на www.animeusenet.org, обсуждение в alt.binaries.multimedia.anime.d)
- alt.binaries.hdtv
- …
Материалы для взрослых (uncensored-, adult-группы)
- alt.binaries.pictures.*
- alt.binaries.erotica.*
- alt.binaries.ijsklontje (знаменитый форум www.ijsklontje.nl был закрыт осенью 2007, группа используется для репостинга и неформально продолжает развитие)
- …
Музыка
- alt.binaries.music.*
- alt.binaries.sounds.*
- …
Программы и игры
- alt.binaries.boneless
- alt.binaries.comp
- alt.binaries.cd.image
- alt.binaries.warez.ibm-pc (одна из старейших и культовых варезных ньюсгрупп)
- alt.binaries.warez.*
- alt.binaries.cracks.*
- alt.binaries.cd.image.*
- alt.binaries.x
- alt.binaries.b4e
- alt.binaries.mac.* (для Mac OSX)
- alt.binaries.games
- alt.binaries.emulators
- …
Книги
- alt.binaries.e-book.*
- alt.binaries.sounds.audiobooks.*
- alt.binaries.sounds.mp3.audiobooks.*
- …
Картинки
- alt.binaries.pictures.*
- …
Шрифты
- alt.binaries.fonts (обсуждение, запросы на конкретные шрифты, помощь в опознании шрифта)
- alt.binaries.fonts.floods
Обсуждение публикаций
Подгруппа для обсуждения публикаций, голосование и общение (существует не у всех бинарных групп):
- alt.binaries.*.d
Программы
Популярные клиенты
Для Windows
- NewsLeecher — http://www.newsleecher.com
- NewsBin — http://www.newsbin.com
- Usenet Explorer — http://www.netwu.com/ue
- News Rover — http://www.newsrover.com
- UltraLeecher — http://www.ultraleecher.com
- Forte Agent — http://www.forteinc.com
- NZB-O-Matic — http://nzb.wordtgek.nl
- Xnews — http://xnews.newsguy.com
- Outlook — не поддерживает NZB-файлы и yEnc кодировку
Для Mac OS X
- http://www.panic.com/unison
Кроссплатформенные
- Pan — http://pan.rebelbase.com
- tin — http://www.tin.org
- http://www.slrn.org
- Emacs
- KNode — в составе http://sourceforge.net/projects/nzbget/
Вспомогательные программы
Для Windows
- PowerPost-A&A — http://powerpost.cjb.net — для публикации файлов
- QuickPar — http://www.quickpar.org.uk — создание PAR2, разбиение файлов на части и сбор
- SmartPAR — http://parchive.sourceforge.net — аналогичная программа
- HJSplit — http://www.freebyte.com/hjsplit — разбиение файлов на части
Для Mac OS X
- MacPAR deLuxe — http://www.xs4all.nl/%7Egp/MacPAR_deLuxe — работа с .par и .par2
- Split&Concat — http://www.xs4all.nl/%7Eloekjehe/Split&Concat/ — аналогичная программа
Для GNU/Linux
- PyPar2 — http://pypar2.silent-blade.org — работа с .par2
Популярные серверы
- inn — наиболее распространенный Usenet-сервер
- leafnode — кеширующий Usenet-сервер без возможности создания собственных групп новостей
- s-news
- suck
Поисковики
Поиск файлов в Usenet (создание списков в формате .nzb для их загрузки с помощью клиентских программ):
- newzleech — http://www.newzleech.com
- alt.binaries.nl — http://alt.binaries.nl
- yabse — http://www.yabsearch.nl
- binsearch — http://www.binsearch.info
- nzbindex — http://nzbindex.nl
- bintube — http://www.bintube.com
- aeton — http://search.aeton.biz
- newzbin — http://www.newzbin.com — основатели формата NZB, поисковик-каталогизатор
- nzbnova — http://www.nzbnova.com
- nzbfile — http://www.nzbfile.com
- newzsearch — http://newzsearch.com
- nzb.to — http://nzb.to
- eweka — http://usenetsearch.eweka.nl
- AnimeUsenet — http://www.animeusenet.org — аниме в Usenet
- OMNI Post DB — http://postdb.omni-forums.com
Удобный поиск по нидерландскому юзнет-сообществу пользователей (подробности — http://www.binaries4all.com):
- FTD — http://www.ftd.nu
Поиск информации в текстовых сообщениях
См. также
- Дополнительная информация http://www.binaries4all.com (англ.)
- Дополнительная информация http://www.nntpeng.willemijns.com (англ.)
- Эхоконференции Фидонета
Wikimedia Foundation. 2010.