October 2020 screenshot showing 60 PB of usenet group data[7]
← ホームへ戻る

Usenetニュースグループの仕組みと歴史インターネット初期の掲示板文化

現代のSNSやオンラインフォーラムの先駆けとなったUsenet(ユーズネット)は、世界中のユーザーが特定のトピックについて議論し、情報を共有するための分散型ネットワークシステムです。Webブラウザが普及する以前、Usenetのニュースグループはインターネットで最も人気のあるサービスの一つであり、単なる会話の場にとどまらず、Linuxのような大規模な開発プロジェクトの基盤や、ファイルの配布拠点としても活用されてきました。

ニュースグループを利用するには、専用の「ニュースリーダー」と呼ばれるソフトウェアを使用します。機能面では現代の掲示板に似ていますが、技術的な構造は根本的に異なり、サーバー間でデータを同期させる分散型の仕組みを採用しているのが特徴です。

Key Facts

  • 分散型構造: NNTPプロトコルにより、サーバー間でデータが複製され、高い冗長性と保存性が確保されている。
  • 2つの主要形式: 主に議論のための「テキストグループ」と、ファイル転送用の「バイナリグループ」に分かれている。
  • 階層管理: 「Big 8」と呼ばれる主要なカテゴリ階層と、自由な作成が可能な「alt.*」階層が存在する。
  • 膨大なデータ量: 過去には60PB(ペタバイト)を超えるデータが蓄積されていた記録がある。

October 2020 screenshot showing 60 PB of usenet group data[7]

技術的な基盤と通信プロトコル

Usenetの通信を支えているのがNNTP(Network News Transfer Protocol)です。これはメールで使用されるSMTPと同様に、サーバー間およびクライアント・サーバー間の両方で通信を可能にするプロトコルです。この仕組みにより、あるサーバーに投稿された記事は接続された他のサーバーへ次々とコピーされ、ネットワーク全体に拡散します。このデータ冗長性のおかげで、一部のサーバーがダウンしても情報は失われにくく、堅牢なデータ保持が実現しています。

一般のユーザーは、コマンドラインではなくGUI(グラフィカルユーザーインターフェース)を備えたニュースリーダーを通じて、これらのサーバーにアクセスし、記事の閲覧や投稿(ポスト)を行います。

ニュースグループの種類と運用

テキストとバイナリの使い分け

ニュースグループは、扱うコンテンツによって大きく2つのタイプに分類されます。一つは数万文字程度の制限があるテキストグループで、主に議論や記事の投稿に利用されます。もう一つは、数MB単位のデータ転送を目的としたバイナリグループです。もともとUsenetはテキスト向けに設計されていたため、画像や動画などのバイナリデータを送るには、データをテキスト形式に変換する「Uuencode」や「Base64」、「yEnc」といったコーデックが必要でした。

また、大きなファイルを送る際は、ニュースリーダーがファイルを分割して投稿し、受信側で再び結合するという手法が取られています。これにより、現在では1日あたり数テラバイトものファイルがやり取りされています。

保存期間(リテンション)と管理

投稿された記事がサーバーに保持される期間をリテンション(Retention)と呼びます。この期間はサーバー管理者の判断に委ねられており、数週間で削除されるサーバーもあれば、数年以上にわたって保存し続けるサーバーもあります。特にバイナリグループでは、分割されたファイルの一部が欠落すると復元できないため、「Parchive (PAR)」という冗長化スキームを用いてデータの完全性を補完しています。

グループの階層構造(ハイエラルキー)

膨大な数のグループを整理するため、Usenetではドットで区切られた階層構造が採用されています。最も権威あるのが「Big 8」と呼ばれる主要階層です。1986年から87年にかけての「大改称(Great Renaming)」を経て整理されました。

主要なUsenet階層(Big 8)の一覧
階層名 主な内容
comp.* コンピュータ関連の技術的な議論
sci.* 科学的な主題に関する議論
rec.* レクリエーション、趣味、ゲームなど
soc.* 社会問題や社交に関する議論
talk.* 宗教や政治などの論争的な話題
news.* Usenet自体の運用や議論
misc.* 他のどこにも属さない雑多な話題
humanities.* 文学や哲学などの人文科学(1995年に追加)

自由な領域「alt.*」とその他の階層

Big 8の厳格な管理(作成には提案と投票が必要)に対する反発から生まれたのがalt.*(alternative)階層です。ここでは誰でも自由にグループを作成でき、レシピや性的な話題など、当時のBig 8では禁止されていたテーマも扱われました。この自由奔放な性質から、一部では「Anarchists, Lunatics and Terrorists」の略称であると冗談混じりに呼ばれたこともあります。

さらに、地域限定の階層(例:日本の「fj.*」、カナダの「can.*」)や、企業独自の階層(例:「microsoft.*」)など、多様なサブハイエラルキーが存在し、世界中の言語や文化に対応しています。

現代における活用と課題

現在、UsenetはBitTorrentに代わるファイル共有手段として利用され続けています。P2P(ピアツーピア)とは異なり、ユーザーは遠方の個人のマシンではなく、近接したローカルサーバーから高速にダウンロードできるため、効率的なデータ取得が可能です。

また、長期的なリテンションを活かして、データを暗号化してアップロードし、世界中のサーバーに分散して保存させる「uBackup(Usenetバックアップ)」という手法を用いるユーザーもいます。ただし、一度投稿したデータは管理者の制御を離れて拡散するため、プライバシーの確保には細心の注意が必要です。

Frequently Asked Questions

Usenetと一般的なWebフォーラムの違いは何ですか?

最大の違いはデータの保持方法です。Webフォーラムは通常、単一のサーバー(中央集権型)でデータを管理しますが、UsenetはNNTPを用いて複数のサーバー間でデータを同期・複製する分散型ネットワークであるため、高い冗長性を持っています。

バイナリグループでファイルをダウンロードする際の注意点は?

大きなファイルは分割して投稿されるため、一部のパーツが欠落するとファイルが完成しません。これを防ぐためにPAR(Parchive)ファイルを利用して、欠損データを修復するのが一般的です。

誰でも自由にニュースグループを作成できるのですか?

階層によって異なります。alt.* 階層では誰でも作成可能ですが、Big 8 階層でグループを新設するには、専用のグループで議論(RFD)を行い、管理ボードの承認を得るという厳格な手続きが必要です。

Usenetを利用してバックアップを取るメリットは?

世界中の多くのサーバーにデータがコピーされるため、特定のサービスが停止してもデータが失われにくいという点です。ただし、誰でもダウンロード可能なため、必ず強力な暗号化を行う必要があります。

モデレート(管理)付きグループとは何ですか?

投稿がすぐに公開されず、管理者が内容を確認して承認した後にのみ配信されるグループのことです。これにより、トピックから外れた投稿や不適切なコンテンツを制限することができます。

References

  1. Llorente, Rubén (1 November 2018). "The First Social Network". www.linux-magazine.com. Archived from the original on 1 November 2018. Retrieved 27 January 2025.
  2. Horton, Mark (24 November 2020). "Early Usenet Newsgroup Hierarchies History". www.livinginternet.com. Archived from the original on 27 February 2023. Retrieved 27 January 2025.
  3. Vaughan-Nichols, Steven (19 December 2023). "The rise and fall of Usenet: How the original social media platform came to be". www.zdnet.com. Archived from the original on 16 January 2025. Retrieved 27 January 2025.
  4. Feather, CDW (October 2006). Network News Transfer Protocol (NNTP). . :10.17487/RFC3977. 3977. Retrieved 3 June 2019.
  5. Emerson, Sandra L. (October 1983). "Usenet / A Bulletin Board for Unix Users". BYTE. pp. 219–236. Retrieved 31 January 2015.
  6. "List of Active Newsgroups". www.tech-insider.org. Archived from the original on 2025-03-17. Retrieved 2024-12-20.
  7. "Usenet storage is more than 60 petabytes (60000 terabytes)". binsearch.info. Retrieved October 20, 2020.{{}}: CS1 maint: deprecated archival service ()
  8. Gregersen, Erik; Hosch, William L. (2022-02-17). "newsgroup". . Archived from the original on 2023-04-28. Retrieved 2023-04-28.
  9. "Retention Increase to 2600 Days at NewsDemon". Newsdemon.com. 28 September 2015. Archived from the original on 23 April 2016. Retrieved April 10, 2016.
  10. "usenet backup (uBackup)". Wikihow.com. Archived from the original on February 25, 2020. Retrieved February 14, 2012.