Понад 2 млн найстаріших постів в інтернеті виклали у відкритий доступ

За десятиліття до Twitter Twitter, форумів Reddit або груп у Facebook існував Usenet: рання інтернет-система

дискусій, де можна було починати таприєднуватися до обговорень, як і сьогодні працюють пости з коментарями. Запущений у 1980 році, Usenet – це дітище двох студентів Університету Дьюка, які хотіли спілкуватися між децентралізованими локальними серверами – і цей проект діє досі.

У Usenet люди говорять про все від нанотехнологійдо мильних опер, вина та НЛО. Йозеф Ярощак, системний архітектор з Онтаріо, вперше познайомився з Usenet у 2000 році, коли знайшов постійну роботу в Канаді завдяки розміщенню там вакансії.

Цього тижня Ярощак завантажив деякі знайстаріших повідомлень Usenet, доступних в Інтернеті. Близько 2,1 мільйона повідомлень з архіву UTZOO NetNews Генрі Спенсера за період з лютого 1981 по червень 1991 зібрані в архіві Usenet і доступні будь-кому.

Сайт Usenet Archive - це частина іншого, кудибільш масштабного проекту, який запустив Джозеф Ярощак. Він використовується також для зберігання постів сучасних незалежних інтернет-проектів, не пов'язаних з корпораціями на кшталт Google. Потенційно він може зберігати близько мільярда записів. В даний час він архівує 317 мільйонів повідомлень в 10 000 унікальних груп новин Usenet - і, за оцінками Ярощак, в кінцевому підсумку в ньому буде зберігатися близько 1 мільярда повідомлень.

Бесіда про літературу кіберпанку, 1987 рік

© usenetarchives.com

Генрі Спенсер з Університету Торонто, факультетзоології, зберігав архіви груп на 141 магнітній стрічці. «Стрічки UTZOO-Wiseman Usenet — це, по суті, найраніші доступні обговорення, розміщені в інтернеті людьми, які працюють у різних університетах, які вже були підключені до інтернету», — пояснив Ярощак в інтерв'ю для Vice.

Спенсеру і декільком колегам вдалося перенестидані з магнітної стрічки в формат .TAR (Tape ARchive), і Ярощак, який багато років працював архиватором Usenet, перетворив ці стрічки в базу даних PostgreSQL з можливістю пошуку, яку він потім завантажив в архіви Usenet. Попутно, крім парсеров для архіву магнітних стрічок Utzoo, він створив конвертери на PHP, JavaScript, Java і Python і зробив їх доступними на Github в якості ресурсів з відкритим вихідним кодом, які міг використати будь-хто.

З груп Utzoo він завантажив майже 26,3 млн повідомлень і їх кількість продовжує зростати.

«Ця скарбниця старих постів повинна бутидоступна майбутнім поколінням », - робить висновок Ярощак. «Ці сотні мільйонів повідомлень може бути цікаво читати, але, що більш важливо, вони проливають світло на розумовий процес інтернет-спільноти на ранніх етапах самого інтернету. Це величезна кількість важливої ​​історичної та дослідницького контенту. Було б зневагою з мого боку і з боку інших архівістів, упустити можливість повернути ці старі текстові групи Usenet з архівів у відкритий доступ ».

Читати також

У чорних дірах можуть бути всесвіти. Розповідаємо про нове відкриття

На 3 день хвороби більшість хворих COVID-19 втрачають нюх і часто страждають нежиттю

Вчені з'ясували, чому діти є найнебезпечнішими переносниками COVID-19