Комментарии 13
TPB делают / делали именно такую шнягу.
вы не могли бы подсказать название этой шняги? я слышал про них только о трекере и о полит\социальной деятельности
К сожалению названия не помню, да и не уверен что оно в том обзоре было, основная цель там была — это что нельзя конкретного пользователя привлечь за хранение контрафакта, так как у правообладателя, к примеру, есть права на полную композицию, но ее можно разбить на составляющие на которые по отдельности прав уже нет, а файл «собирается» из кусков только в момент использования которые сливаются со всего света.
цитирую
Файловая система Google File System (GFS)
Официальная статья: The Google File System
Эта файловая система проектировалась под миллионы файлов, размером от 100 мб. Ожидались и многогигабайтные файлы. Файлы меньшего размера тоже планировалось поддерживать, но оптимизация для работы с ними не предусматривалась.
Основная идея такая: каждый файл дробится на куски, каждый кусок в нескольких копиях содержится на разных машинах. Размер такого куска — 64 мегабайта и это довольно большой размер для подобных систем. Но в ходе размышлений гугловцы пришли именно к этой цифре. Один файл в среднем хранится в трех копиях, но это количество можно настраивать. По ходу статьи несколько раз упоминается, что они реализовали не POSIX API.
Машины, на которых лежат куски файлов, называются чанксерверы (chunkserver)...
Файловая система Google File System (GFS)
Официальная статья: The Google File System
Эта файловая система проектировалась под миллионы файлов, размером от 100 мб. Ожидались и многогигабайтные файлы. Файлы меньшего размера тоже планировалось поддерживать, но оптимизация для работы с ними не предусматривалась.
Основная идея такая: каждый файл дробится на куски, каждый кусок в нескольких копиях содержится на разных машинах. Размер такого куска — 64 мегабайта и это довольно большой размер для подобных систем. Но в ходе размышлений гугловцы пришли именно к этой цифре. Один файл в среднем хранится в трех копиях, но это количество можно настраивать. По ходу статьи несколько раз упоминается, что они реализовали не POSIX API.
Машины, на которых лежат куски файлов, называются чанксерверы (chunkserver)...
НЛО прилетело и опубликовало эту надпись здесь
Lustre?
GoogleFS. Данные хранятся в трех экземплярах в различных дата-центрах. Если я не ошибаюсь, то за все время работы они потеряли только 64 мбайта информации.
Похоже, вы изобрели это: habrahabr.ru/blogs/the_future_is_here/58035/
Поздравляю, ты изобрел Гластер! Хайлоад, 2008 год.
Такая система имеет право на жизнь хотя бы потому, что она уже есть и называется она Wuala
НЛО прилетело и опубликовало эту надпись здесь
OFFSystem (Owner-Free File System) — распределённая файловая система, в которой кусочки файлов случайным образом хранятся на разных компьютерах, и никто не имеет определённый файл целиком. Система была создана хакерской группой The Big Hack, которая занимается борьбой с цифровым копирайтом. При использовании OFFSystem на компьютерах участников сети хранятся не файлы с нелегальным контентом, а лишь абстрактные блоки данных, которые не могут считаться объектами, охраняемыми авторским правом. Получить полный файл можно только имея специальную ссылку. Суть подхода в том, что любой файл, защищенный авторскими правами, является набором битов и может быть получен из другого набора битов, на который копирайт уже не распространяется. Например: двоичный файл можно представить в виде числа; если кто-то имеет права на число 12, то числа 5 и 7 мы можем использовать свободно.
А работает это так: каждый закачиваемый файл разбивается на блоки по 128 килобайт, каждому из которых присваивается идентификатор. После этого блоки определённым образом распределяются по узлам сети и генерируется так называемый OFF-URL, который впоследствии используется для сборки оригинального файла из блоков. При этом сам контент не передается прямо между участниками, его получение происходит только на локальной машине пользователя.
Для использования системы нужно установить клиент, доступный для Windows, Linux и Mac OS X.
offsystem.sourceforge.net/
А работает это так: каждый закачиваемый файл разбивается на блоки по 128 килобайт, каждому из которых присваивается идентификатор. После этого блоки определённым образом распределяются по узлам сети и генерируется так называемый OFF-URL, который впоследствии используется для сборки оригинального файла из блоков. При этом сам контент не передается прямо между участниками, его получение происходит только на локальной машине пользователя.
Для использования системы нужно установить клиент, доступный для Windows, Linux и Mac OS X.
offsystem.sourceforge.net/
Зарегистрируйтесь на Хабре, чтобы оставить комментарий
Безопасная распределенная файловая система