Хабр Курсы для всех
РЕКЛАМА
Практикум, Хекслет, SkyPro, авторские курсы — собрали всех и попросили скидки. Осталось выбрать!
Хабр доступен 24/7 благодаря поддержке друзей
Комментарии 257
Классное дело!
Приеду домой — скачаю и поставлю на раздачу.
Приеду домой — скачаю и поставлю на раздачу.
Кстати, еще по ситуации с Либрусеком думал о неком универсальном каталоге торрентов… По аналогии с библиотечным. Т/е карточка (файл) содержащая описание, магнет-ссылку и некий уникальный код сродни библиотечному классификатору.
Потом просто мозга не хватило додумать до конца (или просто мысль была глупая)
Потом просто мозга не хватило додумать до конца (или просто мысль была глупая)
Этим рутрекер и занимается.
Интересно, есть ли смысл интегрировать данные действия для поддержания актуальной распределённой базы в известный торрент-клиент (менеджер закачек)? Чтобы юзеры тупо включали одной опцией? Ещё интересно: это легально?
К сожалению, клиент пока не кроссплатформенный, а только для винды. Но онпочти опенсорсный, поэтому если есть желающие внести в свой вклад, пишите.
К сожалению, клиент пока не кроссплатформенный, а только для винды. Но он
Прекрасно. А вытащены ли хэши заблокированных правоторговцами раздач?
Нет, конечно. Использовались только публично доступные простому пользователю данные. Зато ни одна из существующих раздач не пропадет.
Хы! Можно договориться, что будете дампить например в последнее воскресенье каждого месяца в полночь по Москве. Чтобы народ вечером побольше накидывал «сомнительных для правообладателей» раздач :)
Наверно, вопрос в том, выкачиваются ли непроверенные раздачи (в последствии закрытые правообладателями). Спасибо за работу, очень круто.
Здорово!
распределенный торрент-трекер распределенных данных
распределенный торрент-трекер распределенных данных
А ведь можно сделать полностью независимую базу с p2p обновлением и возможностью добавления контента пользователями. :)
Т.е. некий распределенный аналог базы трекера.
Т.е. некий распределенный аналог базы трекера.
Присылайте пулл-реквесты.
Может BitTorrent Sync?
eDonkey?..
Еще бы как-то сделать так, чтобы все раздачи в I2P запустить на всякий случай.
Рутрекер очень прибыльный бизнес, а вы предлагаете им сдать главный актив. Конечно они против.
Ну rutracker тут упорно нас пытается убедить, что дело не в «крутении баннеров».
Уже пусть не беспокоятся. Их же спасать пришли1
Я не слышал, чтобы они звали на помощь.
Проблема в том, что есть нехилая вероятность, что когда они будут звать на помощь, будет уже поздно.
— Может вызвать подкрепление?(из к/ф «На Дерибасовской хорошая погода»)
— Еще рано.
Через пару минут:
— Может вызвать подкрепление?
— Еще рано.
Через пару минут:
— Может все-таки вызвать подкрепление?
— Уже поздно
Этому же самому хотят нас убедить многочисленные копирасты
А там есть баннеры? Не знал.
ADBlock заботится о нас
17 банеров, 20 млн. просмотров главной страницы в день. Это не меньше 1 млн. рублей выручки в месяц. Хороший приятный доходик…
думается мне, вы их здорово недооцениваете
Это по нижней границе оценка, по факту там конечно же куда больше.
Конечно по нижней, но чтобы гарантированно «не придрались», что я завышаю доходы. Но даже при этой цифре — это вполне себе живой и прибыльный бизнес. И довольно наивным выглядит предложение «отдать» этот бизнес общественности. Ну и возникают резонные сомнения в «бесскорыстной борьбе с цифровым неравенством».
Не уверен что 'борьба' которая берет деньги не понятно откуда будет более бескорыстна.
Банально но факт — самые ярые борцы не едят радугу и, простите, не испражняются бабочками.
Не знаю какой процент их деятельности 'борьба' но без какой либо финансовой базы, думается мне, все равно сделать ничего нельзя.
Банально но факт — самые ярые борцы не едят радугу и, простите, не испражняются бабочками.
Не знаю какой процент их деятельности 'борьба' но без какой либо финансовой базы, думается мне, все равно сделать ничего нельзя.
обожаем мы чужие деньги считать.
запустите свой трекер — и гребите бабло лопатой — все так просто =)
запустите свой трекер — и гребите бабло лопатой — все так просто =)
Если вы способны продать это за столько — идите к нам рекламным агентом. На процент кототорый устроит вас.
Если вам кажется, то, как говорят в таких случаях — креститься надо.
Если вам кажется, то, как говорят в таких случаях — креститься надо.
Извиняюсь, но просветите нас, пожалуйста, насчет их годовой выручки, выраженной хотя-бы в активах в виде особняков и дорогих машин… Я не думал, что баннеры столько приносят. Что же они мне столько не приносят? Может я выбрал не ту рекламную компанию?
А какая посещаемость у ваших ресурсов, на которых крутятся баннеры?
Ну у меня около 5000 в день. Ставил разные системы, PPA вообще ничего не приносили (кликали много, но никаких действий не совершали), всякие попандеры и кликандеры приносили около 20 руб в день, если повесить все сразу. Но рекламы стало так много, что даже посещалка стала падать :/ Классические тизеры приносили тоже около 20 руб. Хватает только на хостинг.
В общем, если брать доход с баннеров даже 30 руб., и посещаемость Рутрекера, ну скажем, как у меня, но помноженную на 100, то у них получится порядка 3000 р. в день. На виллы все равно не хватает)))
В общем, если брать доход с баннеров даже 30 руб., и посещаемость Рутрекера, ну скажем, как у меня, но помноженную на 100, то у них получится порядка 3000 р. в день. На виллы все равно не хватает)))
Ну всё — завтра новостные сайты разразятся заголовками: у пиратов спиратили их базы данных и выложили в открытый доступ, несмотря на их противодействие!
Вот это вы молодцы!
На самом деле вы весьма с неожиданной (и очень правильной!) стороны подошли к созданию Распределенного Интернета (да, именно так, ни больше ни меньше). Ведь если эту программу объединить с самим торрент-клиентом, то можно научиться обмениваться базой распределенно, минуя какие-либо центры. И качать торренты можно было бы прямо из программы. И комментировать их — прямо тут же (а отсюда один шаг до распределенного форума или даже социальной сети).
А огромная база торрентов — это то, что привлечет массы простых пользователей. То, чего так не хватает всяческим i2p.
На самом деле вы весьма с неожиданной (и очень правильной!) стороны подошли к созданию Распределенного Интернета (да, именно так, ни больше ни меньше). Ведь если эту программу объединить с самим торрент-клиентом, то можно научиться обмениваться базой распределенно, минуя какие-либо центры. И качать торренты можно было бы прямо из программы. И комментировать их — прямо тут же (а отсюда один шаг до распределенного форума или даже социальной сети).
А огромная база торрентов — это то, что привлечет массы простых пользователей. То, чего так не хватает всяческим i2p.
Суть в том, что именно централизация и наличие модерации — главная фишка рутрекера. Очень хорошие правила оформления раздач. В случае с распределённой базой получится помойка типа eD2k.
Модерация раздач, в принципе, может быть социальной и саморегулируемой.
А она сейчас какая? Социальная и саморегулируемая и есть. Т.е вы лично можете прочитав правила «как стать модератором» тоже стать модераторам, модерировать раздачи и учавствовать в написании правил «как стать модератором» для тех кто тоже хочет стать модератором.
Также, став модератором вы можете прочитать правила «как стать админом»…
Также, став модератором вы можете прочитать правила «как стать админом»…
Я думаю, имелась в виду децентрализованная модерация, при которой каждый мог бы «голосовать» за или против раздачи, возможен вес голоса в зависимости от количества отданного, к примеру. Раздачи сортировались бы в выдаче согласно оценкам пользователей. На хабре много раз обсуждали, как это правильно сделать. Что важно, ни у кого технически не должно быть возможности повлиять на результаты «голосования» и ни одна раздача не была бы удалена полностью.
Хочу провести аналогию. Сравните обычный банк и bitcoin. В первом случае власти могут лишить человека его денег, во втором случае это невозможно и есть возможности для дальнейшего усложнения, например шифрование кошелька и использование bitcoin через прокси. Разница между нынешней системой модерации rutracker и желаемым вариантом такая же: на rutracker могут нагрянуть копирастеры (аналог властей в случае с банком из примера выше), а с распределенной системой голосования они ничего сделать не смогут. Кроме того, голосование никогда не сможет уничтожить раздачу, оно упустит её в самый конец выдачи. Поэтому различные маргиналы, хотя и будут висеть в конце списка, но не будут удалены по крайней мере.
Хочу провести аналогию. Сравните обычный банк и bitcoin. В первом случае власти могут лишить человека его денег, во втором случае это невозможно и есть возможности для дальнейшего усложнения, например шифрование кошелька и использование bitcoin через прокси. Разница между нынешней системой модерации rutracker и желаемым вариантом такая же: на rutracker могут нагрянуть копирастеры (аналог властей в случае с банком из примера выше), а с распределенной системой голосования они ничего сделать не смогут. Кроме того, голосование никогда не сможет уничтожить раздачу, оно упустит её в самый конец выдачи. Поэтому различные маргиналы, хотя и будут висеть в конце списка, но не будут удалены по крайней мере.
>Очень хорошие правила оформления раздач.
Не знаю, как в остальных разделах дела обстоят, но музыкальный раздел рутрекера — помойка с букетом левых форматов, битыми тегами и фактическим отсутствием стандартов оформления.
Если под оформлением раздачи иметь в виду сообщение натрекере форума — там да, там всё красиво, обложечка приложена и списочек к ней. А вот сама музыка на трекер попадает в каком угодно виде — например, с того же осла и взятая. В итоге при выборе между приведением в порядок музыкальной коллекции, скачанной с рутрекера, и скачиванием её заново с what.cd второй вариант оказывается куда более простым, несмотря на все сложности поддержания рейтинга на закрытых трекерах.
И пока правила устанавливаются и их соблюдение контролируется людьми, выдающими фразы вроде «а я всё равно все альбомы записываю на диски, поэтому мне приятней, что всё одним файлом, и, раз диск один, то и файл должен быть один», порядка в музыкальных разделах рутрекера нет и не будет.
Не знаю, как в остальных разделах дела обстоят, но музыкальный раздел рутрекера — помойка с букетом левых форматов, битыми тегами и фактическим отсутствием стандартов оформления.
Если под оформлением раздачи иметь в виду сообщение натрекере форума — там да, там всё красиво, обложечка приложена и списочек к ней. А вот сама музыка на трекер попадает в каком угодно виде — например, с того же осла и взятая. В итоге при выборе между приведением в порядок музыкальной коллекции, скачанной с рутрекера, и скачиванием её заново с what.cd второй вариант оказывается куда более простым, несмотря на все сложности поддержания рейтинга на закрытых трекерах.
И пока правила устанавливаются и их соблюдение контролируется людьми, выдающими фразы вроде «а я всё равно все альбомы записываю на диски, поэтому мне приятней, что всё одним файлом, и, раз диск один, то и файл должен быть один», порядка в музыкальных разделах рутрекера нет и не будет.
музыкальный раздел рутрекера — помойка с букетом левых форматов, битыми тегами и фактическим отсутствием стандартов оформления.
Друг! Я прослезился, жму руку, говорю Вам БОЛЬШОЕ спасибо! Как же они меня задрали своими идиотскими недоправилами, который высосаны хз откуда при этом не регламентируют то, что надо. За раздачу музыки в образах в наше время цифровых плееров надо принудительно обрекать уродов, которые это придумали на прослушивание целого альбома склееного в mp3 96k, причем, ествествено без cue.
И если за зарубежной музыкой можно давно уже спокойно ходить на вату, то российскую музыку приходится качать и дорабатывать напильником, наждачкой и рубанком прежде, чем придет во вменяемый вид.
Ведь если эту программу объединить с самим торрент-клиентом, то можно научиться обмениваться базой распределенно, минуя какие-либо центры. И качать торренты можно было бы прямо из программы.
Чем-то мне напомнило это e-mule. Там был реализован поиск прямо из программы. И там было много видео файлов, с названиями фильмов, мультфильмов, а на самом деле эти файлы были порно видео. На трэкерах есть модераторы которые проверяют соответствие описания тому, что там лежит и не допускают появления таких ситуаций.
Можно сделать взаимодействие и модерацию такую-же как и на сайте, просто обмениваться данными не через http.
Проблема одна, всем пользователям прийдется ставить новый софт, вместо браузера.
Проблема одна, всем пользователям прийдется ставить новый софт, вместо браузера.
Ну некоторые браузеры уже сейчас p2p поддерживают. И число таких браузеров будет расти. Так что можно обойтись уже и без установки нового софта.
А что за технология? некоторые браузеры — типа стандартного ФФ и Хрома или типа Firefox for tor, переделанные?
От блокировки ресурса таким образом спастись не выйдет. Все равно, должен быть какой-то центральный хост с скриптами, на который нужно зайти пользователю. Хотя, конечно, можно просто эти скрипты распространять как и программу (в виде локального файла, который открывается браузером), но мне такой подход чем-то не нравится. Возможно тем, что скрипты будут править все кто не лень на свой лад, в программе все-же сложнее поковыряться. Хотя это такой-себе аргумент.
Можно просто подсети сканировать и на github сбрасывать
А скрипты — плагин к браузеру же. Можно прям на imdb сидеров и магнеты отображать :)
А скрипты — плагин к браузеру же. Можно прям на imdb сидеров и магнеты отображать :)
github забанят (веб, по крайней мере).
Кишка тонка, кеш гугла до сих пор никто не забанил, а там экстремизма хоть отбавляй, не то, что цифры какие-то
Чего тонка? тут все зависит от интереса. Перекрыть кэш гугла, кстати, просто и особо возмущений это не вызовет. Особенно если перекрывать конкретные ссылки. Просто не надо было пока никому. Но нельзя считать, что так будет всегда.
github закроют очень быстро, там выкладывать подобную информацию. Сделать это намного проще, чем с кэшем (технически).
github закроют очень быстро, там выкладывать подобную информацию. Сделать это намного проще, чем с кэшем (технически).
Заблокировать ресурс, хостящий такой скрипт, — это как заблокировать сайт загрузки uTorrent. А если это и сделают, то будет написано расширение для браузеров, включающее этот скрипт.
Нет, не тоже самое. utorrent это просто программа, ей что угодно можно качать. А скрипт этот приводит к генерации сраницы с определенным контентом. Если контент пиратский, страница со скриптом пойдет в бан. В принципе, для пользователя это так и выглядит, зашел на страницу, получил сайт с торрентами. Детали доставки это уже нюансы.
Я думаю, скрипт, выполняющий роль клиента, будет хоститься отдельно от контента. Контент будет хоститься в самой сети, в которой будет возможен поиск по названию раздачи, чтобы опять не назначать эту задачу трекерам, делая их уязвимым звеном. И заодно встроить обязательное проксирование минимум через 1 участника сети и обязательное шифрование, чтобы копирастеры не могли приставать к сидам. Будет падение производительности сети в 2 раза, но расходы копирастеров на борьбу с такой сетью вырастут намного больше и борьба с файлообменом прекратится.
Забанят хост, где лежит скрипт. Так, что простые пользователи не смогут получить к нему доступ. «информационный посредник».
По сути, это ничем не отличается от того, чтобы завести сайт с торрентами на каком-то секретном сервере и проксировать его через какой-то другой «публичный» хост. Публичный хост забанят, а секретный сервер никто и искать не будет.
Если делать, то уже без центральных точек, тем более, работающих по http протоколу.
По сути, это ничем не отличается от того, чтобы завести сайт с торрентами на каком-то секретном сервере и проксировать его через какой-то другой «публичный» хост. Публичный хост забанят, а секретный сервер никто и искать не будет.
Если делать, то уже без центральных точек, тем более, работающих по http протоколу.
Все правильно. В идеале, пользователи сами должны модерировать раздачи. Разные пользователи долдны иметь разный «ранг», который можно также назвать коэффициентом доверия.
Два предельных случая: отсутствие модерации и помойка — когда все пользователи равны.
Жесткая модерация — сиутация когда у простых пользователей ранг 0, а у модераторов ∞.
Конечно, приятнее когда порядок, т.е. ситуация, близкая к жесткой модерации (но не совсем жесткая).
Даже здесь на Хабре используется подобная система (правда, упрощенная). Если бы «рейтинг» пользователя учитывался при оценивании им статей (т.е. вместо "+1" и "-1" было бы "+1 * exp(Rating/C)" и "-1 * exp(Rating/C)", то было бы интереснее:)
Два предельных случая: отсутствие модерации и помойка — когда все пользователи равны.
Жесткая модерация — сиутация когда у простых пользователей ранг 0, а у модераторов ∞.
Конечно, приятнее когда порядок, т.е. ситуация, близкая к жесткой модерации (но не совсем жесткая).
Даже здесь на Хабре используется подобная система (правда, упрощенная). Если бы «рейтинг» пользователя учитывался при оценивании им статей (т.е. вместо "+1" и "-1" было бы "+1 * exp(Rating/C)" и "-1 * exp(Rating/C)", то было бы интереснее:)
Прекрасно! Давно пора было сдампить его.
Когда-то давно делал парсер еще для торрентс.ру…
Изображения с раздач на данный момент сохраняются?
В удобном виде, думаю, администрация так просто не отдаст)
Слишком много ценного контента в одном месте! Даже после теоретического прикрытия рутреккера не будет смысла выкладывать пароль… можно свою базу запустить на новом хосте. Но, надеюсь, я ошибаюсь)
В любом случае пока нету официального полного дампа без всяких паролей нужно парсить своими силами…
Изображения с раздач на данный момент сохраняются?
В удобном виде, думаю, администрация так просто не отдаст)
Слишком много ценного контента в одном месте! Даже после теоретического прикрытия рутреккера не будет смысла выкладывать пароль… можно свою базу запустить на новом хосте. Но, надеюсь, я ошибаюсь)
В любом случае пока нету официального полного дампа без всяких паролей нужно парсить своими силами…
Изображения с раздач на данный момент сохраняются?
Нет. Только текст. Изображения бы в разы увеличили объем базы.
Неплохо было бы ещё дампить название раздела откуда берётся раздача для каталогизации.
Я давно пользуюсь своей софтиной, которая каталогизирует рутрекеровскую базу аудиокниг. Естественно с древовидным представлением по жанрам, авторам и другими плюшками. При обновлении парсит рутрекер, вытаскивает описание книг, первую страницу с отзывами и т.д. и складывает в локальную БД. После этого можно лопатить каталог, искать интересные книги. Когда книга найдена — кнопка «Скачать», которая скачивает торрент-файл и автоматически скармливает его uTorrent, так, чтобы раздача попала в нужную папку на диске (с деревом папок по авторам и жанрам).
Всё не хватает сил выпустить статью на хабр.
Всё не хватает сил выпустить статью на хабр.
Коммент плюсую не просто так, а с надеждой увидеть программу и статью о неё здесь :)
Попробую выделить время. Уж больно код там старый и страшный, чтобы без подготовки кому-либо показывать.
Ах да, чуть не забыл. Там еще и демоверсия платного DevExpress.WinForms используется — уж очень пригодились фичи по многофакторной фильтрации списка. И, соответственно, для паблика придётся переходить на какие-нибудь бесплатные компоненты.
Ах да, чуть не забыл. Там еще и демоверсия платного DevExpress.WinForms используется — уж очень пригодились фичи по многофакторной фильтрации списка. И, соответственно, для паблика придётся переходить на какие-нибудь бесплатные компоненты.
Вау, пожалуйста, найдите силы и покажите это чудо хабру. Это же восхитительно!
К сожалению, очень много контента администрация уже успела удалить.
А так идея сдампить трекер в свете глобального будущего удаления музыки конечно хорошая.
А так идея сдампить трекер в свете глобального будущего удаления музыки конечно хорошая.
Еще можно сделать раздачу средствами bittorrent sync, будет проще с обновлением.
Комментарий про порнолаб.
Это топик Добра! Пока одни зеленые полюсы)))
Народ, кто разбирается в теме, объясните мне пожалуйста вот какой момент: читал на вики про работу торрент-трекеров и понял, что ключевым в его работе всегда остается сам сервер трекера. Т.е., если у торрент-клиентов из-за блокировок по ip не будет доступа к трекеру, то толку в обладании нужной magnet-ссылки — ноль. Одно дело если просто закроют веб-морду, другое, если зажмут доступ к серверу — держать это хозяйство будет не прибыльно, база пополняться не будет и трекер умрет сам собой. Такие мысли пришли ко мне, когда я собирался начать парсить rutor. Объясните, пожалуйста, где я не прав?
Есть еще DHT — это когда клиенты обмениваются между собой hash — данных, треккер в таких обменах не нужен и блокировки не страшны.
Есть еще Peer Exchange, который помогает искать пиров в дополнение к DHT без участия трекера.
Про это я тоже читал, единственное, из вики не понятно, связь между magnet-ссылкой и DHT
Вот на примере рутора: magnet:?xt=urn:btih: длинный_хеш_записи&dn=rutor.org&tr=udp://bt.rutor.org:2710&tr=http://retracker.local/announce
Будет ли хоть какой-то смысл в ней, если адреса после tr= окажутся недоступными клиенту?
Вот на примере рутора: magnet:?xt=urn:btih: длинный_хеш_записи&dn=rutor.org&tr=udp://bt.rutor.org:2710&tr=http://retracker.local/announce
Будет ли хоть какой-то смысл в ней, если адреса после tr= окажутся недоступными клиенту?
Пока есть сиды, по магнет ссылке можно будет присоединиться к раздаче, трекер не нужен.
Это при условии, что раздача открытая, но и при частной раздаче тоже есть варианты.
Это при условии, что раздача открытая, но и при частной раздаче тоже есть варианты.
Как мой клиент узнает сидов в лицо, если нет трекера? Допустим, вы в своем utorrent открыли эту ссылку, и я открыл. Откуда мой клиент узнает где сид? Откуда он узнает, что вы тоже начали качать?
Вот принцип работы bit-torrent сети: «Перед началом скачивания клиент подсоединяется к трекеру по адресу, указанному в торрент-файле, сообщает ему свой адрес и хеш-сумму торрент-файла, на что в ответ клиент получает адреса других клиентов, скачивающих или раздающих этот же файл. Далее клиент периодически информирует трекер о ходе процесса и получает обновлённый список адресов.» (с) вики
Получается, только от трекера я могу получить список сидеров. Нет доступа к трекеру — нет списка сидов — нет закачки.
Вот принцип работы bit-torrent сети: «Перед началом скачивания клиент подсоединяется к трекеру по адресу, указанному в торрент-файле, сообщает ему свой адрес и хеш-сумму торрент-файла, на что в ответ клиент получает адреса других клиентов, скачивающих или раздающих этот же файл. Далее клиент периодически информирует трекер о ходе процесса и получает обновлённый список адресов.» (с) вики
Получается, только от трекера я могу получить список сидеров. Нет доступа к трекеру — нет списка сидов — нет закачки.
Почитайте на википедии про работу протокола DHT.
Трекер там не нужен.
Трекер там не нужен.
Ну вики же. Вы не правы.
Каждый узел хранит таблицу маршрутизации, содержащую контактную информацию о многих «ближайших» к нему узлах, и о нескольких более далёких. «Близость» двух узлов вычисляется из «сходства» их ID, и не имеет никакого отношения к их географической близости.
Когда узел хочет найти пиров для раздачи, он сравнивает infohash этой раздачи с ID известных ему узлов, и затем посылает запрос тому узлу, чей ID наиболее похож на этот infohash. Тот узел возвращает ему адрес узла, чей ID ещё ближе к infohash торрента.
Тогда наш узел посылает запрос тому новому узлу, и получает от него адрес следующего узла, чей ID ещё более похож на infohash торрента.
Таким образом, запросы от клиентов, участвующих в раздаче торрента с определённым infohash, постепенно стекаются к узлам, чьи ID наиболее похожи на этот infohash. Эти узлы помнят предыдущие запросы, и всем следующим запрашивающим узлам вернут адреса предыдущих пиров с той же раздачи.
Если есть другие закачки — клиент будет опрашивать их участников.
Да, при недоступности серверов *твой* клиент будет «рассылать» по доступным клиентам тот самый «длинный_хеш_записи», и если у кого-то будет информация о нём — то она появится и у *твоего* клиента. Под информацией понимаю список файлов в торренте, из размеры и прочую мета-информацию.
Трекеры только ускоряют поиски пиров. Для DHT они не необходимы.
Не совсем так.
Текущая реализация DHT в протоколе Bitorrent (которая, к слову, реализуется как расширение у нему bittorrent.org/beps/bep_0005.html) содержит только статическую информацию начальной конфигурации (таблица маршрутизации) для нового узла. Это значит, что если Вы пытаесь использовать trackerless torrent в котором все узлы уже недоступны, то Вы окажитесь отрезаным от сети.
Поэтому на данном этапе совсем отказаться от централизованных трекеров невозможно.
На мой взгляд проблема назрела и ее решение уже на подходе. В светлом будущем необходимость в крупных трекерах таких как The Pirate Bay или rutracker отпадет.
А пока законодатели будут обдумывать очередной законопроект по борьбе с торрент-трекерами, пиринговые сети шагнут на новую ступень развития. В том плане всякие запрещающие законопроекты даже полезны так как они способствуют прогрессу. Ну а он на стороне простых Интернет пользователей.
Текущая реализация DHT в протоколе Bitorrent (которая, к слову, реализуется как расширение у нему bittorrent.org/beps/bep_0005.html) содержит только статическую информацию начальной конфигурации (таблица маршрутизации) для нового узла. Это значит, что если Вы пытаесь использовать trackerless torrent в котором все узлы уже недоступны, то Вы окажитесь отрезаным от сети.
Поэтому на данном этапе совсем отказаться от централизованных трекеров невозможно.
На мой взгляд проблема назрела и ее решение уже на подходе. В светлом будущем необходимость в крупных трекерах таких как The Pirate Bay или rutracker отпадет.
А пока законодатели будут обдумывать очередной законопроект по борьбе с торрент-трекерами, пиринговые сети шагнут на новую ступень развития. В том плане всякие запрещающие законопроекты даже полезны так как они способствуют прогрессу. Ну а он на стороне простых Интернет пользователей.
Ключевое слово: bootstrapping. Если у вас уже есть хоть один пир с dht (например, из других раздач или через utorrent который «подсасывает» их откуда-то со своих серверов) — у вас работают все раздачи по dht (если, конечно, есть источники).
На самом деле, если эти «законопроекты» отсекут от пиратов 95% их нынешних клиентов, то они свою задачу будут рассматривать выполненной. Потому что между вариантом «разобраться с i2p» и «пойти купить за 65 рублей» обычный пользователь интернета абсолютно точно выберет второе. А гоняться за оставшимися несколькими десятками тысяч на весь мир (крайне оптимистичная оценка) по торам, итупи, и всяким прочим яйцеголовым выдумкам, не имеет особого практического смысла.
Что значит разобраться с i2p? В чём проблема упаковать клиент в однокнопочную программку?
Вы забываете, что аудитория интернета (называющая системный блок «процессором» и ищущая «сериалы скачать бесплатно» в Яндексе, а потом лечащаяся от винлокеров), и аудитория, допустим, Хабра, это разные множества, а часто даже и весьма слабо пересекающиеся. Находясь здесь, в нашей уютной тусовочке, вы пребываете в иллюзии, что «нас — много, мы — сила!», на самом деле, на самом деле эта «сила» весьма немногочисленна, и составляет в лучшем случае несколько процентов от общего числа пользователей интернета.
И что дальше? Вы хотите сказать, что немногочисленная тусовочка программистов не сообразит сделать простую морду для i2p клиента? Массы торрент-клиентами научились пользоваться? Научились. И скажу по секрету — не в восторге от этого. Массы можно привлечь удобным платным сервисом, а те, кто ищут где скачать бесплатно по своим причинам — освоят и i2p и чёрта в ступе.
> аудитория интернета (называющая системный блок «процессором» и ищущая «сериалы скачать бесплатно» в Яндексе, а потом лечащаяся от винлокеров)
Если они ищут сериалы в Яндексе, а не на Рутрекере — они не являются аудиторией Рутрекера, и даже если Рутрекер будет заблокирован, они этого не заметят. Так что речь не о них.
Если они ищут сериалы в Яндексе, а не на Рутрекере — они не являются аудиторией Рутрекера, и даже если Рутрекер будет заблокирован, они этого не заметят. Так что речь не о них.
Я искренне надеюсь, что вы понимаете, что речь идет не о том где, что и как искать.
> Я искренне надеюсь, что вы понимаете, что речь идет не о том где, что и как искать.
О чём же идёт речь в топике про Рутрекер, в данной конкретной ветке про i2p? А в это время аудитория Флибусты разобралась с i2p.
О чём же идёт речь в топике про Рутрекер, в данной конкретной ветке про i2p? А в это время аудитория Флибусты разобралась с i2p.
В данной конкретной ветке речь идет совсем не про i2p
PS: раз уж зашла речь: Я аудитория Флибусты, и никаким i2p, кстати, не пользуюсь.
PS: раз уж зашла речь: Я аудитория Флибусты, и никаким i2p, кстати, не пользуюсь.
> В данной конкретной ветке речь идет совсем не про i2p
Вы привели в пример пользователей, которые ищут сериалы в Яндексе — так? Так. Они уже сейчас не пользуются торрентами. Те, кто торрентами пользуются, с ними вполне разобрались, значит разберутся и с установкой i2p, она нисколько не сложнее, но потенциально сулит вкусные плюшки — возможность раздавать и качать то, что правообладатели сейчас блокируют (кстати говоря немцы активно пользуются ею).
> Я аудитория Флибусты, и никаким i2p, кстати, не пользуюсь.
Раз вы аудитория, то вы в курсе того, как прошёл сентябрь.
Вы привели в пример пользователей, которые ищут сериалы в Яндексе — так? Так. Они уже сейчас не пользуются торрентами. Те, кто торрентами пользуются, с ними вполне разобрались, значит разберутся и с установкой i2p, она нисколько не сложнее, но потенциально сулит вкусные плюшки — возможность раздавать и качать то, что правообладатели сейчас блокируют (кстати говоря немцы активно пользуются ею).
> Я аудитория Флибусты, и никаким i2p, кстати, не пользуюсь.
Раз вы аудитория, то вы в курсе того, как прошёл сентябрь.
Торрент-клиент получает хэш раздачи и начинает искать сидов по этому хэшу, рассылая сообщения get_peers(хэш) по DHT-сети.
Будет. DHT строит свою сеть по поиску пиров. Вот сейчас ради интереса зашёл на раздачу слабопопулярную взял хэш и сделал ссылку без указания трекеров только хэш. Результат, на непопулярной раздаче (1 сид на самом рутрекере) прошло где то 15 минут прежде чем началась закачка. Для популярно закачки (270 сидов) практически мгновенно.
Но насколько я понял обоим технологиям нужно чтобы у тебя уже были несколько рабочих торентов.
Но насколько я понял обоим технологиям нужно чтобы у тебя уже были несколько рабочих торентов.
Отвечу на практическом примере:
Минимальная ссылка это magnet:?xt=urn:btih:HASH
Этого уже вполне достаточно как для скачивания, так и для публикации собственных раздач.
Я несколько лет хранил и выкладывал у себя большие архивы фотографий с велопробегов. При этом к большой нагрузке качальщиков был не готов (поскольку хостится всё в домашнем роутере RT-N16). Поэтому парой скриптов для папки с фотографиями сперва генерился индекс с превьюшками, а фотки в оригинальном размере шарились через магнет.
С помощью transmission (в cli-варианте) для расшаривания любого файла нужно всего две команды:
Первая команда создаёт торрент. Вторая подключается к работающему локально (localhost) демону (transmission-daemon) и ставит только что созданный торрент на раздачу. Можно добавить ещё и третью команду — удаление созданного торрент-файла (покуда с момента установки на раздачу им начирает рулить демон, и сам локальный файл больше не нужен)
Нужный хэш при необходимости вытаскивается из торрента (если в cli — с помощью transmission-show) и дописывается в конец строчки «magnet:?xt=urn:btih:», полученная ссылка (например, magnet:?xt=urn:btih:fb26eaa6180af006cc502837ad48d655c5e27561) отдаётся страждущим — и всё!
Вот весь скрипт, который запускался для этого на роутере: pastebin.com/HxDA0pEq
Минимальная ссылка это magnet:?xt=urn:btih:HASH
Этого уже вполне достаточно как для скачивания, так и для публикации собственных раздач.
Я несколько лет хранил и выкладывал у себя большие архивы фотографий с велопробегов. При этом к большой нагрузке качальщиков был не готов (поскольку хостится всё в домашнем роутере RT-N16). Поэтому парой скриптов для папки с фотографиями сперва генерился индекс с превьюшками, а фотки в оригинальном размере шарились через магнет.
С помощью transmission (в cli-варианте) для расшаривания любого файла нужно всего две команды:
transmission-create -o "/tmp/torrent.torrent" "нужный_файл"
transmission-remote "localhost" -w "путь_к_папке_где_нужный_файл/" -a "/tmp/torrent.torrent"
Первая команда создаёт торрент. Вторая подключается к работающему локально (localhost) демону (transmission-daemon) и ставит только что созданный торрент на раздачу. Можно добавить ещё и третью команду — удаление созданного торрент-файла (покуда с момента установки на раздачу им начирает рулить демон, и сам локальный файл больше не нужен)
Нужный хэш при необходимости вытаскивается из торрента (если в cli — с помощью transmission-show) и дописывается в конец строчки «magnet:?xt=urn:btih:», полученная ссылка (например, magnet:?xt=urn:btih:fb26eaa6180af006cc502837ad48d655c5e27561) отдаётся страждущим — и всё!
Вот весь скрипт, который запускался для этого на роутере: pastebin.com/HxDA0pEq
(ждем реакции администрации)
Очень интересно, что ответят.
Хорошее дело сделали.
Жесть подстава для рутрекера, конечно.
Сейчас появится сотни, а то и тысячи новых трекеров, ибо база данных торрентов в свободном доступе
Но, база супер! Уже качаю.
В целом, у меня тоже проект посвященный торрентам. Если что — готов всячески помогать в данном начинании.
Сейчас появится сотни, а то и тысячи новых трекеров, ибо база данных торрентов в свободном доступе
Но, база супер! Уже качаю.
В целом, у меня тоже проект посвященный торрентам. Если что — готов всячески помогать в данном начинании.
Хм, кому я так насолил то? :)
Вы невнимательно читали пост. Я уже написал почему Вы не правы.
Перечитал ещё раз. Честно говоря, не понял, в чем именно я не прав?
Эти данные итак всегда были в свободном доступе.
Одно дело данные в свободном доступе
Другое дело — готовая база данных.
Это разные вещи. Посмотрите на форумах, продают спарсенные базы разных порталов, которые итак «в свободном доступе».
Другое дело — готовая база данных.
Это разные вещи. Посмотрите на форумах, продают спарсенные базы разных порталов, которые итак «в свободном доступе».
В чем разница расскажите, пожалуйста. То что кто-то что-то продает — не аргумент. Продают подобные вещи в основном для тех, кто не может сделать базу сам. Но такие и сайт по базе сами поднять не смогут. Те же, кто смогут поднять сайт по базе — могут и сами сделать базу, не покупая.
Продают — как раз аргумент. Если кто-то готов платить за информацию, значит эта информация нужна.
Прочитайте, пожалуйста, не только первую строчку коммента, на который Вы отвечаете.
С чего вы взяли, что ваши тексты не читают?
Я очень внимательно все читаю.
Я очень внимательно все читаю.
Потому что по Вашему комменту складывается впечатление, что Вы прочитали только первую строчку. В качестве возражения на него, могу только повторить вероятно не прочитанный Вами кусок:
Продают подобные вещи в основном для тех, кто не может сделать базу сам. Но такие и сайт по базе сами поднять не смогут. Те же, кто смогут поднять сайт по базе — могут и сами сделать базу, не покупая.
Да причем тут — смогут или не смогут? Чтобы спарсить рутрекер нужен программист, который напишет парсер, сервер с нормальным каналом, прокси, поддержка и тому подобное. Эта работа стоит денег.
Чтобы запустить сайт с готовой базой — надо иметь всего-лишь саму базу (которая стоит намного дешевле стоимости работы) + небольшой конвертер для того, чтобы засунуть контент из готовой базы в готовый сайт.
Чтобы запустить сайт с готовой базой — надо иметь всего-лишь саму базу (которая стоит намного дешевле стоимости работы) + небольшой конвертер для того, чтобы засунуть контент из готовой базы в готовый сайт.
Эта работа стоит денег.
То есть ничего невозможного. Были бы деньги. А так как перед Вами люди, сделавшие это просто забесплатно, то вполне можно предположить, что сделать это за деньги стоит относительно немного.
Кстати, канал совсем не нужен тут. Нужным только внешние IP.
Не по существу Вашего спора, а по аргументу ". А так как перед Вами люди, сделавшие это просто забесплатно, то вполне можно предположить, что сделать это за деньги стоит относительно немного." — это неверное утверждение. То, что специалист, знающий способы, может легко сделать бесплатно — человек, способы не знающий может лишь пытаться купить у тех многих, кто возможно знает подходы, и готов взяться за определённую цену. Попыток может оказаться много, времени много — пока находящиеся малознающие сделают с грехом пополам, или пока найдётся кто-то знающий, который запросит за заказную разработку тоже не мало. И денег здесь, как правило, тратится очень прилично!
Тот кто может по этой базе развернуть поддельный сайт точно так же может сделать дамп самостоятельно. Мы ничего не взламывали и среди нас нет администраторов или модераторов. Мы просто взяли то, что было и так доступно и придали ему удобную для децентрализации форму.
Так речи нету, о том, что кто-то что взламывал.
Может я перечитал www.searchengines.ru/, но там постоянно продают базы разных порталов, на основе которых делают новые сайты.
В этом нет ничего плохого. Это не в упрек было сказано.
Может я перечитал www.searchengines.ru/, но там постоянно продают базы разных порталов, на основе которых делают новые сайты.
В этом нет ничего плохого. Это не в упрек было сказано.
Ценность рутрекера в CEO оптимизации и бренде. Люди знают куда ходить, поисковики хорошо ранжируют. Множество других сайтов и до этого парсили рутрекер и остальных, сама по себе база имеет мало ценности, если она уже есть у намного более раскрученного ресурса.
Правильно. Только ценность эта не для посетителей, а для самого рутрекера. Они с этого какие-никакие плюшки имеют. Потому они и не горят желанием отадавать свою базу данных кому не попадя и создавять собственными руками множество конкурентов.
Нет, это ценность для людей. А вот уже с людей трекер и имеет плюшки.
У рутрекера есть зеркала (кто-то его парсил и запускал свое). Предположим, их запустят еще несколько десятков. Вроде бы содержимое тоже.
Но если рутрекер неожиданно закроют, то большая часть его аудитории от этого потеряет. Они просто не будут знать, куда идти и будут видеть в выдаче Гугла незнакомые сайты. Да, со временем, аудитория эти зеркала найдет, но часть людей переключится на другие ресурсы, а остальные разбредутся по разным зеркалам. В итоге, вместо одного большого сообщества получится множество мелких. В данном случае, это сильно притормозит развитие, ведь единого места, куда стекается весь контент, уже не будет. Что-то выложат там, что-то тут. По сути, будет ничем не лучше просто маленьких трекеров. Ну за исключением большой стартовой базы. Но с новым контентом будет беда.
У рутрекера есть зеркала (кто-то его парсил и запускал свое). Предположим, их запустят еще несколько десятков. Вроде бы содержимое тоже.
Но если рутрекер неожиданно закроют, то большая часть его аудитории от этого потеряет. Они просто не будут знать, куда идти и будут видеть в выдаче Гугла незнакомые сайты. Да, со временем, аудитория эти зеркала найдет, но часть людей переключится на другие ресурсы, а остальные разбредутся по разным зеркалам. В итоге, вместо одного большого сообщества получится множество мелких. В данном случае, это сильно притормозит развитие, ведь единого места, куда стекается весь контент, уже не будет. Что-то выложат там, что-то тут. По сути, будет ничем не лучше просто маленьких трекеров. Ну за исключением большой стартовой базы. Но с новым контентом будет беда.
Если рутрекер закроют, то будет как в прошлый раз — новый домен будет известен всем за сутки.
Тут даже СМИ не надо — у рутрекера есть база пользователей, так что достаточно разослать письма.
А вот если «закроют» администрацию рутрекера, тогда уже сложнее.
Тут даже СМИ не надо — у рутрекера есть база пользователей, так что достаточно разослать письма.
А вот если «закроют» администрацию рутрекера, тогда уже сложнее.
Спарсить эту базу — дело одних выходных.
Так что ничего не случилось, чего раньше не могло произойти. Если б кто-то хотел заморочиться и выложить копию рутрекера, выложил бы.
А кстати, я вспомнил — я ж видел копии. Находятся через гугль попытки скопировать.
Вот только для этого нужны серьёзные ресурсы — дорогой хостинг и т.п. Чтоб зарабатывать на этом деньги, надо сначала вложить.
Так что ничего не случилось, чего раньше не могло произойти. Если б кто-то хотел заморочиться и выложить копию рутрекера, выложил бы.
А кстати, я вспомнил — я ж видел копии. Находятся через гугль попытки скопировать.
Вот только для этого нужны серьёзные ресурсы — дорогой хостинг и т.п. Чтоб зарабатывать на этом деньги, надо сначала вложить.
Хвала и честь борцам за свободу. Качаю.
Этсамое, используйте pigz вместо gzip, он многопоточный и дает большой выигрыш в скорости на многоядерных системах.
Под винду реализации есть?
Да, вот последняя версия.
А вот бенчмарк, если интересно
А вот бенчмарк, если интересно
Итого, pigz где-то в 6 раз быстрее, нежели gzip.
Еще выгоднее использовать lzma, не случайно им Linux ядро сжато
Вот будет прикол если сюда придет rutracker и скажет что этой раздачей нарушены его авторские права на его контент сайта)
Конвертируем final.txt в json
#!/bin/bash
echo '[' >> list.json
while read row; do
IFS=$'t' read -ra cols <<< "$row"
echo '{i:"'${cols[0]}'",t:"'${cols[1]}'",b:"'${cols[2]}'",s:"'${cols[3]}'",l:"'${cols[4]}'",h:"'${cols[5]}'",d:"'${cols[6]}'",u:"'${cols[7]}'"},' >> list.json
done < "final.txt"
echo ']' >> list.json
Так я чё-то не понял, на рутрекер базу залили? Или её уже правообладатели порезали???
Нет еще. Заливальщики отдыхают. Плюс есть подозрение, что ее администрация удалит. В общем ждем комментариев rutracker.
зеркало
sha256.txt.asc, sha256.txt, dump_viewer.tar.gz, final.txt.gz @ l.bitcasa.com/QCY8KNte
если у кого есть прямая ссылка на «mega.co.nz (только база описаний, распаковать основной tar в папку с программой)», то ее тоже могу отзеркалить
sha256.txt.asc, sha256.txt, dump_viewer.tar.gz, final.txt.gz @ l.bitcasa.com/QCY8KNte
если у кого есть прямая ссылка на «mega.co.nz (только база описаний, распаковать основной tar в папку с программой)», то ее тоже могу отзеркалить
Под макос кто-нить сварганит готовую оболочку для работы с базой? :)
Запустил wget «спасать» habrahabr
Уже картельный сговор имеет место быть:
Поэтому очень вовремя побеспокоились. В то время как TPB сама по этому пути идёт, некоторые трекеры перевирают идею.
Поэтому очень вовремя побеспокоились. В то время как TPB сама по этому пути идёт, некоторые трекеры перевирают идею.
Тут я не могу не согласиться, делать раздачу из многих тысяч мелких файлов вместо архива — просто неуважение к пользователям.
По-хорошему надо вообще сделать текстовую базу с удобным поиском, как это сделал J_o_k_e_R.
По-хорошему надо вообще сделать текстовую базу с удобным поиском, как это сделал J_o_k_e_R.
.tar позволяет и 1 файл иметь, и при обновлении старая часть (с округлением до размера куска) не будет перекачиваться.
Поздравляю с полезным делом!
Позволю расставить точки над i чтоб не было недопонимания относительно нашей позиции. (а она не совсем такая, как вы ее здесь преподносите)
1) Коллекторов торрентов нынче если не тысячи то сотни уж точно. Причем с развитой системой поиска, с подтягиванием скриншотов и описаний, которые прут со всех трекеров, с рутрекера особенно (там наиболее валидные данные). Есть и обычные клоны рутрекера, с полной копией всего что на на форуме. Так что в этом смысле ничего нового, очередной велосипед, правда, спасибо что open source.
2) Мы только приветствуем что любой технически грамотный человек может сделать себе копию всех хешей и описаний раздач. Если это кому то нужно — пожалуйста, даже наверно полезно, хотя смысла особого тоже в этом нет, т.к все полтора миллиона раздач вам вряд ли нужны.
3) Мы были против специального и намеренного распространения этой базы от своего имени, потому что текстовый файл никак не защищен от изменений. И скачав у нас, можно заменить хеши и выложить на своем сайте. Нет, безусловно вы это можете выкладывать эту базу в онлайн, и те кто вам доверяют — пусть качают, но это НЕ ОФИЦИАЛЬНАЯ БАЗА и в случае чего — претензий к нам никаких.
4) По этим же причинам никто не мешает вам или кому то еще сделать раздачу с вашей базой рутрекера на самом рутрекере :)
5) Сиды и пиры в таблице — абсолютно лишнее. Во первых эта величина сильно кореллирующая с московским временем, а во вторых трекер видит не все пиры (из за DHT).
Позволю расставить точки над i чтоб не было недопонимания относительно нашей позиции. (а она не совсем такая, как вы ее здесь преподносите)
1) Коллекторов торрентов нынче если не тысячи то сотни уж точно. Причем с развитой системой поиска, с подтягиванием скриншотов и описаний, которые прут со всех трекеров, с рутрекера особенно (там наиболее валидные данные). Есть и обычные клоны рутрекера, с полной копией всего что на на форуме. Так что в этом смысле ничего нового, очередной велосипед, правда, спасибо что open source.
2) Мы только приветствуем что любой технически грамотный человек может сделать себе копию всех хешей и описаний раздач. Если это кому то нужно — пожалуйста, даже наверно полезно, хотя смысла особого тоже в этом нет, т.к все полтора миллиона раздач вам вряд ли нужны.
3) Мы были против специального и намеренного распространения этой базы от своего имени, потому что текстовый файл никак не защищен от изменений. И скачав у нас, можно заменить хеши и выложить на своем сайте. Нет, безусловно вы это можете выкладывать эту базу в онлайн, и те кто вам доверяют — пусть качают, но это НЕ ОФИЦИАЛЬНАЯ БАЗА и в случае чего — претензий к нам никаких.
4) По этим же причинам никто не мешает вам или кому то еще сделать раздачу с вашей базой рутрекера на самом рутрекере :)
5) Сиды и пиры в таблице — абсолютно лишнее. Во первых эта величина сильно кореллирующая с московским временем, а во вторых трекер видит не все пиры (из за DHT).
Хорошая позиция. Но ведь можно было и по тихому выложить не официально? :)
Можно, но зачем? Поймите, аудитория хабра и рутрекера — это очень разные аудитории, хотя одна включает в себя другую. Хабраобществу интересны любые лайфхаки, да и просто особенности работы сетевых сервисов, а обычному человеку сей громадный текстовый файл мало что даст, кроме неудобств, связанных с магнет-ссылками, отсуствием описания и картинок.
Кстати, о броском заголовке. «Спасти» базу хешсумм — это вовсе еще не значит спасти раздачи. При живом трекере сотни тысяч раздач умирают от недостатка сидеров. Это на несколько порядков больше чем закрывают правообладатели (!).
Поэтому, вместо дешевого популизма, авторы лучше бы призадумались о механизмах автоматической поддержки нуждающихся в этом раздач. Т.е в идеале, прийти к такой системе, когда любая, однажды начатая раздача, будет поддерживатся бесконечно долгое время без участия человеческого фактора. Так например торрент-клиент кроме прямо указанных ему раздач, может поддерживать некоторое количество анонимных, не скачивая их целиком, но вместе с другими клиентами сохраняя их в целостности.
Это, кстати, кроме проблемы «мертвых раздач» заодно решит все проблемы с раздачами, закрытыми правообладателями, т.к они как и все другие будут всегда доступны.
Вот чем надо заниматся, а не странички с хтмл кодом парсить!
Кстати, о броском заголовке. «Спасти» базу хешсумм — это вовсе еще не значит спасти раздачи. При живом трекере сотни тысяч раздач умирают от недостатка сидеров. Это на несколько порядков больше чем закрывают правообладатели (!).
Поэтому, вместо дешевого популизма, авторы лучше бы призадумались о механизмах автоматической поддержки нуждающихся в этом раздач. Т.е в идеале, прийти к такой системе, когда любая, однажды начатая раздача, будет поддерживатся бесконечно долгое время без участия человеческого фактора. Так например торрент-клиент кроме прямо указанных ему раздач, может поддерживать некоторое количество анонимных, не скачивая их целиком, но вместе с другими клиентами сохраняя их в целостности.
Это, кстати, кроме проблемы «мертвых раздач» заодно решит все проблемы с раздачами, закрытыми правообладателями, т.к они как и все другие будут всегда доступны.
Вот чем надо заниматся, а не странички с хтмл кодом парсить!
Поэтому, вместо дешевого популизма, авторы лучше бы призадумались о механизмах автоматической поддержки нуждающихся в этом раздач.
Вот прям сразу как сделаете API для удобного экспорта всей базы и забаните все CHA аккаунты, перестав закрывать раздачи. Вот тогда сразу. И люди к Вам потянутся те, которые свалили на другие трекеры из-за Вашей борьбы за бабло, а не за пользователей.
Так делайте! Вы ведь на это деньги зарабатываете. Арендуйте несколько дедиков с анлимитными каналами, поставьте туда торрент-демоны и вперед.
Хорошие раздачи как раз не умирают от недостатка сидов, хорошие раздачи прикрывают правообладатели и их как раз и надо спасать
>Поэтому, вместо дешевого популизма, авторы лучше бы призадумались о механизмах автоматической поддержки нуждающихся в этом раздач
кстати вы то почему об этом не задумались? это вам в первую очередь выгодно. Легко поприкать и понукать некоммерческий open source проект. Раз это так вам важно-полный вперед?
кстати вы то почему об этом не задумались? это вам в первую очередь выгодно. Легко поприкать и понукать некоммерческий open source проект. Раз это так вам важно-полный вперед?
Спасибо. Прям как будто подменили человека, сидящего за Вашим аккаунтом после нашего дешевого популизма. Хорошо, что Ваши комментарии, на которые я ссылаюсь, все могут посмотреть.
1) Я пропущу этот пункт, просто диаметрально противоположный тому, что писалось от Вашего аккаунта раньше.
2) Дайте грамотным людям API или набор дампов аля википедия, Уже не раз просили,
3) Да Вы просто прикалываетесь какждый раз, когда делаете вид, что не знаете про хешсуммы и gpg-подпись. Посмотрите как сделано в нашей раздаче. Мы даем возможность людям всегда быть уверенными, что то, что они качают — это действительно то, что выложили мы. Если б sha256sum.txt Лежал на rutracker.org — это давало бы люлям возможность убедиться, что текстовый файл, является именно тем, что выложили Вы. Даже если они его на диске в подвортне купили. Так сценгруппы вообще-то живут со времен BBS'ок.
4) Спасибо Вам большое. Раздача естественно будет создана из-под левого акка через тор. А Ваши слова сейчас дали нам зеленый свет, например, на opensharing.
1) Я пропущу этот пункт, просто диаметрально противоположный тому, что писалось от Вашего аккаунта раньше.
2) Дайте грамотным людям API или набор дампов аля википедия, Уже не раз просили,
3) Да Вы просто прикалываетесь какждый раз, когда делаете вид, что не знаете про хешсуммы и gpg-подпись. Посмотрите как сделано в нашей раздаче. Мы даем возможность людям всегда быть уверенными, что то, что они качают — это действительно то, что выложили мы. Если б sha256sum.txt Лежал на rutracker.org — это давало бы люлям возможность убедиться, что текстовый файл, является именно тем, что выложили Вы. Даже если они его на диске в подвортне купили. Так сценгруппы вообще-то живут со времен BBS'ок.
4) Спасибо Вам большое. Раздача естественно будет создана из-под левого акка через тор. А Ваши слова сейчас дали нам зеленый свет, например, на opensharing.
Я устал уже вам обьяснять, что аудитория рутрекера — обычные люди, которы при слове хеш-сумма и bgp-подпись впадают в ступор.
Ну неужели непонятно, что среднестатистическому юзеру очень сложно, практически невозможно постичь эти профессиональные методы контроля целостности информации? Ему нужна программа под виндовс с одной большой кнопкой «скачать», а не сырцы на гитхабе.
И вот еще что: cреди грамотных людей процент людей с нечистой совестью ничуть не меньше среднего по стране. Ну сделаем мы API. Ну потешит тысяча — другая техногиков свое самолюбие. Ну появится еще десяток клонов форума, где у юзеров крадут пароли, а вместо торрентов подсовывают вирусы. Упростим жизнь правообладателям, которым через API сильно проще будет забирать базу, чем искать что удалить (иногда вручную) по форуму. Зачем это все?
Ну неужели непонятно, что среднестатистическому юзеру очень сложно, практически невозможно постичь эти профессиональные методы контроля целостности информации? Ему нужна программа под виндовс с одной большой кнопкой «скачать», а не сырцы на гитхабе.
И вот еще что: cреди грамотных людей процент людей с нечистой совестью ничуть не меньше среднего по стране. Ну сделаем мы API. Ну потешит тысяча — другая техногиков свое самолюбие. Ну появится еще десяток клонов форума, где у юзеров крадут пароли, а вместо торрентов подсовывают вирусы. Упростим жизнь правообладателям, которым через API сильно проще будет забирать базу, чем искать что удалить (иногда вручную) по форуму. Зачем это все?
Я устал уже вам обьяснять, что аудитория рутрекера — обычные люди, которы при слове хеш-сумма и bgp-подпись впадают в ступор.
Ну неужели непонятно, что среднестатистическому юзеру очень сложно, практически невозможно постичь эти профессиональные методы контроля целостности информации? Ему нужна программа под виндовс с одной большой кнопкой «скачать», а не сырцы на гитхабе.
То есть Ваше же заявление «текстовый файл никак не защищен от изменений» — признаем ложью и демагогией? Так как защитить все-таки можно, правда не все это умеют?
И вот еще что: cреди грамотных людей процент людей с нечистой совестью ничуть не меньше среднего по стране. Ну сделаем мы API. Ну потешит тысяча — другая техногиков свое самолюбие.
Эта тысяча-другая техногиков сделает резервную копию созданной ими же медиатеки. Вот первейшая цель. Заодно выведет сам рутрекер из-под прицела правообладателей.
Ну появится еще десяток клонов форума, где у юзеров крадут пароли, а вместо торрентов подсовывают вирусы.
Как Вы сами писали их уже «если не тысячи, то сотни». Так что API никак не это не повлияет. А дампить вашу базу будет удобнее тем, кто преследует цель сохранить раздачи.
Упростим жизнь правообладателям, которым через API сильно проще будет забирать базу, чем искать что удалить (иногда вручную) по форуму.
Да-да. Может просто перестать давать им возможности удалять раздачи? Ну или если Вам все-таки неймется — удаляйте непосредственно с форума рутрекера, раздавая их через API.
А мне одному кажется, что Рутрекер боится, что у них спиратят базу? И поэтому осложняют копирование? Прикооольно )
То есть Ваше же заявление «текстовый файл никак не защищен от изменений» — признаем ложью и демагогией? Так как защитить все-таки можно, правда не все это умеют?
Ложь и демагогия то что вы кричите что спасли крупнейшую медиатеку в рунете. Хотя всего навсего сделали вы то что делали сотни людей до вас — обошли роботом все раздачи и стащили их хеш суммы в текстовый файл.
А для спасения медиатеки рутрекера нужно парочку защищенных датацентов с дисковыми массивами в разных концах планеты.
Эта тысяча-другая техногиков сделает резервную копию созданной ими же медиатеки. Вот первейшая цель. Заодно выведет сам рутрекер из-под прицела правообладателей.
Извините но это полная глупость. Без самих раздач контрольные суммы вам не помогут никак. Они нужны только для того чтобы:
а) скачать что-то в той ситуации если нет под рукой трекера в узкотехническом смысле. (что маловероятно, т.к открытый трекер поднять — не проблема, но может пригодиться в той ситуации, если вдруг будет повальная охота за трекерами)
б) не плодить дублей при создании раздач заного.
в) осуществлять реверсивный поиск — по хешу можно найти описание раздач.
Еще раз повторю: без физически доступного где-либо в сети неизменненного ни на байт комплекта файлов раздачи — его хеш-сумма — набор бесполезных цифр. Тогда любые попытки скачать раздачу заведомо обречены на провал. В противном случае есть верятность получить данные, хеш сумму которых вы знаете, и эта вероятность пропорциональна «популярности» раздачи в сети.
Да-да. Может просто перестать давать им возможности удалять раздачи? Ну или если Вам все-таки неймется — удаляйте непосредственно с форума рутрекера, раздавая их через API.
Спасибо за очередной ценный совет.
Учитывая ваш нездоровый интерес к прибыли Рутрекера предлагаю вам самим открыть трекер на котором правообладатели не будут удалять ничего. Я более чем уверен что он станет мегапопулярным менее чем за полгода, и вы сможете крутить баннеры и неплохо зарабатывать.
Более того, мы готовы бесплатно рекламировать такой трекер в том случае если его ассортимент не будет пересекатся с нашим.
А для спасения медиатеки рутрекера нужно парочку защищенных датацентов с дисковыми массивами в разных концах планеты.
Чем больше будет отдельных узлов, тем будет надежнее. Поэтому лучше много малых сидбоксов, чем мало больших (размером с целый датацентр, к примеру). И чтобы админило их несколько людей, которые не знают реальных имен друг друга.
Кстати, не раз замечал, что мои раздачи выкачивают боты (судя по user agent) из разных уголков Земли. Раздачу с базой рутрекера, к примеру, уже парочка выкачала. Видимо, кто-то уже делает бекапы раздач. Боюсь, что только популярных. А надо делать бекапы редких раздач в первую очередь. Популярные раздачи не пропадут, если только кое-кто их не удалит.
Вы не могли бы дать сидбоксы или средства для их приобретения? Это и будет подстраховка. Можно вручную настроить сидбоксы или купить готовые (цены). Пример: 50 гигабайт, 6 раздач, неограниченный трафик, $50 в год. Хороший вариант, но число раздач маловато. Думаю, это далеко не самый дешевый вариант. Если будут сидбоксы или деньги для их покупки, то желающие спасать редкие раздачи найдутся.
Вы готовы выделить средства?
Стоит ли спасать и что именно — сложный вопрос. Гибель редких раздач — это беда torrent в целом. Конечно, это не касается новинок кино и музыки. Чем более редкая раздача, тем сложнее её скачать через торрент — получается зависимость с прямой обратной связью. Вполне достойные раздачи уникального контента могут пропадать. В первую очередь в зону риска попадают старые авторские раздачи, автор которых неактивен. Бывает, находишь раздачу какой-нибудь интересной книги или старой игры, а скачать не можешь.
> в случае чего — претензий к нам никаких
а сейчас в случае чего можно отправлять претензии ?!
а сейчас в случае чего можно отправлять претензии ?!
К сожалению, не было найдено способа узнать точный размер из исходного кода страницы раздачи.
Под кнопкой «Скачать .torrent» имеется кнопка «список файлов», в этом списке представлены все файлы с точным размером до байта.
Для этого нужно делать ещё один запрос страницы, т.к. эти данные подгружаются аяксом только по нажатию на кнопку (POST-запрос на адрес rutracker.org/forum/viewtorrent.php с передачей параметра t=id_темы_форума; естественно, нужно быть аутентифицированным на форуме, т.е. помимо прочего передавать установленные после логина куки). Видимо, автор программы (точнее, те, кто делал парсинг трекера) посчитал, что увеличение количества запросов в 2 раза не стоит того. Ну, или какие-то другие причины.
При очередном обновлении базы можно актуализировать эту информацию, т.к. собирать данные о размере можно и отдельно, благо id оставлены те же, судя по скриншоту.
При очередном обновлении базы можно актуализировать эту информацию, т.к. собирать данные о размере можно и отдельно, благо id оставлены те же, судя по скриншоту.
Ставить OpenSSL Light необязательно — можно просто положить в папку с программой 2 файла из ее состава — ssleay32.dll и libeay32.dll
Есть ли возможность скачать интересующий «торрент» без обращения к рутрекеру?
фичареквест есть.
запустил dump_viever, набрал в поле «название включает» текст, нажал enter. запустился и идёт поиск. тем временем набрал в том же поле другой текст для поиска, нажал enter — и ничего.
добавьте пожалуйста для такого случая какое-нибудь действие, хотя бы модальное окно с текстом «поиск уже идёт» и вариантами «отменить предыдущий поиск и начать новый» и «продолжать процесс поиска, заданный ранее».
заранее спасибо.
запустил dump_viever, набрал в поле «название включает» текст, нажал enter. запустился и идёт поиск. тем временем набрал в том же поле другой текст для поиска, нажал enter — и ничего.
добавьте пожалуйста для такого случая какое-нибудь действие, хотя бы модальное окно с текстом «поиск уже идёт» и вариантами «отменить предыдущий поиск и начать новый» и «продолжать процесс поиска, заданный ранее».
заранее спасибо.
Во время поиска на месте кнопки «Найти» отображается «Стоп». Во время поиска программа не реагирует на кнопку Enter в поле названия раздачи. Можно вместо этого прерывать старый поиск и начинать новый или делать окно ввода названия неактивным во время поиска.
«Во время поиска программа не реагирует на кнопку Enter в поле названия раздачи» — вот именно об этом и речь. я глубоко убеждён, что станет лучше, если она начнёт реагировать на «enter» во время поиска. умудряется же она в конце-концов каким-то образом реагировать во время поиска на нажатие кнопки «стоп»… =)
Исправлено. Бинарник для линукса. Бинарник под винду потом.
Обновил архив с бинарниками на bitbucket.org/ratnik/dump_viewer/downloads
Приложил к архиву ssleay32.dll, libeay32.dll и libssl32.dll.
init0, спасибо за инвайт!
Приложил к архиву ssleay32.dll, libeay32.dll и libssl32.dll.
init0, спасибо за инвайт!
dump_viewer.exe — Ошибка приложения
Ошибка при запуске приложения (0xc000007b).
Для выхода из приложения нажмите кнопку «ОК».
Windows 7 x64
Ошибка при запуске приложения (0xc000007b).
Для выхода из приложения нажмите кнопку «ОК».
Windows 7 x64
Залито на rutracker.
Если будут какие-то вопросы
Да, есть пара вопросов.
1. Почему базу Рутрекера нужно «спасать»? Ей сейчас реально что-то угрожает?
2. Если вдруг Рутрекер снова захотят закрыть, вы считаете, они не позаботились о сохранности базы на этот случай? Не умеют делать бэкапы?
3. База, которая не актуализируется, бесполезна, это очевидно. С задачей каталогизации и актуализации базы контента Рутрекер справляется неплохо. Вы так не считаете? Зачем тратить силы на создание какой-то альтернативы, вместо того, чтобы помогать самому Рутрекеру поддерживать то, что есть?
Пока ваша затея похожа на «скачать весь интернет». Прикольно, но пользы чуть. На TPB, помню, пару лет назад выкладывали такой «торрент всех торрентов», на Хабре даже писали об этом. Думаете, многие его скачали?
Спасибо за вопросы! Я частично повторю то, что писал J_o_k_e_R
1. Нужно. Лично я это понял, когда внезапно не нашел там любимых раздач, которые до этого висели и никому не мешали.
Как долго собираются потакать копирастерам? Если будет выбор между блокировкой сайта или удалением 10% раздач, кто знает, что выберут админы рутрекера. Не факт, что после удаления раздач получится вытрясти хотя бы их хеши. А если верховная власть объявит войну не только хентаю, но и аниме вообще? На чьей стороне тогда будет руководство трекера? Ни продвинутым, ни простым пользователям не придёт в голову скачивать с завирусованных сайтов то, что лежит на рутрекере.
2. Не уверен, так как бекап они зашифровали.
А вдруг там действительно белый шум? Открытое решение для такого важного бекапа лучше подходит. Лучше бы не шифровали, а подписали электронной подписью, чтобы можно было отличить поддельную таблицу от подлинной. Да и кто бы стал качать поддельную, если бы подлинная была официально выложена на самом рутрекере?
Сейчас наша база выложена у них, посмотрим за дальнейшей судьбой раздачи. Статус официальной она не получит, как было сказано выше rutracker.
После поломки один популярный вики-сайт восстанавливали из кеша гугла, потому что админы не умели делать бекапы. Надо подстраховать эту возможность в отношении рутрекера.
3. Актуализация планируется (раздел «Дальнейшие планы»).
Пост про аналогичную раздачу всей пиратской бухты. Не знаю, сколько именно людей скачали, но в данный момент на раздаче 78 сидов и это без учета DHT, как я понимаю. Если всё хорошо пойдет, их раздачу тоже обновим.
1. Нужно. Лично я это понял, когда внезапно не нашел там любимых раздач, которые до этого висели и никому не мешали.
Как долго собираются потакать копирастерам? Если будет выбор между блокировкой сайта или удалением 10% раздач, кто знает, что выберут админы рутрекера. Не факт, что после удаления раздач получится вытрясти хотя бы их хеши. А если верховная власть объявит войну не только хентаю, но и аниме вообще? На чьей стороне тогда будет руководство трекера? Ни продвинутым, ни простым пользователям не придёт в голову скачивать с завирусованных сайтов то, что лежит на рутрекере.
2. Не уверен, так как бекап они зашифровали.
А вдруг там действительно белый шум? Открытое решение для такого важного бекапа лучше подходит. Лучше бы не шифровали, а подписали электронной подписью, чтобы можно было отличить поддельную таблицу от подлинной. Да и кто бы стал качать поддельную, если бы подлинная была официально выложена на самом рутрекере?
Сейчас наша база выложена у них, посмотрим за дальнейшей судьбой раздачи. Статус официальной она не получит, как было сказано выше rutracker.
После поломки один популярный вики-сайт восстанавливали из кеша гугла, потому что админы не умели делать бекапы. Надо подстраховать эту возможность в отношении рутрекера.
3. Актуализация планируется (раздел «Дальнейшие планы»).
Пост про аналогичную раздачу всей пиратской бухты. Не знаю, сколько именно людей скачали, но в данный момент на раздаче 78 сидов и это без учета DHT, как я понимаю. Если всё хорошо пойдет, их раздачу тоже обновим.
Товарищи, ну а кто, простите, мешает выложить на абузоустойчивый сервер с гигабитным каналом?
эта затея имела бы смысл, если бы был удобный клиент к базе — гибкий и быстрый поиск, автоматические апдейты, новинки разделов, возможность подгрузки дополнительной информации с рутрекера (сиды, каменты) и отправки — т.е. запостить камент, добавить в избранное и тп, интеграция с имдб и др сервисами.
1 зачем база шифрованная? рутрекер пароли откнытым текстом хранит?
2 что мешает выдрать конфеденциальную инфу из базы?
3 видимо рутрекер опасается конкурренции, ибо если база перекочует на другие ресурсы, то рутрекер сдохнет просто потому, что больше будет не нужен. единственная его ценность — это основное хранилише авторских раздач. это его ниша.
4 есть замечательный сайт — btdigg. индексирует все неприватные торренты, у участников раздачи которых включен dht. большинство редкостей откапываю там.
5 автоматическое переоформление релизов в соответствии с правилами трекера реализовали? если нет, то экспорт в основном будет бесполезен. на бухту и кикэсс конечно пойдёт, но на большинстве форумов экспортера забанят, а раздачи закроют.
2 что мешает выдрать конфеденциальную инфу из базы?
3 видимо рутрекер опасается конкурренции, ибо если база перекочует на другие ресурсы, то рутрекер сдохнет просто потому, что больше будет не нужен. единственная его ценность — это основное хранилише авторских раздач. это его ниша.
4 есть замечательный сайт — btdigg. индексирует все неприватные торренты, у участников раздачи которых включен dht. большинство редкостей откапываю там.
5 автоматическое переоформление релизов в соответствии с правилами трекера реализовали? если нет, то экспорт в основном будет бесполезен. на бухту и кикэсс конечно пойдёт, но на большинстве форумов экспортера забанят, а раздачи закроют.
1. Наша база не шифрованная. Видимо, это сообщение предназначалось rutracker.
2. Конфиденциальной информации нет ни у нас, ни в предыдущей раздаче нет. В том числе паролей.
3, 4. Уже есть клоны, но рутрекер живет.
5. Обновление базы планируется.
2. Конфиденциальной информации нет ни у нас, ни в предыдущей раздаче нет. В том числе паролей.
3, 4. Уже есть клоны, но рутрекер живет.
5. Обновление базы планируется.
Вы не очень хорошо понимаете суть проблемы. Так вот нет никаких проблем что кто то перевыложит раздачу с Рутрекера на другой форум.
Проблема в том что у этого форума свой трекер, половина скачает тут, половина там, и облако раздачи будет раздроблено уже по двум трекерам. А ето значит что «живучесть», да и скорость этой раздачи сильно упадет, т.к трекеры не обмениваются своими таблицами пиров. Каждые видят только своих.
DHT лишь частично спасает ситуацию, т.к многие юзеры в РФ сидят за маскарадингом, да и вообще, работает на порядок медленнее.
Если бы они использовали наши трекеры (bt.rutracker.org и т.п ), хотя бы просто включали их в свои торренты как дополнительные т.п то проблем бы не было. Но никто этого не делает, в результате получаем пиры, размазанные по разным трекерам и не видящие друг друга.
Или например технология обмена пирами между трекерами, если бы она была — то трекер мог бы искать недостающие пиры на других трекерах.
Знаю даже людей, которые во все торренты скачанные где-то еще ручками подсовывают адреса наших трекеров (bt-bt3.rutracker.org).Говорят иногда помогает.
Проблема в том что у этого форума свой трекер, половина скачает тут, половина там, и облако раздачи будет раздроблено уже по двум трекерам. А ето значит что «живучесть», да и скорость этой раздачи сильно упадет, т.к трекеры не обмениваются своими таблицами пиров. Каждые видят только своих.
DHT лишь частично спасает ситуацию, т.к многие юзеры в РФ сидят за маскарадингом, да и вообще, работает на порядок медленнее.
Если бы они использовали наши трекеры (bt.rutracker.org и т.п ), хотя бы просто включали их в свои торренты как дополнительные т.п то проблем бы не было. Но никто этого не делает, в результате получаем пиры, размазанные по разным трекерам и не видящие друг друга.
Или например технология обмена пирами между трекерами, если бы она была — то трекер мог бы искать недостающие пиры на других трекерах.
Знаю даже людей, которые во все торренты скачанные где-то еще ручками подсовывают адреса наших трекеров (bt-bt3.rutracker.org).Говорят иногда помогает.
А почему бы и вам и другим трекерам не дописывать глобальные ретрекеры (openbittorrent, publicbt, ccc.de)? Ещё помогает технология обмена трекерами между пирами. Ятестировал наугад многие хеши их базы на предмет нахождения пиров исключительно через DHT и во всех случаях пиры нашлись.
Да я Вам больше скажу – с некоторых, казалось бы, совершенно посторонних трекеров скачиваются торренты, где написано «создатель: torrents.ru». :)
А по базе мне лично просто удобней искать, но это не значит, что я отвернусь от сайта.
А по базе мне лично просто удобней искать, но это не значит, что я отвернусь от сайта.
Есть у меня сервер один. С гигабитным каналом. Расскажите (дуб дубом я) куда что там положить, чтобы ваша раздача было в общем доступе.
Парни, а никто еще не заметил, что автор девушка? :)
bitbucket.org/ratnik/dump_viewer/commits/all
bitbucket.org/ratnik/dump_viewer/commits/all
Вопрос — а нельзя добавить сюда все заблокированные типа рутора, какие там еще есть, сам TPB, тфайл, нонейм… И сделать общую базу?
хотелось бы увидеть статью «как я парсил рутрекер»…
Я думаю, это не потянет на статью. Перебирались все раздачи, скачивали (нужна кука, чтобы выдавался торрент-хеш), отбирались живые (те, в которых присутствовал torrent-hash), остальные значения выдергивались регекспом и записывались в таблицу, описание сохранялось в файл. В названии раздачи HTML-конструкции заменялись на символы юникода. Файлы с описаниями добавлялись по несколько в архивы. (Добавлять каждый отдельный файл в архив будет медленно, а всё сразу архивировать в конце — будет слишком много файлов на диске к этому моменту.) Потом таблицу отсортировали по ID, нашли «пробелы» в 100 и более несуществующих раздач и все они перекачались ещё раз, на случай если трекер был недоступен, когда они первый раз скачивались, к примеру. Потом пересортировали таблицу по числу скачиваний. Всё, кажется. Если интересны скрипты, которые всё это делали, могу выложить.
Сижу на раздаче — 0 (ноль!) сидов, 13 пиров… Что случилось? Всех повязали?
/me ушел открывать свой рутрекер :)
Может, пригодится кому – слепил для себя, ибо смотрю базу вручную. :)
Конвертер из base32 в обычный hex формат.
Скопировать в файл (.xxe), декодировать в .rar Total Commander'ом или чем-нибудь наподобие http://www.webutils.pl/XXencode.
Контрольные суммы b32-ih.exe:
sha-1: fad617c37f5ed3a6844cb723551dfdacfc18a412
md5: 54b8c8e32330b793dc94f2040a5040d7
Выглядит примерно так:
begin 644 b32-ih.rar
hIa3m6Fc5+23kQkk+1E++++++++-80LG+Y0w+hU6++++4+++0NZXrerKHD2AR
hBEc+60+++46nAWpdO0tZS4I+wA9f0uQMHEyY2rkqvbdtPIcidaNNFfQ3ceAZ
hm8K-DwCe1a20hSpuEqykzGWHjqmDjJGAb58-WiWe1L0+n4fMXBCMT4CtYQ0+
hLwyNmVyC0j-tPAedjRppB9FqrVrAvpVu9Ty21FRX+OC0OcxJu3BZxEeNjzf+
hTIbFZQxVELAULAlUf7TBUd9L0bfuWtlJBGN1+E2TqbfGxxP-Vm3x3RXqQdx9
hRb2wv7ZrNmKyhFRyAh+bDU6kDwGw+n+zkCnCyjraKPNEafN6YONMPcbDFlfv
hi6zexlBVOsaK54Gi26+x0h1N+NR4qG9-A2W4BeONzUWGZPSyLgfCqLbT4WRg
hDD5Dr0IQeY20BGBI5Usw-Fkzll9cBYEZgvT9dS0Ge+VTyXLiSbi6rHnwO8ZP
hxydQ8FHeM0nY-Y-SC1mxFrMPcG-BGe9DK8B73YHgKqgZBGXkwDaENi9PUV9q
hwrJbanJXLRt3x0HCCSqelnhuV91Y9SDn+FG+c1fF-JW+7NFfrzzbMf7ftWQG
hxsMhk1EpyQPQzwKe6vZeLYCn-ZKgImaC2v4W4+rfunxHCGJ6dWPeFXq7RUgS
hYiP3L1r6u7NQ+asRwxqQ2IetdmewQL7wNKx6K+cbb7sIqR3A3c5CyIiSR2RD
hUS5x57yMRkzW0MTpvZm3DHC4v7rzIo7x7JUR-EODUGe0cMVHvYRRGCzCLiWn
hql8AKHTLQR6bBkc6mPcvMkZt-6iZRhC-6eX0HORCjC-KwASduRpkBGFmMmsx
hS8WcSbuyWT-dc27+AguE-DjA8Pk-sMK2QuxYbFxRTm+QdbTbKeKHm9iiz2Fl
hDPJNaiRm2JD0ikVabF1Swjt8+PpStPq1KT9IA1TeYa1H-yuLYBsziw2PRkN6
hU6ZLmP1vn+2zmjqRkfb0f3g+bBnPbMbj7r9LUp9giRk++9y6NzOdzxH2DLg+
1E+Q+
+
end
sum -r/size 26930/768Контрольные суммы b32-ih.exe:
sha-1: fad617c37f5ed3a6844cb723551dfdacfc18a412
md5: 54b8c8e32330b793dc94f2040a5040d7
Выглядит примерно так:
Спасибо! Ещё можно для этой цели использовать сайты вроде tomeko.net/online_tools/base32.php
Приглашаю заинтересованных в конференцию torrents-database@conference.jabber.no
если N раздач наугад качают M независимых пауков со скоростью X раздач в сутки, то через какое время (ожидаемое) они выкачают долю Y всех раздач?
Антон получил численное решение задачи по теорверу из поста.
Рассмотрен случай 10 пауков, 1 500 000 раздач, каждый скачивает 1000 раздач в день. По абсциссе отложено время в днях, по ординате — доля загруженных раздач. Допущения: раздачи не создаются и не обновляются за это время, пауки запоминают список всех загруженных ими раздач, но не обмениваются этими списками друг с другом.
Пояснение к решению: каждый паук запоминает номера всех загруженныех раздач, чтобы не загружать их повторно, однако между собой они списками загруженных раздач не обмениваются. Добавление нового паука приведет к тому, что от суммы его вклада с остальными пауками нужно будет отнять произведение их вкладов — это раздачи, независимо загруженные обоими пауками.
Как выяснилось, новые и измененные раздачи рутрекера можно отслеживать через Atom, поэтому перебор раздач наугад становится неактуальным для rutracker. Но решение все равно интересное и может пригодиться для других трекеров, у которых нет возможности отслеживать обновления.
Доброго времени суток, простите, возможно ответ на вопрос Вам не известен, однако планируются ли обновления данной БД, и известны ли хоть какие то сроки?
В свете последних дней узнал об этой теме ;) База пригодилась, спасибо.
Единственное, чего сразу мне захотелось — это видеть еще и где-то ник создателя раздачи. Понятно, что он может меняться, но все равно полезно было бы видеть. Например, есть лица, которые делают хорошие раздачи и их ник — уже плюс для выбора такой раздачи среди других.
Не обязательно на странице поиска, в описании — уже хорошо. Сейчас я там вижу нечто похожее на подпись — «Мои раздачи». Только вот чьи это, без форума рутрекера не посмотреть.
Единственное, чего сразу мне захотелось — это видеть еще и где-то ник создателя раздачи. Понятно, что он может меняться, но все равно полезно было бы видеть. Например, есть лица, которые делают хорошие раздачи и их ник — уже плюс для выбора такой раздачи среди других.
Не обязательно на странице поиска, в описании — уже хорошо. Сейчас я там вижу нечто похожее на подпись — «Мои раздачи». Только вот чьи это, без форума рутрекера не посмотреть.
Можно зафиксировать текущее состояние:
список всех раздач rutracker.org в виде magnet ссылок
rutracker.org/forum/viewtopic.php?t=4204390
К этой официальной раздаче администрация RuTracker опубликовала ключи доступа
Список всех раздач rutracker.org в формате csv
rutracker.org/forum/viewtopic.php?t=4824458
Эта официальная раздача выдаёт информацию сразу незашифрованной
список всех раздач rutracker.org в виде magnet ссылок
rutracker.org/forum/viewtopic.php?t=4204390
К этой официальной раздаче администрация RuTracker опубликовала ключи доступа
Список всех раздач rutracker.org в формате csv
rutracker.org/forum/viewtopic.php?t=4824458
Эта официальная раздача выдаёт информацию сразу незашифрованной
Зарегистрируйтесь на Хабре, чтобы оставить комментарий
Спасем крупнейшую медиатеку в рунете. Вся база rutracker у Вас на компьютере