Нужны советы по организации раздач большого количества торрентов (объем до 40Тб)

У меня arm и kde 4.14, так что мои полсотни загрузок и раздач вполне умещаются в 80-120М. Если вспомнить как kde жрало и падало в 5-ом дебиане, или сравнить с кде5, то мне кажется у меня лучший вариант.

Есть результаты? Как оно на практике оказалось? Какие клиент, ОС, ФС?

Организационный вопрос: Как отслеживать раздачи? Как не раздавать умершие? Раздачу могли удалить или изменить, серию добавить.

Что значит не раздавать? Вполне успешено раздаю в dht с годами назад сдохшими трекерами. А приватные дрочильни не нужны. У меня поменьше раз в 10, трансмиссия отлично справляется. Сортировка вручную скриптами на диске. Да и какие нахрен сериалы? Только артхаус, только искусство, только лучшее.

насчёт раздавать одновременно тысячу ОП загнал чутка, но несколько десятков отлично раздаются и иногда кто-то один даже выжрет всю доступную полосу пропускания. всё анонсируется, и когда появляются желающие отлично раздаётся (в трансмисии, в qbittorent нет)

насчёт раздавать одновременно тысячу ОП загнал чутка, но несколько десятков отлично раздаются

Я трансмиссией вплоть до 500 торрентов держал, из которых сотня одновременно активных, управляя удалённо через transmission-remote-gui/transmission-remote-gtk.

Чем искать раздачи существующие только в DHT? Tribler?

А как у него с производительностью при больших нагрузках? GUI особо скоростью не радует.

Как не раздавать умершие?

В utorrent, например, раздачи (строки) краснеют, если нет связи с трекером и никто не подцепился по DHT. utorrent server кстати есть под онтопик. Интересно как у него с юзабельностью и производительностью? Можно посмотреть логи соединений с трекерами или даже скрипт автоматизации накатать.

RetroShare

Поставил RetroShare. Что там интересного есть? Фильмы какие-нибудь? В aMule можно прямо из коробки какой-нибудь редкий фильмец утянуть, а тут вроде бы нужны друзья, белый ip и какие-то группы.

Как это все сложно. Там, наверное, в основном азиаты, а мне бы французский и немецкий контент.

В i2p есть Torrent-трекеры. Работают со скоростью диалапа, но даже они юзабельнее ретрошары.

ну почему если добавлять только пиров которых ты верифицировал оффлайн, я думаю неплохо. и если что, ты всегда знаешь кого полом порезать. плохо когда твои друзья по интересам разбросаны по соседним, преимущественно азиатским, странам, конечно, попробуй найди их потом.

RAID10 + LVM + Transmission

О! Спасибо за uTorrent для Linux. Не знал о нём.

Правильно ли я понимаю, что Transmission не умеет ходить до треккеров через Proxy? Полезная опция для кармодрочеров. uTorrent умеет.

Умеет, но косвенно, и только до http(s)-трекеров: https://github.com/transmission/transmission/wiki/Environment-Variables#stand...

Если ходить на трекеры через прокси, трекеры зафиксируют и передадут пирам IP прокси, а не твой. В результате к тебе не смогут подключиться, так как будут долбиться на проксю, только ты сможешь. Плохо, если так будут делать все, между серыми IP соединение не может установиться. Особенно печально на приватных трекерах без DHT, где обычно кармадрочерством и занимаются.

Ты имеешь в виду наверное локальные прокси, которые накручивают цифры отданного. Такими почти не пользовался, проще честно раздавать. Но каюсь иногда после получения сидов, удалял или искажал адрес трекера в торрент клиенте, чтобы статистика скачанного не учитывалась и рейтинг не портился.

Да пусть хоть на диалапной скорости, лишь бы было и стабильно тянулось. Вон в осле на скорости 2 кбайт/с выкачал альбом, который запарился искать в интернете бесплатно.

Пользуюсь Transmission, претензии есть, но в целом все работает. Около 6 TB. Считаю, что рейд нужен. Наверняка будешь хостить уникальные торренты, которые просто так не перекачаешь.

На рутрекере как раз во избежание подобного советуют добавлять заголовок X-Forwarded-For с внешним IP. И если трекер такое поддерживает, тогда он будет сообщать другим пирам правильный адрес.

Ну и к серым IP за натом провайдера в любом случае никто не сможет подключиться, так что прокси даже без X-Forwarded-For для таких пиров особо ничего не изменит в плане связности. А вот для пиров с белым IP этот заголовок как раз будет очень полезен.

как я понимаю с любым софтварным в конкретный момент времени у тебя будет обращение только к одному диску.

?????

Купи Штеудовскую корзину для сервера, засунь в неё диски, настрой zfs raid 5 и посмотри как мигают лампочки.

Купи Штеудовскую корзину для сервера, засунь в неё диски, настрой zfs raid 5 и посмотри как мигают лампочки.

корзину с PMP или отдельными портами? или может еще на кофейной гуще гадать начать?

пруфы где? тесты? скриншот с iotop хотяб.

У меня были две с *чипом*(что такое PMP не знаю, но думаю что оно), я пересовал диски по корзинам так, что огонёк у меня бежал *лесенкой*, до этого он бегал линейкой.
Но в любом случае в каждый момент времени горел только один.

В принципе в этом нет ничего удивительного, чтобы софтварный рейд мог обратится к диску, ему надо занять системную шину, а она только одна и в конкретный момент времени может обслуживать только одно устройство(вроде так, пусть кто знает подтвердит или опровергнет).

уфф, если бекплейн с чипом и в него ведут меньше SAS/SATA линий чем дисков, то там SAS Expander или SATA Port Multiplier. в случае SATA PMP оно может работать в FIS режиме(быстро) или в Command-based switching режиме и по идее делать это достаточно медленно и воозмоооожно давать такой эффект как описал ты (но это не точно).

если количество sas/sata линий совпадает, то диски подключены в контроллер(raid HBA, интегрированый чипсет и тд) напрямую и оно будет утилизировать их одновременно и по максимуму. В случае hdd упрется в скорость дисков, в случае быстрых дисков (SSD) единственное ограничение по скорости тут может быть узкая шина самого SATA/SAS контроллера на большое количество портов. например 8 SAS/SATA на pci-e 1x.

а про светодиоды никому больше не говори, серьезно.

то там SAS Expander

Они, но их у меня два.

8 SAS/SATA на pci-e 1x

Выводов действительно восемь, но шина pci-e 8x.
Контролёр мне обошёлся примерно в 5,5 т.руб.
Если надо могу слазить и посмотреть какой именно, так могу сказать что эхто был какой-то логик.