LINUX.ORG.RU
ФорумTalks

Свершилось: встречайте HDD over Ethernet

 , ,


0

1

Как сообщает хакер.ру, компания Seagate выпустила технологию Kinetic Open Storage, которая, условно говоря, представляет из себя интерфейс HDD over Ethernet. Кратко описывается в чем новшество на примере облачных технологий. Вот как сейчас приложения получают доступ к внешним хранилищам:

Рис. 1 - настоящее

А вот как изменится инфраструктура с новой технологией:

Рис. 2 - будущее

Такая технология пригодится и дома! Вот у меня есть роутер с гигабитами, но разъемы пустуют. Сервер ради шары держать лень. USB + SMB/FTP/HTTP страдают тем, что производительность слишком низкая. Более того, создают нагрузку на роутер, который должен передавать ip-фреймы, а не лезть в не свои дела: играть роль посредника между ПК/лэптопом/смартфоном и жестким диском. И кроме того, у роутера обычно один разъем USB (да, разветвители это тоже оверхед).

★★★★★

Последнее исправление: gh0stwizard (всего исправлений: 1)

не осмыслил.
раз такие умные, пусть добавят порт RG45 к своим винтам, делов то?

Deleted
()

компания Seagate

Хм, ожидал увидеть имя Леннарта Поццеринга…

AX ★★★★★
()
Ответ на: комментарий от devl547

Это iSCSI или AoE?

Ни то, ни другое. Судя по описанию (надо признать скудному на технические ньюнсы) это tcp-сервер в контроллере диска: так как их Kinetic Open Storage (описывается как API) позволяет производить аутентификацию и авторизацию, использовать TLS, просматривать статистику SMART (у них простыня про key/value storage). Вобщем, встроенная навороченная samba :-)

gh0stwizard ★★★★★
() автор топика

Отлично, теперь жесткий диск будет сам загружать весь найденный прон на сервера АНБ.

ncrmnt ★★★★★
()
Ответ на: комментарий от ncrmnt

а ещё портить данные на следующий день после окончания гарантии :)

хотя в принципе и сейчас может, что мешает

Harald ★★★★★
()

Теперь левый скрипт на сайте может форматировать мне жёсткий диск?

Nebuchadnezzar ★★★★
()
Ответ на: комментарий от gh0stwizard

Kinetic Open Storage (описывается как API)

т.е. нифига не open, да ещё, небось, и лицензирования требует.

dimon555 ★★★★★
()

USB + SMB/FTP/HTTP страдают тем, что производительность слишком низкая.
USB

Естественно!

SMB/FTP/HTTP

А NFS?

Более того, создают нагрузку на роутер, который должен передавать ip-фреймы, а не лезть в не свои дела:

Во-первых есть NAS

HDD over Ethernet... Если там то же, что и в ATA - смотрю скептически, так как тогда по IP нужно передавать всякие команды HDD, а это намного больше, чем «Прочитать файл X».

Kroz ★★★★★
()
Ответ на: комментарий от CYB3R

Кто-то изобрёл NAS.

да ещё и с закрытым протоколом.

dimon555 ★★★★★
()
Ответ на: комментарий от Kroz

USB

Что, даже 3.0?

А NFS?

Тоже оверхед приличный.

HDD over Ethernet... Если там то же, что и в ATA - смотрю скептически, так как тогда по IP нужно передавать всякие команды HDD, а это намного больше, чем «Прочитать файл X».

Bullshit. В hdd будет тупо свой простой как пробка протокол класса «велосипед» (ибо ничего сложного туда не запихнут), реализованный в контроллере. Так что скорее по сети будут передаваться read/write'ы

ncrmnt ★★★★★
()
Ответ на: комментарий от ncrmnt

Что, даже 3.0?

Сравни скорости с другими интерфейсами.

> А NFS?
Тоже оверхед приличный.

Тесты в студию.

В hdd будет тупо свой простой как пробка протокол класса «велосипед» (ибо ничего сложного туда не запихнут), реализованный в контроллере. Так что скорее по сети будут передаваться read/write'ы

Ты представляешь сколько нужно будет передать команд «прочитать сектор»? Особенно если файл фрагментирован? И теперь наложи оверхед Ethernet.

Kroz ★★★★★
()
Ответ на: комментарий от Deleted

раз такие умные, пусть добавят порт RG45
RG45

не осмыслил.

Не удивительно

next_time ★★★★★
()

Кратко описывается в чем новшество на примере облачных технологий.

облко, облко, щячлопопячься, я маркетоидная мразь, убейтеменяхтонибудь

FiXer ★★☆☆☆
()

Ещё один NAS-велосипед? Похоже, у Seagate дела совсем плохо, раз старое и известное представляют новым.

Quasar ★★★★★
()
Ответ на: комментарий от Kroz

Сравни скорости с другими интерфейсами.

3.0: 5Gbit/s Анонсированный недавно 3.1 обещают до 10 Gbit/s Ethernet в _лучшем_ случае будет давать 1Gbit/s, реально 600-700Mbit, так как SoC'и не протягивают.

Ты представляешь сколько нужно будет передать команд «прочитать сектор»? Особенно если файл фрагментирован? И теперь наложи оверхед Ethernet.

Я прекрасно это знаю, потому отдельные команды слать по ethernet'у никто не будет. Это проще все реализовать в контроллере сразу. Скорее всего по сети тупо будут экспортировать блочное устройство, с которым можно будет через API делать read/write, ну и десяток служебных операций типа чтения SMART'а. Я очень сомневаюсь, что кто-то будет реализоввывать там файловую систему, ибо тогда проблем с совместимостью (win/lin/mac) не оберешься, да и костылем пахнет

ncrmnt ★★★★★
()
Ответ на: комментарий от Kroz

А NFS?

У NFS есть проблемы с блокировками (если не слышал/не знаешь об этом, спи крепче :)

Во-первых есть NAS

Конечно есть, а embedded NAS еще не было :)

смотрю скептически, так как тогда по IP нужно передавать всякие команды HDD, а это намного больше, чем «Прочитать файл X».

By design, Seagate Kinetic Storage-supported drives are native key/value stores. This shifts the burden of maintaining the space mapping of a device from a file system to the drive itself. Applications can put and get objects; they no longer need to guess at LBA layout or prescribe data location. This shift largely eliminates a very significant amount of drive I/O that moves no data but rather represents metadata- and file system-related overhead. (In a recent benchmark, this overhead accounted for up to 92% of drive activity.)

gh0stwizard ★★★★★
() автор топика
Ответ на: комментарий от ncrmnt

3.0: 5Gbit/s Анонсированный недавно 3.1 обещают до 10 Gbit/s

Есть такое.

Ethernet в _лучшем_ случае будет давать 1Gbit/s

Отключай криокамеру: 10Git/s, 40 Gbit/s, 100GBit/s

реально 600-700Mbit, так как SoC'и не протягивают.

Как ты технично приплел реальную скорость, и именно в отношении Ethernet. Сколько реально будет давать USB 3.0 / 3.1 ?

Kroz ★★★★★
()
Ответ на: комментарий от gh0stwizard

У NFS есть проблемы с блокировками (если не слышал/не знаешь об этом, спи крепче :)

Я сова, не люблю много спать :)
Поподробней про блокировки можно? Только не отсылай в просторы интернета, а в двух словах: что такое, из-за чего, каков эффект.

Конечно есть, а embedded NAS еще не было :)

Ну, тогда так и нужно говорить.

By design, Seagate Kinetic Storage-supported...

Ерунда какая-то:

Applications can put and get objects;

Что такое object? Файл? Тогда это ФС? Тогда не нужно.

Kroz ★★★★★
()
Ответ на: комментарий от Kroz

Поподробней про блокировки можно?

Нет. Если все разжевывать потянет на статью. А если коротко, то NFS оставляет заботу о записи на удаленный диск клиенту, который эти данные пишет. В следствие этого есть особенности в работе NFS. Тут на английском в общих чертах расписано. Вобщем, если у тебя все работает как надо, значит никаких проблем у NFS в твоем случае нет.

Что такое object? Файл? Тогда это ФС? Тогда не нужно.

Хех, в mongodb (gridfs) аналогичная архитектура. И имеет свои плюсы и минусы. Тебе может и не нужно, а мне бы хватило.

gh0stwizard ★★★★★
() автор топика
Последнее исправление: gh0stwizard (всего исправлений: 3)

«PLIP - Parallel Line IP - некоторые скажут - экзотика. Ничуть не бывало. Весьма распространенная вещь. Вот когда TCP/IP по SCSI-шине - это да, это - экзотика. »
http://citforum.ru/operating_systems/solaris/slip.shtml

лет 15 статье? круг замкнулся...

Anonymous ★★★★★
()
Ответ на: комментарий от ncrmnt

файловая система всего одна, какие проблемы с совместимостью?

onon ★★★
()
Ответ на: комментарий от Kroz

Отключай криокамеру: 10Git/s, 40 Gbit/s, 100GBit/s

Да, да... И оптоволокно между компами по квартире. Давай прикинем: PCIe карта на 10Gbit/s в среднем 125 баксов за штуку. Самый голимый неуправляемый свитч нам встанет в районе 750 баксов. Ну и кабели. Это реально только в ДЦ, где это позарез надо. В конторах серьезных и то больше гигабита не найдешь, я уже молчу про домашних пользователей.

Как ты технично приплел реальную скорость, и именно в отношении Ethernet. Сколько реально будет давать USB 3.0 / 3.1 ?

USB 3.0 у меня с ноутбучного веника шпарит где-то 60-65 Mb/sec, ровно столько же сколько этот древний веник выдает по SATA. Пиковую производительность, где боттлнеком станет именно USB 3.0 у меня пока не было возможности проверить. В отличие от Ethernet'а

ncrmnt ★★★★★
()
Ответ на: комментарий от gh0stwizard

В следствие этого есть особенности в работе NFS. Тут на английском в общих чертах расписано.

Там еще не открыли для себя NFS4, которая очень сильно отличается от NFS3 по дизайну.

ak380618
()

Это после того, как они контроллером жесткого диска стали ставить ARM и MIPC SoC-и. Теперь придумали, что всю NAS-овскую логику можно туда перенести. Им бы теперь еще и программы перепрошивки этих контроллеров между собой стандартизировать, и можно будет делать аналог OpenWRT- OpenStorage или что-то в этом родею.

XVilka ★★★★★
()
Ответ на: комментарий от XVilka

Мы живём в странное время, когда компьютерные комплектующие превращаются в полноценные компьютеры =\

Nebuchadnezzar ★★★★
()

Отлично во времена, когда носители ради скорости уже подключают через PCI-e, мы будем предлагать подключать их через тормозной и не предназначенный для этого интерфейс с миллисекундными задержками.

Axon ★★★★★
()
Ответ на: комментарий от XVilka

Так OpenWRT туда и впилить, чего мелочиться-то!

ncrmnt ★★★★★
()

написано, что это key-value storage, а не hdd over ethernet.

Кому верить? Про поддежку нормальных сетевых файловых систем или блочного доступа ни слова.

ihanick
()

Рис. 2 - будущее

что вот так прямо будут байты картинок и видео на винт пихать, в обход ФС? Хм, интересно, надо попробовать. Кто пожертвует винт на опыты?

darkenshvein ★★★★★
()
Ответ на: комментарий от ihanick

Кому верить?

Несколько погорячился с заголовком, сорри.

gh0stwizard ★★★★★
() автор топика

Они открыли для себя ata over ethernet или мне показалось?

tazhate ★★★★★
()
Ответ на: комментарий от ncrmnt

Да, да... И оптоволокно между компами по квартире.

Ты будешь смеяться, но оптика стоит значительно дешевле меди. Если же смотреть всякую «высококатегорийную» медь, то дешевле на порядки.

Причем интересный момент, например цена оптического патч-корда не сильно зависит от его длинны: большую часть стоимости составляют разъемы.

Macil ★★★★★
()
Ответ на: комментарий от devl547

Это iSCSI или AoE?

Это — энтерпрайз. Прикрутили key-value хранилище к своим железякам.

KV, конечно же классная архитектура, и много чего прикольного позволяет... Особенно если есть поддержка индексов... Как ни крути, а та же самая MongoDB — по сути дела KV хранилище.

Если говорить для домашнего применения, то хранение редко изменяемых данных, те же самые торренты. В такой модели совершенно естественным будут высокий параллелизм как на запись, так и на чтение и гибко настраиваемая степень репликации.

Но лично я бы видел отдельный девайс с FPGA, процессором, парой, SATA, кучей памяти, системой буферов (энергонезавсимых и энергозависимых), емкой батарейкой, и SPF.

Macil ★★★★★
()
Ответ на: комментарий от Macil

Да это-то ясно, только разъёмы и оборудование это компенсируют.

ncrmnt ★★★★★
()
Ответ на: комментарий от qrck

SAN, существующие уже сотни лет?

/me представил, как должен выглядеть SAN века так девятнадцатого. Получился стимпанк.

Seagate изобрели SAN?

Нет, в очередной раз велосипед.

om-nom-nimouse ★★
()

Сервер ради шары держать лень.

ну и зря, выкинуть роутер, поставить более-менее полноценную систему которая будет для всего

lazyklimm ★★★★★
()

За 100500 гжигурдей (за которые можно купить SAN/сервер для хардов) и проприетарыми либами?

ktulhu666 ☆☆☆
()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.