Выпущена первая версия сервера хранения данных с доступом по протоколу HTTP, предназначенная для решения проблемы большого количества маленьких файлов на файловых системах, в том числе кластерных.

Некоторые возможности:

• многопоточность;
• мультисерверность, обеспечивающая отказоустойчивость и сбалансированность нагрузки;
• максимальная прозрачность для пользователя или разработчика;
• поддерживаемые методы HTTP: GET, HEAD, PUT и DELETE;
• управление поведением при чтении и записи через клиентские заголовки;
• поддержка гибко настраиваемых виртуальных хостов;
• поддержка целостности данных CRC при записи/чтении;
• полудинамические буферы для минимального потребления памяти и оптимальной настройки сетевой производительности;
• отложенная компакция данных;
• как дополнение — многопоточный архиватор wZA для миграции файлов без остановки сервиса.

Продукт предназначен для смешанного применения, в том числе поддерживается работа с большими файлами без ущерба производительности.

Основное рекомендуемое направление использования на origin серверах и крупных хранилищах для значительного снижения количества метаданных в кластерных файловых системах и расширения их возможностей.

Сервер распространяется под лицензией BSD-3.

>>> Статья

Опубликованы видео с конференции CS3 (Cloud Services for Synchronisation and Sharing) 2018, прошедшей 29-31 января в Кракове.

CS3 (Cloud Services for Synchronization and Sharing) — активно растущее сообщество, которое начало формироваться после первой встречи в 2014-м году в ЦЕРНе. Отличительной чертой CS3 является то, что оно выросло снизу вверх, без единой организации, являющейся спонсором или предоставляющей финансирование.

CS3 привлекает множество участников: компании, создающие прототипы локальных (on-premise) облачных хранилищ, университеты и лаборатории, предлагающие такие услуги для исследовательской и образовательной деятельности и представителей академического мира.

Страница мероприятия. Расписание.

>>> Видео

Azure Storage Explorer — это утилита, которая позволяет работать с сервисами хранилища в облачной платформе Azure: таблицами (noSQL хранилище), блобами (бинарные объекты) и очередями (передача данных от источника к получателю).

В новой версии реализована заявленная ранее поддержка операционных систем семейства Linux (в предыдущей поддерживались только Windows и Mac OS X).

Проект разрабатывается под лицензией MIT.

Репозиторий проекта на GitHub

>>> Подробности

Утилита npsync позволяет синхронизировать содержимое хранилищ с не-POSIX интерфейсами. Список возможностей включает:

• шаблоны/файлы включения/исключения синхронизируемых файлов и директорий;
• проверка контрольных сумм для выявления ошибок типа «тихая порча данных»;
• расширяемость с помощью утилит доступа к хранилищам с не-POSIX интерфейсом;
• список реализованных интерфейсов включает POSIX-хранилища, иерархическую систему хранения CASTOR, встроенный каталог в текстовом формате NPSYNC.

Основная область применения — синхронизация/проверка хранилищ с не-POSIX интерфейсами с объёмами хранимых данных десятки/сотни терабайт. Но и для POSIX-хранилищ встроенный каталог может быть полезен при регулярной проверке для своевременного выявления ошибок типа «тихая порча данных» и восстановления из неповреждённой копии.

Утилита npsync выложена на github в публичный доступ.

Руководство на русском https://github.com/bubo-bubo/npsync/blob/master/man/ru/man1/npsync.1.html

>>> Подробности

Представительство Red Hat в России и странах СНГ продолжает цикл вебинаров для технических специалистов на русском. Второй вебинар посвящен Red Hat Storage — комплексному программному решению NAS для современных центров обработки данных, виртуальных и облачных сред. Дата: 15 Октября 2013; 11:00-12:00 MSK.

>>> Регистрация

Разработчики из компании Backblaze ( предоставляющей услуги по хранению неограниченного объема данных клиентов за помесячную плату) открыли в общий доступ конструкцию разработанного ими «супернакопителя» The Pod («Стручок») объёмом до 67 терабайт данных с постоянным доступом через протокол HTTPS.

Цена такого накопителя при изготовлении собственными руками составляет менее 8 тысяч долларов – это намного меньше, чем предлагают именитые производители.

Программная начинка состоит из связки Apache+Tomcat.

Схемы и описание устройства

Спецификация

>>> Подробности

Device Mapper Multipathing позволяет "собрать" несколько маршрутов ввода/вывода между сервером и дисковым массивом в единое целое и рассматривать доступный по нескольким путям массив как одно метаустройство. Например, если сервер с двумя двухпортовыми HBA подключен к одному и тому же массиву, то сервер, в самом простейшем случае, будет "видеть" четыре устройства /dev/sd{a,b,c,d}. При помощи dm-multipath можно собрать из них агрегирующее все четыре пути метаустройство /dev/dm-N, обеспечив прозрачную для операционной системы и приложений конфигурацию, отказоустойчивую в случае выхода из строя HBA, кабеля или коммутатора (если каждый HBA подключен через свой коммутатор).

>>> Подробности

Вышла новая версия NexentaStor ― приложения для управления основанной на ZFS системой хранения данных уровня крупного предприятия. Дистрибутив NexentaStor основан на Nexenta Core Platform 1.x ― сочетании ядра OpenSolaris и рабочего окружения Debian.

В новом выпуске значительно улучшены как функциональные возможности, так и удобство использования NexentaStor:

• Обновлено ядро OpenSolaris (теперь build 102)
• Улучшена интеграция с CIFS/AD
• Исправлена ошибка управления аппаратными средствами
• Добавлена поддержка расширений (плагинов)
• Добавлено несколько расширений (плагинов), в том числе поддержка USB/Serial Port ИБП
• Много других улучшений и исправленных ошибок.

Сайт Nexenta

NexentaStor Developer Edition - полнофункциональная бесплатная версия без каких-либо ограничений

>>> Подробности

В данном обозрении рассматриваются возможности грядущего релиза OpenSolaris с точки зрения создания хранилищ данных промышленного уровня.

Помимо заметного улучшения призводительности ZFS, в этом релизе появятся другие новшества.

Также представлен ряд enterprise backup технологий, таких как NDMP service, Common Multiprotocol SCSI Target, SAM-QFS.

>>> Подробности