Добавлен новый раздел форума — Science & Engeneering. Предназначен для обсуждения свободного софта в научной области; обсуждение научных и инженерно-технических приложений и других околонаучных вопросов.

На первое время создание топиков ограничено 5-ю звездами, а комментариев — одной звездой.

Ограничение введено только на начальный период существования группы и в дальнейшем будет снижено.

Обновление (21 апреля): создание топиков разрешено для 4-х звезд

Обновление (24 апреля): создание топиков разрешено для 3-х звезд

Обновление (28 апреля): создание топиков разрешено для 2-х звезд, для комментирования требуется score>=50

Обновление (5 мая): для комментирования и создания топиков требуется score>=50

В разрабатываемую сейчас новую версию PostgreSQL, 9.4, было добавлено новое хранилище JSON документов — JSONB. На смену текстовому представлению JSON пришел эффективный двоичный формат, позволяющий осуществлять быстрый доступ к отдельным полям документа.

Хранилище создавалось с учетом наработок по HSTORE — key-value хранилищу, созданному почти 10 лет назад в рамках проекта PostgreSQL. Аналогично HSTORE, для JSONB была добавлена поддержка GIN-индексов. Так, производительность реализации операции «содержится в» по индексу сравнима с производительностью аналогичной операции в MongoDB.

По мнению Josh Berkus, одного из членов PostgreSQL Core Team, добавление JSONB является наиболее важным изменением в PostgreSQL, позволящее ему составить конкуренцию MongoDB и другим документным хранилищам.

>>> Подробности

Oracle анонсировал выпуск новой версии Java SE — 8.

В эту версию вошел ряд значительных изменений, в том числе:

• В язык Java добавлена поддержка лямбда-функций. Разработчикам языка удалось добавить замыкания в язык таким образом, что их можно применять в большом количестве API, разработанных для предыдущих версий языка.
• Stream API. В стандартную библиотеку коллекций были добавлены функции filter/map/reduce/т.п., позволяющие производить обработку и преобразование коллекций в функциональном стиле. Также были добавлены коллекции с автоматическим распараллеливанием операций преобразования с использованием Fork/Join Pool.
• Nashorn — новый эффективный интерпретатор JavaScript.
• Date & Time API — новое API для работы с датами и календарем, построенное на идеях популярной библиотеки Joda Time.

Коммерческая версия Oracle JDK построена на базе opensource реализации OpenJDK и содержит некоторое количество дополнений (наиболее значительное — Mission Control, средство для сбора анализа статистики работы JVM).

>>> Подробности

Немного понастраивал HTTPS в соответствии с рекомендациями лучших собаководов. Напишите мне если у вас, вдруг, SSL перестал работать, браузер жалуется на сертификат, перечеркивает надпись «https» или возникает еще что-то такое.

Вышла новая версия Akka — фреймворка для построения параллельных и распределенных приложений для Scala и Java.

Основные изменения этой версии:

• Akka Persistence: сохранение состояния актора для его восстановления при рестартах и сбоях. Сохранение состояния производится путем записи журнала изменений и периодических «снимков» состояния. Модуль основан на проекте Eventsourced, но имеет ряд важных отличий.
• Java API был расширен поддержкой лямда функций Java 8
• В Akka Cluster была добавлена возможность возвращения в кластер узлов, попавших в состояние UNREACHABLE.
• Переработан Router API.
• Модуль ассинхронного ввода-вывода Akka IO был объявлен стабильным API.
• Dataflow, Durable Mailbox'ы, Balanced Dispatcher, STM и Transactor'ы были объявлены устаревшими; модули Pipelines IO и Typed Channels были удалены.

>>> Подробности

Выпущена версия 1.0 Elasticsearch — сервера полнотекстового поиска и выполнения аналитических запросов в реальном времени. Elasticsearch представляет возможности распределения нагрузки по группе узлов с функциями отказоустойчивости; простой REST API с клиентами для большого количества языков; поддержку произвольного количества индексов и операций над группами индексов; работу в режиме без четко определенной схемы хранения данных. Elasticsearch построен на базе библиотеки Apache Lucene и распространяется под лицензией Apache 2.

Версия 1.0 находилась в разработке около 9 месяцев и включила более 8000 коммитов, созданных при участии более 180-ти контрибьюторов.

В этой версии (по сравнению с прошлой стабильной версией 0.90) были добавлены следующие функции:

• Snapshot/Restore — набор API для создания backup'ов и восстановления индексов. Помимо локальной файловой системы, для хранения backup'ов может использоваться HDFS или Amazon S3.
• Aggregations — новое семейство аналитических запросов. Функции построены на базе «фасетов» и дополнительно включают возможности вложенных агрегатов и комбинации агрегатных функций.
• Distributed Percolation — новая реализация «percolator», «обратной» версии поиска. В этом режиме в индексе сохраняются поисковые запросы, а через API поступают новые документы, которые фильтруются через эти сохраненные запросы. Новая реализация позволяет распределять поисковую работу над одним документом по многим узлам, поддерживает функции подсветки совпадений, аналитические запросы и пакетный режим работы.
• cat API — набор функций API, оптимизированных для использования в текстовой консоли. Предназначены для администрирования и поиска/исправления проблем на кластере.
• Federated search — специальный узел, способный одновременно быть членом нескольких не связанных между собой кластеров. Позволяет распределять по разным кластерам большую часть операций поиска и индексирования.

Изменения, которые необходимо учесть при обновлении с версии 0.90, описаны в документации.

>>> Подробности

Теперь внизу темы показываются топики, похожие на просматриваемый.

Видна пока только пользователям с 4-мя звездами, как закончу тестирование сделаю доступной всем. Функция в процессе отладки / настройки, иногда может не показываться.

История болезни: https://github.com/maxcom/lorsource/pull/570

Обновление: улучшен внешний вид; показываем пользователям с двумя звездами

Обновление: показываются всем зарегистрированным пользователям

Ищем разработкика Scala писать софт в области информационной безопасности. Требуется хорошее знание JVM (как минимум в области структур данных, параллельного/конкуретного программирования, Java NIO); знание распространенных интернет протоколов (HTTP/SMTP т.п.). Приветствуется опыт в разработке распределенных систем.

Так же интересны разработчики с хорошим знанием J2SE, желающие в будущем изучить Scala. Clojure разработчики тоже интересуют.

Приветствуется знание Lisp, Scheme или ML.

Резюме отправляйте на maxcom@jet.msk.su. Про зарплату меня не спрашивайте, если интересна позиция — пишите, я перенаправлю ваше резюме в на hr-отдел.

ГНУ/Линуксцентр проводит розыгрыш призов среди подписчиков Linux Format на 2014 год.

Чтобы принять участие в акции, необходимо до 25 декабря 2013 года оформить и оплатить редакционную подписку на печатную или электронную версию журнала Linux Format 2014 в интернет-магазинах по адресу shop.linuxformat.ru или http://www.linuxcenter.ru Номер заказа на подписку станет вашим регистрационным номером во время розыгрыша призов.

Все, кто уже подписался на Linux Format на 6 или 12 месяцев 2014 года, также участвуют в акции.

Полный список призов:

• Нетбук (3 шт.)
• Планшетный ПК (3 шт.)
• Модуль Raspberry Pi + корпус (3 шт.)
• Arduino Uno (3 шт.)
• ScrathDuino - Робоплатформа
• ScrathDuino - Лаборатория
• Игрушка автомобиль радиоуправляемый RedHat Audi R8 V10
• Комплект из 5 книг «Библиотека ГНУ/Линуксцентра» (10 комплектов)
• СУПЕРПРИЗ: 3D принтер RobbyHobby ArtLight

Розыгрыш призов будет проведен в течение декабря 2013 года, итоги будут объявлены на сайте журнала - http://www.linuxformat.ru

>>> Подробности

subj.

Если хост с Fedora 18, на котором по не понятной причине тормозит вход по ssh. Может длиться до 5 минут, хотя чаще около минуты. При повторных входах логинимся быстро. Появилось сразу после обновления с Fedora 17 на 18

Первое подозрение было на DNS, но он там во-первых работает, а во вторых проблема проявляется и при отключении DNS в sshd (UseDNS no).

Куда копать?

Переиндексирую поисковый индекс. Сначала поиск будет не доступен, потом будет строиться начиная с самых свежих сообщений. Переиндексируется примерно через час-два.

subj

Редакция журнала Linux Format, посвящённого Linux и свободному программному обеспечению, предлагает оформить подписку на бумажную версию журнала на следующий год со скидкой 12% для пользователей Linux.org.ru.

Воспользоваться предложением можно, проследовав по ссылке. Ссылка будет действовать до конца ноября.

>>> Подробности

Если кто-то сейчас на конференции, подходите, дам значков.

Пишите сюда или в твиттер

Ровно 15 лет назад, 21-го октября 1998 года был зарегистрирован домен Linux.org.ru.

По традиции, просьба написать в комментариях что бы вы хотели изменить на сайте, чего не хватает и какие функции стоит дальше развивать. Интересны и масштабные идеи по развитию, и мелочи, которые хотелось бы поменять, например, мешающие проблемы юзабилити и баги.

>>> Подробности

Apache Software Foundation анонсировал выход Hadoop 2.2, платформы для параллельной обработки больших объемов данных и параллельных вычислений. Версия 2.2 стала первой стабильной версией в семействе 2.x.

Основные новинки Hadoop 2.x:

• YARN — новая платформа управления задачами и ресурсами кластера, расчитанная на одновременный запуск различных приложения на кластере. Помимо Map-Reduce приложений, ядро теперь поддерживает поточные приложения, приложения баз данных, серверы для выполнения интерактивных запросов и т.п. Подробности о отличии новой архитектуры от 1.x можно прочитать в анонсе в блоге компании Hortonworks.
• NameNode, центральный индекс узел файловой системы HDFS, обзавелся собственными средствами обеспечения высокой доступности. В прошлых версиях NameNode являлась единой точкой отказа, и для повышения его надежности использовались сторонние решения
• NameNode теперь может быть разделен на несколько узлов, обслуживающих различные пространства имен
• HDFS, файловая система Hadoop, теперь так же доступна через NFSv3
• Поддержка снапшотов HDFS
• Поддержка шифрования трафика между узлами
• Различные улучшения производительности

>>> Подробности

Компания Typesafe в своем блоге объявила о том, что библиотека spray.io теперь стала частью их платформы. Библиотека spray реализует низкоуровневую поддержку протокола HTTP на базе акторов Akka. Часть библиотеки ранее уже была интегрирована в ядро Akka — компонент akka-io.

В результате интеграции планируется получить модуль Akka HTTP, предназначенный для реализации легковесных REST-сервисов и создания клиентов для них. Как и остальные компоненты Akka, новый модуль также получит Java API.

Play Framework, другая часть платформы, в настоящий момент самостоятельно реализует HTTP на базе Netty. В будущем планируется переход на использование spray, но с сохранением опциональной старой реализации.

>>> Подробности

28 октября, уже в седьмой раз, стартует «Highload++» — крупнейшая в России, да и во всей Европе, седьмая профессиональная конференция для разработчиков высоконагруженных систем.

В секции баз данных выступают Петр Зайцев (Percona), Монти (Monty), Олег Бартунов, Федор Сигаев, Илья Космодемьянский, Константин Осипов.

Константин Осипов расскажет про современные алгоритмы хранения данных на диске: LevelDB, TokuDB, LMDB, Sophia; а Alvaro Videla — про внутреннюю архитектуру RabbitMQ. AdRiver раскроет тему о хранении и обработке 60 тысяч событий в секунду, а Одноклассники — об обработке миллиардов записей в статистике этой социальной сети.

Поиск представлен уникальной технологией мультитерабайтного Sphinx-кластера, 2ГИС рассказывает про вертикальный поиск, а Mail.ru про организацию их собственного полнотекстового поискового движка.

Также в программе сравнение производительности NoSQL баз данных, распределённых файловых систем, тестирование производительности DNS-серверов, расчёт аппаратной нагрузки highload-проектов, вопросы безопасности, целый блок докладов про правильную организацию API.

>>> Подробности

На страничке тега теперь показываются теги, близкие к показываему. Например тут: www.linux.org.ru/tag/scala