Apache Software Foundation анонсировал выход Hadoop 2.2, платформы для параллельной обработки больших объемов данных и параллельных вычислений. Версия 2.2 стала первой стабильной версией в семействе 2.x.

Основные новинки Hadoop 2.x:

• YARN — новая платформа управления задачами и ресурсами кластера, расчитанная на одновременный запуск различных приложения на кластере. Помимо Map-Reduce приложений, ядро теперь поддерживает поточные приложения, приложения баз данных, серверы для выполнения интерактивных запросов и т.п. Подробности о отличии новой архитектуры от 1.x можно прочитать в анонсе в блоге компании Hortonworks.
• NameNode, центральный индекс узел файловой системы HDFS, обзавелся собственными средствами обеспечения высокой доступности. В прошлых версиях NameNode являлась единой точкой отказа, и для повышения его надежности использовались сторонние решения
• NameNode теперь может быть разделен на несколько узлов, обслуживающих различные пространства имен
• HDFS, файловая система Hadoop, теперь так же доступна через NFSv3
• Поддержка снапшотов HDFS
• Поддержка шифрования трафика между узлами
• Различные улучшения производительности

>>> Подробности (apache.org)

Компания Typesafe в своем блоге объявила о том, что библиотека spray.io теперь стала частью их платформы. Библиотека spray реализует низкоуровневую поддержку протокола HTTP на базе акторов Akka. Часть библиотеки ранее уже была интегрирована в ядро Akka — компонент akka-io.

В результате интеграции планируется получить модуль Akka HTTP, предназначенный для реализации легковесных REST-сервисов и создания клиентов для них. Как и остальные компоненты Akka, новый модуль также получит Java API.

Play Framework, другая часть платформы, в настоящий момент самостоятельно реализует HTTP на базе Netty. В будущем планируется переход на использование spray, но с сохранением опциональной старой реализации.

>>> Подробности (typesafe.com)

28 октября, уже в седьмой раз, стартует «Highload++» — крупнейшая в России, да и во всей Европе, седьмая профессиональная конференция для разработчиков высоконагруженных систем.

В секции баз данных выступают Петр Зайцев (Percona), Монти (Monty), Олег Бартунов, Федор Сигаев, Илья Космодемьянский, Константин Осипов.

Константин Осипов расскажет про современные алгоритмы хранения данных на диске: LevelDB, TokuDB, LMDB, Sophia; а Alvaro Videla — про внутреннюю архитектуру RabbitMQ. AdRiver раскроет тему о хранении и обработке 60 тысяч событий в секунду, а Одноклассники — об обработке миллиардов записей в статистике этой социальной сети.

Поиск представлен уникальной технологией мультитерабайтного Sphinx-кластера, 2ГИС рассказывает про вертикальный поиск, а Mail.ru про организацию их собственного полнотекстового поискового движка.

Также в программе сравнение производительности NoSQL баз данных, распределённых файловых систем, тестирование производительности DNS-серверов, расчёт аппаратной нагрузки highload-проектов, вопросы безопасности, целый блок докладов про правильную организацию API.

>>> Подробности (highload.ru)

На страничке тега теперь показываются теги, близкие к показываему. Например тут: www.linux.org.ru/tag/scala

Компания Jetbrains, известная целой серией IDE для различных языков программирования, объявила о выходе opensource редакции IDE для Python: PyCharm Community Edition.

Opensource версия включает:

• редактор с функциями автодополнения, подсветки синтаксиса и ошибок;
• автоматизицию рефакторинга кода и широкие возможности навигации по исходным текстам;
• встроенный отладчик и поддержку unit-тестов;
• работу с системами контроля версий;
• широкие возможности по настройке, в том числе режим эмуляции VIM.

Коммерческая редакция IDE также включает поддержку фреймворков для веб-разработчиков; работу с javascript/css и некоторыми другими смежными технологиями; отладку на удаленных хостах; работу с базами данных из IDE.

Opensource версия доступна под лицензией Apache 2.

>>> Подробности (jetbrains.com)

Вышла новая версия СУБД PostgreSQL — 9.3.

В этой версии:

• Запись в внешние таблицы. Предыдущие версии PostgreSQL позволяли подключать к базе различные внешние источники данных, в том числе Oracle, MySQL, Redis, LDAP и многие другие. В этой версии добавилась возможность записи в такие «внешние» таблицы. Модуль postgres-fdw, предназначенный для подключения других баз PostgreSQL (базовые функции доступны с 8.1, а полная поддержка всех функций требует 8.3), также поддерживает расчет плана выполения запроса и ограниченную поддержку транзакций.
• Улучшения надежности и доступности:
  • Опциональная проверка контрольных сумм на читаемых страничках для определения аппаратных сбоев.
  • Быстрое переключение с master на slave при сбое master'а, возможность переключения slave в master в режиме streaming-репликации.
• Расширения PostgreSQL теперь могут запускать собственные процессы внутри сервера. Предполагается, что эта возможность будет использоваться для создания обработчиков очередей запросов, поддержки выполнения параллельных запросов, планировщиков, альтернативных протоколов и др.
• Расширены функции для работы с JSON.
• Материализованные и обновляемые VIEW, упрощенный синтаксис для создания рекурсивных VIEW.
• Параллельный pg_dump.
• Отказ от использования разделяемой памяти SysV в пользу posix версии и mmap.
• В расширении pg_trgm добавлена возможность использования индекса при поиске по регулярным выражениям (в случаях когда из регулярного выражения удается извлечь необходимые для его срабатывания триграммы).
• Раздельные блокировки для изменения ключевых и неключевых полей таблиц. Благодаря этому повышена производительность и заметно снизилась вероятность возникновения deadlock'ов при параллельном выполнении комплексных транзакций с использованием внешних ключей.

>>> Подробности (postgresql.org)

Светлая тема аля swamp, с цветами из популярной темы «solarized»: http://ethanschoonover.com/solarized.

Подсветка синтаксиса языков программирования еще не прикручена, на это пока не жалуйтесь plz.

Update: подсветка синтаксиса заработала

Интегрирована новая тема оформления, разработанная Mystra_x64: Waltz.

История болезни: https://github.com/maxcom/lorsource/pull/513

Компания «Информатик» продолжила работу над Linux версией ОРФО, своего продукта для проверки правописания. К выпущенному ранее плагину для проверки орфографии для LibreOffice / Apache OpenOffice прибавились возможности проверки грамматики и стиля русского языка, сервис расстановки переносов и тезаурус. Также в новой версии была доработана проверка орфографии.

На сегодняшний день ОРФО умеет распознавать более 23 221 типа грамматических и стилистических ошибок.

В русской сборке Libre/Open Office встроенные средства проверки грамматики и стиля русского языка просто отсутствуют. Встроенные средства проверки орфографии русского языка в Libre/Open Office есть, но словари, по которым происходит проверка, очень маленькие и содержат большое количество ошибок. Не проверяется сочетаемость и согласованность частей сложных слов, написанных через дефис, а также содержатся другие ошибки.

Бета версия доступна для всех желающих. Первые 200 пользователей, выполнивших инструкцию по тестированию и приславших отчет с пометкой «linux.org.ru», получат бесплатную лицензию на продукт, остальные пользователи, приславшие отчет — 70%-ную скидку на приобретению любой версии «ОРФО».

Lite-версию плагина, содержащую только проверку орфографии, можно загрузить бесплатно для некоммерческого использования.

>>> Загрузить плагин (informatic.ru)

Я переделал страничку, которая открывается при просмотре тега (вроде www.linux.org.ru/tag/gentoo и www.linux.org.ru/tag/ubuntu).

Новый вид в процессе тестирования и пока виден только пользователям с 5* и темой tango, чуть позже будет доступен более широкому кругу пользователей.

Просьба тем кто уже увидел новый вид отписаться о впечатлениях, проблемах и пожеланиях.

Обновление: исправлены проблемы с сортировкой и склонениями; страничка показывается пользователям начиная с одной звезды (пока что по прежнему требуется tango)

Обновление: страничка видна всем пользователям с темой tango, включая анонимусов

Вышла новая версия браузера Mozilla Firefox: 23.

Основные изменения в этой версии:

• HTTP-контент на HTTPS страничках теперь блокируется по умолчанию. Ожидается, что данное изменение защитит пользователей от некоторых man-in-the-middle атак и уменьшит возможности слежения за пользователями. Настройка может быть выключена для отдельных сайтов.
• Убраны настройки выключения Javascript'а и загрузки изображений. Использование этих функций приводило к невозможности пользоваться большим процентом современных веб-сайтов, и их наличие в панели настроек позволяло неопытным пользователям привести браузер в нерабочее состояние. Тем, кому необходимо выключение Javascript, рекомендовано использовать расширение NoScript. Также ожидается, что убранные опции появялся в инструментах разработчика в Firefox 24.
• Улучшение рендеринга <input type='file'>, поддержка <input type='range'>
• Убрана поддержка мигающего текста — тега <blink> и CSS свойства text-decoration: blink. Тег blink был придуман инженерами Netscape в 1994 году и, к счастью, не получил широкого распространения за пределами браузеров Mozilla.
• В инструменты разработчика была добавлена начальная поддержка source maps для отладки javascript'а, новая панель для мониторинга сетевой активности и некоторые другие функции.

>>> Подробности (mozilla.org)

Subj. Кроме того, черновики работают теперь не только для новостей, но и для форума

Новая фича — черновики для топиков. Позволяет сначала создать черновик, поредактировать, а потом только опубликовать.

Черновики видны только самому пользователю (и модераторам).

В данный момент черновики доступны только для новостей и галереи, и только для пользователей с 3-мя зелеными звездами.

Для публикации черновика нужно нажать кнопку «опубликовать» в форме редактирования, тосле этого топик попадет в неподтвержденные.

Черновики для тем форума тоже будут; Пишите о проблемах и пожелания по дальшейшему развитию этой фичи.

Я немного поменял настройки SSL, благодаря чему теперь сайт будет работать немного более эффективно. Сообщите plz если будут проблемы (например недогруженные изображения, странные проблемы с постингом сообщений и т.п.)

В вышедшем недавно минорном обновлении Oracle MySQL, 5.5.31, изменилась лицензия справочных страничек «man».

Используемая ранее лицензия GNU GPL была заменена на проприетарную лицензию, запрещающую модификацию и ограничивающую распространение текстов.

Изменение в лицензии было обнаружено разработчиками MariaDB, форка MySQL, развиваемого открытым сообществом разработчиков.

ОБНОВЛЕНО: Сотрудник Oracle подтвердил, что это всего лишь баг в системе сборки, он уже исправлен и документация будет обновлена под старой лицензией в самое ближайшее время.

>>> Подробности (mariadb.org)

Корректоры теперь могут добавлять / исправлять теги у сообщений форума.

У меня есть два мешка значков, которые мне подарили организаторы конференции. Если кто-то сейчас есть на конференции, то меня можно опознать по черной майке с эмблемой ApacheCon Atlanta и зеленому рюкзаку.

Организаторы конференции DevConf совершенно безвозмездно (т.е. даром) напечатали нам новую партию значков «linux.org.ru». Значки будут розданы участникам форума; так же можно будет пообщаться о lor в кулуарах.

Если вы идете на конференцию то отпишитесь plz в теме.

DevConf 2013 — профессиональная конференция, посвященная ведущим технологиям программирования и веб-разработки. Подробнее с программой можно познакомиться на сайте конференции и в анонсе на linux.org.ru.

Оргкомитет конференции предлагает несколько бесплатных приглашений для участников форума Linux.org.ru. В розыгрыше могут принять участие пользователи, зарегистрированные до 15-го апреля 2013 года. Участники будут выбраны случайным образом 31-го мая.

Для участия в розыгрыше, пожалуйста, подтвердите участие вводом кода 'devconf2013' и нажатием кнопки

Пожалуйста, не нажимайте кнопку если вы не имеете возможности/желания посетить данную конференцию. Пожалуйста, убедитесь что в вашем профиле на сайте указан корректный e-mail. Если мы не сможем связаться с победителем до 3-го июня, приглашение перейдет к другому участнику форума.

Теперь можно перенести показ мини-новостей из основной ленты в левую колонку. Делается это в конструкторе главной страницы.