История изменений
Исправление Iron_Bug, (текущая версия) :
просто нет в природе универсальных форматов. под каждую задачу свои требования и свои форматы. некоторые форматы позволяют обрабатывать потоковую информацию, некоторые требуют предварительной загрузки целиком. некоторые лучше работают на запись и добавление, некоторые ориентированы на поиск и быстрое чтение. всего и сразу не бывает.
что касается проблем форматов данных сейчас, то узкое место в основном передача по сети. и там есть проблемы потокового сжатия и контроля за правильностью переданных данных (уменьшение оверхеда на перепосылку пакетов и т.д.). так что выгоднее копать в сторону удобной сегментации и потоковой обработки. остальное практически не существенно.
Исходная версия Iron_Bug, :
просто нет в природе универсальных форматов. под каждую задачу свои требования и свои форматы. некоторые форматы позволяют потоковую информацию, некоторые требуют предварительной загрузки целиком. некоторые лучше работают на запись и добавление, некоторые ориентированы на поиск и быстрое чтение. всего и сразу не бывает.
что касается проблем форматов данных сейчас, то узкое место в основном передача по сети. и там есть проблемы потокового сжатия и контроля за правильностью переданных данных (уменьшение оверхеда на перепосылку пакетов и т.д.). так что выгоднее копать в сторону удобной сегментации и потоковой обработки. остальное практически не существенно.