• 8 мифов о дедупликации

      Пришло время рассмотреть все мифы и узнать где правда в вопросах дедупликации для массивов данных.



      Несмотря на то, что технология дедупликации известна уже достаточно давно, но только сейчас технологии, применяемые в современных массивах данных, позволили ей пережить второе рождение. Во всех современных массивах данных на текущий момент используется дедупликация, но наличие этой функции в массиве еще не значит, что это даст весомые преимущества именно под ваши данные.
      К сожалению, большое количество администраторов принимают «на веру» и считают, что дедупликация обладает безграничными возможностями.
      Читать дальше →
    • «Работа с микроскопом»: Революция в области хранения данных



        / фото grover_net CC

        В одном их наших предыдущих материалов мы писали о новой разработке в сфере хранения данных. Нас, как IaaS-провайдера, очень интересуют технологии, способные изменить наше представление о дата-центрах. Потому мы решили уделить еще немного времени хранилищам данных. Очень емким хранилищам данных.
        Читать дальше →
      • Bash скрипт для создания архива данных

        На днях озадачился резервным копированием данных в облако. Нашёл подходящий сервис попробовал, и понял, что существует необходимость в сжатии бэкапа перед отправкой (думаю нет необходимости объяснять зачем). Не стал заморачиваться в поиске готовых решений и решил сам написать скромный скриптик для этой цели. Исходные файл или папка жмутся в .tar.xz с уровнем сжатия 9, что позволяет сохранить права и выдаёт хорошую компрессию на выходе (у меня снэпшот системы сжимается 4 раза). Результатом остался доволен, думаю для малого бизнеса, да и для личных целей многим пригодиться.

        Возможности скрипта:
        • гибкая настройка
        • проверка на доступность ресурсов (источник, директория назначения, рабочая директория)
        • проверка на файл блокировки (предотвращает выполнение если источник еще создаётся)
        • вывод информации о сжатии (размер источника, размер архива, соотношение этих размеров)
        • логирование и дебагинг (вывод дополнительной информации о процессе выполнения)
        • возможность менять вывод (как в консоль и лог-файл, так и только в лог-файл)
        • сохраняет и ротирует предыдущие архивы
        • возможность форматирования текста вывода
        • отправка e-mail-а в случае успешного и/или неуспешного завершения

        Читать дальше →
      • xz — сила сжатия LZMA уже в твоей консоли

          Многие наверное уже знают про утилитку для компрессии/декомпрессии xz. Но еще больше не знают. Поэтому написал этот ознакомительный топик.

          xz — формат сжатия данных, наряду с gzip, bzip2 вошедший в gnu-шные приложения.
          Использует алгоритм LZMA, тот же что и в 7z, а это значит что можно сильнее сжать многие виды данных, типа текста, бинарные еще не сжатые данные по сравнению с стандартными, упомянутыми выше.
          xz используется в новом rpm 4.7.2 для компрессии архивов .cpio в rpm-пакетах (используется с Fedora 12).
          В ArchLinux вообще используется .tar.xz в качестве пакета.
          В GNU tar появились опции -J --lzma, которые исполняют туже роль что и -z для gzip, -j для bzip2
          Читать дальше →
        • Пользователи и сжатие данных

            Я не хочу разжигать очередную священную войну, но комментарии на мой последний пост о «сжатии» в RAR навеяли на некоторое количество мыслей и рассуждений, которые я хочу донести до сообщества. Но перед этим хочу отметить, что я работаю под Windows'ем, поэтому всё ниже изложенное будет касаться именно его. Плюс к прочему попрошу отнестись к топику, как к информации к размышлению, а не как к красной тряпке для быка. Итак, давайте поговорим о форматах сжатия данных с пользовательской точки зрения.
            Читать дальше →
          • Видеоподкастерам на заметку: создавайте FLV самостоятельно

            • Tutorial
            Я давно заметил (впрочем, вон там есть и свежий пример того), что некоторые видеоподкастеры предпочитают не заливать своё видео на некоторые популярные видеохостинги (такие, как YouTube или Google Video), заранее зная, что эти видеохостинги если и принимают видеозаписи любого формата, то у себя преобразуют их (со значительным сжатием) в формат FLV, после чего мелкие детали подкаста расплываются во Flash-видеопроигрывателе.

            Напомню поэтому, что сайт RuTube отличается от вышеупомянутых видеохостингов в лучшую сторону тем, что на него также можно закачивать (для последующего воспроизведения) и заранее подготовленные видеоролики в формате FLV, которые тогда на этом сайте никак не подвергаются дальнейшему преобразованию и сжатию.

            При помощи программы Any Video Converter Free Version (или других аналогичных простых бесплатных средств) можно заранее изготовить FLV-видеоролик необходимой длины и качества, чтобы затем закачать его на RuTube.

            Читать дальше →

          Самое читаемое