|
Что имеем, то храним
Главная /
Архив номеров / 2013 / Выпуск №9 (32) / Что имеем, то храним
Рубрика:
Тема номера /
Системы хранения и обработки данных (СХД и ЦОД)
Facebook
Мой мир
Вконтакте
Одноклассники
Google+
Что имеем, то храним
На вопросы «БИТа» отвечают эксперты ведущих ИТ-компаний
- Каковы основные направления развития методов обработки и хранения данных?
- Как оптимизируется снижение рисков потери информации и неэффективности использования вычислительных ресурсов?
- Облачные технологии и СХД. Что храним в облаках?
- Каковы основные требования к современной структуре СХД?
- Выбор СХД: как определиться, что подходит именно вашей компании?
АЛЕКСАНДР ЯКОВЛЕВ, менеджер по маркетингу продукции СХД Fujitsu в России и СНГ
1. Все более активно применяется многоуровневое хранение, увеличивается производительность систем хранения, развивается unified-архитектура, позволяющая в рамках единого хранилища осуществлять одновременный блочный ифайловый доступ.
2. За прошедшие десять лет лавинообразно нарастает количество хранимых данных, а уровни защиты этих данных практически не поменялись. И это сегодня является весьма актуальной проблемой – время ребилда (перестроения RAID) вслучае выхода из строя одного из дисков существенно увеличилось, поскольку увеличилась емкость диска. Одним из основных направлений усовершенствования последнего поколения дисковых массивов FUJITSU является как раз существенное уменьшение времени перестроения RAID аппаратными средствами.
Еще одна тенденция – все более широкое применение технологий дедупликации и компрессии в онлайн-хранилищах. Вычислительная производительность контроллеров современных хранилищ существенно увеличилась, к тому же проведена очень серьезная работа по оптимизации алгоритмов, по которым осуществляется сжатие данных.
3. По нашему опыту, наиболее безболезненно осуществляется перенос в облако процедур резервного копирования и архивирования. Кроме того, для большинства заказчиков психологически это проще, чем перенести в облако онлайн-хранилище критически важных данных.
4. Облачная парадигма требует высочайшего уровня надежности, масштабируемости, производительности и плотности хранения.
При этом, конечно, необходима автоматизация многоуровневого хранения – ведь для эффективного анализа Больших Данных необходимо, чтобы современное хранилище сверхбыстро могло перенести те или иные данные на быстрые носители для эффективного решения аналитических задач.
5. Очень сложно сегодня найти компанию, где бы не происходило лавинообразного роста данных. И весь вопрос в том, чтобы только определиться, какие требования по производительности и функционалу предъявит бизнес через два-три года.
Здесь есть серьезные риски, что покупаемый сегодня дисковый массив перестанет соответствовать по производительности растущим требованиям современных приложений. Для того чтобы минимизировать эти риски, в дисковых массивах ETERNUS несколько лет назад появилась возможность апгрейда массивов на более старшую модель путем простой замены контроллеров.
ДМИТРИЙ МОРОЗОВ, ведущий системный инженер, группа компаний CUSTIS
1. Ключевыми требованиями к структуре СХД на текущий момент являются производительность и надежность хранения и доступа к данным. С развитием систем виртуализации узким местом в инфраструктуре ЦОД стала производительность ввода/вывода систем хранения данных. Распространен подход, когда ИТ-отделы, приобретая диски для своих хранилищ, выбирают исходя из цены за 1 Тб (стандартный подход, применяемый для персональных компьютеров). Но при этом зачастую превышается предел хранилища по операциям ввода/вывода и часть дисков хранилища не используется.
В таких случаях правильнее и выгоднее рассчитать планируемую нагрузку и объем СХД, и скорее всего потребуется купить менее объемные диски.
Надежность хранения и доступа к данным подразумевает, кроме поддержки уровней RAID, наличие «горячей замены» (hot-spare) дисков, дублирование всех компонентов СХД (в том числе сетевых и оптических каналов) и отсутствие единой точки отказа.
ВАДИМ БОЛОТНОВ, директор центра решений КРОК на базе технологий EMC
1. С одной стороны, широкое распространение получают унифицированные решения с использованием комбинаций всевозможных протоколов доступа и устройств хранения в одной системе. Заказчик инвестирует в единое решение иполучает от него максимум.
С другой стороны, продолжают развиваться нишевые системы на базе флеш-памяти, заточенные под нагруженные базы данных, и хранилища для Big Data. Еще один тренд – растущая популярность модели «as-a-service» в области хранения иобработки данных, которая позволяет эффективнее решать бизнес-задачи за счет быстрого доступа к нужным ресурсам по требованию заказчика.
2. Неэффективность использования вычислительных ресурсов традиционно решается с помощью виртуализации. При масштабных проектах также применяются проприетарные алгоритмы дедупликации СХД и даже оперативной памяти. Защита информации от потери сегодня обеспечивается новыми средствами, которые возникли в результате удешевления жестких дисков и теперь все чаще применяются для хранения резервных копий.
3. В публичных облаках сегодня разрабатываются и обслуживаются решения, которые дорого создавать и эксплуатировать иными способами. Если мы говорим о частном облаке, то с помощью него происходит изменение подхода ккаждодневным задачам всего ИТ-подразделения. При наличии прежней вычислительной инфраструктуры потребление вычислительных ресурсов внутри компании становится более прозрачным, измеряемым и гибким. Подобные частные облака используются для быстрого запуска новых услуг. Для проведения разовых мероприятий, требующих резкого увеличения мощностей, могут также применяться гибридные облака, представляющие собой объединение ЦОД заказчика соблачными ресурсами провайдера.
4. Существует «джентльменский» набор функций СХД, запрашиваемых при реализации проектов: многоуровневое хранение, тонкое выделение томов, локальная и удаленная репликации. Зачастую в ходе уточнения требований выясняется,что некоторые из этих функций бесполезны при решении бизнес-задач конкретных заказчиков. При этом обязательным требованием к системе хранения данных остаются отказоустойчивость и производительность ее компонентов.
5. Нужно четко понимать, какую задачу должна решить та или иная СХД. Если заказчик уже сформулировал требования к ней, то интегратору не составит труда предложить несколько подходящих вариантов реализации системы. Заказчик может и сам разобраться во всех решениях, имеющихся на рынке, но существует риск упустить нюансы. Потому, на мой взгляд, обращение к компетентным консультантам на первом этапе проекта будет залогом успешного внедрения.
АЛЕКСАНДР ШИРМАНОВ, директор департаментов R&D и техподдержки компании Veeam Software
1. В настоящее время в области обработки и хранения данных есть следующие тенденции:
- внедрение SSD-дисков, которые устанавливают в качестве кэша данных большого размера, что ведет к увеличению производительности центров обработки данных и сокращению времени обслуживания клиентов;
- освоение облаков. Разработчики развивают архитектуру приложений Клиент-Облако. Решения для корпоративных облаков начинают конкурировать с публичными облаками для B2C. Гибридные облака или гетерогенные виртуальные инфраструктуры на базе более чем одного гипервизора становятся нормой;
- Наступление персональных облаков. Все больше PC и мобильных устройств используется совместно с постоянно подключенным персональным облаком. Такое облако нужно в основном для резервного копирования, хранения фотографий, обмена файлами и т.п.;
- программно-определяемая инфраструктура ЦОД – это фактически слой виртуализации всех видов ресурсов ЦОД (ресурсов хранилищ данных, вычислительных и сетевых ресурсов). Как следствие, начинает развиваться направление готовых к использованию блоков конвергированных инфраструктур, предлагающих в одном модуле все три компонента (сеть, хранилище и вычислительный компонент), которые необходимы клиенту, чтобы запустить свой ЦОД;
- сравнительно узкое, но перспективное направление – развитие вычислений в памяти.
2, 3. Повышение эффективности ЦОД достигается за счет программно-определяемой инфраструктуры, позволяющей оптимально использовать существующие аппаратные ресурсы в зависимости от меняющейся нагрузки.
Для снижения рисков потери данных ведется работа в направлении повышения отказоустойчивости за счет оптимизации функционирования кластеров, и за счет технологий виртуализации, позволяющих прозрачно для пользователей перезапускать виртуальные машины на резервных серверах.
Также используются репликации с очень малым периодом синхронизации (что дает очень малое время RPO), и применяется резервное копирование в облако, что автоматизирует и упрощает административные задачи по созданию внеофисных резервных копий.
АНДРЕЙ КАСЬЯНЕНКО, заместитель генерального директора телекоммуни-кационной компании Caravan
1. Одна из значимых тенденций на рынке систем хранения – развитие облачных СХД. Увеличивается количество компаний, которые предлагают услуги хранения данных в облаках, стремительно развиваются персональные облачные решения.
Сегодня можно выделить несколько моделей облачных СХД:
- для резервного хранения данных;
- для совместной работы;
- используемые вместе с арендуемыми вычислительными ресурсами.
Первые две модели можно отнести к начальному уровню облачных СХД.
Последняя модель представляет собой СХД высокого уровня и нередко используется для хранения больших объемов данных.
4, 5. Многие заказчики выбирают СХД для своего бизнеса исходя из задач и определенной модели хранения данных.
В этом случае используется сложный комплексный подход, в котором учитывается множество факторов – начиная от надежности и заканчивая требованиями к скорости предоставления информации, оптимизации использования дискового пространства.
Если же у заказчика слабо развита ИT-система и отсутствует сформированная модель хранения данных, то оптимальным решением может стать СХД начального уровня.
Если говорить о выборе между облачными и стационарными системами хранения данных, то частным пользователям, а также среднему и малому бизнесу гораздо выгоднее использовать облачные сервисы, поскольку стоимость их развертывания и использования значительно ниже.
В этом случае заказчику удается сохранить баланс между требованиями к системе хранения данных и затратами на эту систему.
АЛЕКСАНДР ГРУБИН, технический консультант Dell
1. Основные направления в развитии СХД следуют за общим вектором ИТ – виртуализация, большие массивы данных и перенос части задач по хранению и обработке данных в облако.
2. Существует много технологий, позволяющих повысить надежность хранения и обработки данных.
Помимо традиционных, таких как резервное копирование и аварийное восстановление, давно присутствующих во всех решениях корпоративного класса, сейчас существуют технологии, которые позволяют заранее, до наступления аварийной ситуации, избежать прерывания работы и возможного риска потери данных, переместив данные с одного массива (площадки) на другой без остановки работы критичных бизнес-приложений.
Эти решения так называемого класса Disaster Avoidance сейчас активно развиваются и очень востребованы.
Что касается неэффективности использования ресурсов, то здесь также существуют различные, уже доступные заказчикам, решения, основанные на виртуализации ресурсов хранения и позволяющие при необходимости переносить нагрузку даже между СХД, не прерывая работу приложений.
3. Сегодня в России в основном распространено использование двух типов облаков – частных и гибридных.
Частные облака строят под себя крупные корпорации, а гибридными пользуются как крупные, так и средние и малые компании.
В зависимости от типа облака определяется и круг задач хранения, которые оно решает.
Если для частных облаков, построенных внутри крупных холдингов и корпораций и предоставляющих услуги хранения и выделения ресурсов по требованию, это могут быть самые разные задачи – от бизнес-приложений допользовательских файловых ресурсов, то в гибридных это, как правило, задачи по резервному копированию и архивному хранению.
Публичные облака пока слабо используются среди корпоративных пользователей.
4. Требования к СХД, как и к ИТ, в целом диктуются бизнесом. Система хранения должна быть гибкой, масштабируемой, надежной и, главное, способной адаптироваться под изменяющиеся требования бизнеса без прерывания работы критичных приложений.
5. Здесь следует отталкиваться от бизнес-задач и приложений, которые планируется внедрять и эксплуатировать. Самая простая и распространенная задача – это консолидация разрозненных локальных ресурсов хранения на внешней СХД.
В ряде случаев при высоконагруженных базах данных или приложениях SAP часто необходимо использовать выделенные производительные СХД, обслуживающие одно или несколько бизнес-критичных приложений.
Для задач виртуализации хорошо подходят системы хранения с поддержкой технологий переноса нагрузки и различных задач по управлению дисковыми ресурсами с уровня гипервизора на уровень СХД.
Другим преимуществом при выборе является возможность создания резервных копий виртуальных машин без остановки их работы средствами СХД.
При необходимости создания катастрофоустойчивых решений и при наличии нескольких ЦОДов нужно выбирать системы, которые поддерживают технологии репликации и способны эффективно использовать существующие у заказчика каналы связи.
МАРК ВЕРЕЗУБОВ, начальник отдела маркетинга корпоративного рынка «АКАДО Телеком»
1. Главный тренд на рынке – это стремление бизнеса создать единое хранилище данных для оперативного доступа к достоверной информации. Однако для этого требуются высокопроизводительные решения с обязательным резервированием, безопасностью и SLA. Чем крупнее бизнес, тем больше объемы хранилищ.
2. Проще всего при организации СХД придерживаться конвергентных решений от одного вендора или оператора, который предлагает как готовые протестированные платформы, так и референсные архитектуры из отдельных компонентов (например, для развертывания почтовых систем или баз данных) с обязательным SLA.
3. С увеличением объемов хранилищ информации и постепенным снижением стоимости хранения данных в облаках хранить можно все. Но, например, небольшим компаниям выгоднее воспользоваться публичным облаком, а крупным – собственным (частным). Можно организовать гибридное облако. Какую-то информацию можно хранить в частном облаке, какую-то вынести в публичное, а что-то вообще хранить только внутри собственной инфраструктуры.
4. Прежде всего это необходимость снижения стоимости хранения информации и рисков утраты уже имеющихся данных, а также обеспечение наивысшей эффективности их использования. При выборе решения необходимо руководствоваться бизнес-задачами предприятия и учитывать технические параметры, например, количество операций ввода-вывода в секунду и связанное с этим время отклика на запрос.
5. Как правило, при выборе СХД учитываются надежность и высокая скорость работы с данными, а также их доступность независимо от того, где именно запущены приложения. Немаловажным фактором является и цена решения. СХД, которые в настоящее время представлены на рынке, – это горизонтально масштабируемые (Scale Out) системы хранения, а также унифицированные системы хранения (Unified Storage) и массивы high-end. Последние выбирают, как правило, крупные компании, для которых важны производительность, отказоустойчивость, возможность масштабирования и дополнительный функционал. На российском рынке актуальны такие решения, как EMC, HP, IBM, также становятся все более популярными системы хранения NetApp.
Сергей Платонов, руководитель R&D RAIDIX
1. Количество неструктурированных данных растет экспоненционально.
Традиционные подходы к хранению уступают место объектным СХД. Сам по себе подход не нов, но в рамках решения задач масштабирования и обеспечения отказоустойчивости появляются новые решения.
Стоимость обеспечения доступности данных за счет многократного зеркалирования/репликации крайне высока. Продукты, использующие многомерные и N-нарные массивы, также неэффективны. Разработчики решений развивают использование кодов Рида-Соломона с количеством возможных отказов от трех до нескольких десятков в сетевых RAID-массивах и Information Dispersal Algorithms.
Для больших распределенных СХД встают задачи минимизации стоимости восстановления в случае отказа накопителей и избыточности данных.
Для решения такой задачи появляются алгоритмы, такие как:
- Pyramid codes
- Local Reconstruction Codes
- Rotated RS codes
- Partial-MDS codes
- SD codes
Развиваются технологии облачного хранения. Ведется плотная работа над созданием интерфейса доступа и обслуживания объектов в облаке – CDMI.
Разработчики файловых протоколов адаптируют их для возможности применения серверами приложений. SMB 3.0 увеличен рядом расширений (такими, как SMB Direct), позволяющими использовать его для серверов СУБД игипервизоров.
Особая роль уделена flash-памяти. В 2013 году много компаний представили продукты, полностью построенные на flash.
Подобные типы накопителей требуют уделять внимание таким вопросам, как минимизация IO на всех операциях, снижение количества случайных обращений за счет журналирования.
4. Чуть более года назад на саммите VMware была представлена концепция SDD. Software Defined Storage как часть этой концепции должен обладать следующими характеристиками:
- автоматизация всех операций по предоставлению пространства и доступа к данным на основе политик. Забудьте про уровни массивов и разбиение и предоставление LUN. Современная СХД самостоятельно выбирает все параметрыи предоставляет пользователю пространство требуемого уровня производительности и доступности. Все управление происходит через порталы самообслуживания;
- обеспечение QoS. Пользователь должен получать требуемый уровень производительности и восстановление доступа в соответствии с SLA. Проблемы просадки производительности при ребилде массива не должны проявляться напользователе;
- тонкая интеграция с гипервизорами;
- работа на стандартном аппаратном обеспечении и масштабируемость.
В начало⇑
Facebook
Мой мир
Вконтакте
Одноклассники
Google+
Комментарии отсутствуют
Комментарии могут отставлять только зарегистрированные пользователи
|
Ассоциация разработчиков «Отечественный софт» отметила 15-летие 
РДТЕХ представил Технологическую карту российского ПО 2023 
RAMAX Group получила партнерский статус уровня Gold по продукту Tarantool 
На RIGF 2024 обсудили ключевые вопросы цифрового развития России 
_cover.jpg)
