О Малом и Среднем.. ИТ-ландшафт

 Скорость с которой в современном мире развиваются информационные технологии и восхищает и пугает одновременно. Пугает именно тем, что по прошествии времени все это могут назвать "самой большой технологической авантюрой".  Бешеный рост числа ИТ-компаний создающих новые технологии и разрабатывающих новые информационные решения с одной стороны и еще больший рост "Облачных" компаний предоставляющих, выше названным ИТ-компаниям, виртуальные инфраструктуры и сервиса. "Спрос рождает..."(с), но это очень похоже на "бег по кругу" когда у ИТ-компаний занимающихся сложными интеллектуально емкими решениями, в том числе и в области информационной безопасности или финансовых технологий, полностью отсутствует своя ИТ-инфраструктура, точнее она есть в минимальном варианте доступа к сети интернет, а все остальное находится в облаках, да еще и за пределами РФ. Риски!? Среди неявных рисков: риск потери квалификации, когда сотрудники теряют представление и навыки эксплуатации решений в реальной, а не виртуальной инфраструктуре заказчика.  Проверьте сами, например последние 1,5-2 года я всегда проверяю электронную почту моих респондентов на наличие собственного MTA. А у кого из них есть собственный корпоративный мессенжер?

Возвращаясь к теме ради которой этот пост и задумывался:

ИТ-ландшафт для малого и среднего бизнеса.
На наш взгляд эта картинка максимально раскрывает состояние дел в теме ландшафта. Не секрет, что многие молодые проекты начинают в облаках(AWS, Google Cloud, etc) и наслаждаются ИТ-инфраструктурой которая "доставляет" как ромашковое поле :) И опять-же не секрет, что проблемы порожденные регуляторами(РКН) "накрывают" это ромашковое поле вполне просматриваемым ландшафтом.

Проект Collax.ME, как и положено oldschool-ным специалистам, рекомендует сменить парадигму архитектуры ИТ-инфраструктуры в сторону локального частного облака, однако не исключая взаимодействия с публичными облачными инфраструктурными сервисами. Что для этого нужно? В минимуме - пара каналов интернет от разных провайдеров, пара серверов и носитель для бэкапов. Что в итого получается:
1. Балансировка каналов связи и их фаерволинг, управление внутренними виртуальными сетями, локальные первичные/вторичные или и те и другие DNS, управление учетными записями и правами доступа и т.д.
2. Локальные средства групповой работы с единым интерфейсом и интеграцией с привычными офисными приложениями: почта + файловый обмен + мессенжер c видеоконференцими
3. Высокодоступное и отказоустойчивое решение для бухгалтерии, например 1С, и/или для систем класса CRM
4. Простая и эффективная система резервного копирования, где скорость восстановления определяется скоростью чтения с носителя.
5. Простор для локальной разработки(DevOps) cо всеми плюшками как и в публичных облаках, с возможностью легко переносить контейнеры и имиджи в публичные облачные инфраструктуры.
Про DevOps... добавим кусочек описания нашего ландшафта, проверенного и обкатанного до автоматизма. Зона наших интересов крутится вокруг Docker и разработки на языке Golang. Естественно мы поддерживаем Kubernetes и в тоже время используем Swarm. Для наглядности и управления контейнерами в Swarm кластере мы используем Portainer.IO или консольный Dry. Для K8s мы используем разработки компании Rancher Labs. Все это живет в нашем кластере на Collax V-Cube+  в виде KVM имиджей, управляется через веб-интерфейс или из командной строки аналогично docker-machine.   

Обновление Collax V-Family до v.6.1.4

Вчера, 04.06.2013г. обновилось семейство продуктов Collax V-Family до версии 6.1.4.

Из нового:
Virtualization: Обновились драйвера virtio для гостевых Windows систем

Virtualization: Добавлена задержка от 0 до 30 минут при автостарте виртуальных машин. (Очень нужная штука, например при виртуализации контроллера домена который должен стартовать раньше чем все остальные системы - И.Г.)

Inter-V: В настройках виртуальных машин добавлена возможность редактирования МАС -адресов сетевых интерфесов

Inter-V: При остановке виртуальной машины добавлен вариант "Managed save". Механика аналогична режиму suspend для обычной, не виртуальной машины. Опция взводится при установки виртуальной машины

Inter-V: Добавлено тестирование настроек E-Mail сервера и Fencing-а. Доступно из визарда.

Inter-V: в визарде появился режим агрегаци для двух 10GbE интерфейсов на интерконнекте.

 

Backup/Restore: Recovery Token теперь содержит метаданные о логических томах, что используется при bare metal восстановлении.

System Management: При вводе нода в кластер состояние нода теперь устанавливается в "stand-by"

System Management: Добавлена проверка OCFS2 при создании кластера.

Hardware: Добавлена поддержка UPS Online Zinto (USB)


И немного исправлений :)

Обновление V-Cube 6.1.2

Вчера  17.12.2012г. обновилось семейство продуктов Collax V-Family до версии 6.1.2. Обновление в основном корректирующее.
Из нового: расширили VNC функционал, добавили проверку файловой системы в диалоге Shutdown/Reboot, расширили поддержку ИБП(USB).


Исправления в v 6.1.2:

Virtualization: Date of Snapshots not correct
Virtualization: RAM State File is not being deleted after snapshot
Virtualization: OS of the VM shows more NICs than configured
Virtualization: Boot Order in BIOS 0.6.2
Inter-V: Hostnames with Capital Letters
Inter-V: Removing Node from Cluster restarts Cluster-Share
Inter-V: Putting one Cluster-Node to Standby, When The Other Node was Already Shutdown
Inter-V: Live Migration of a VM Partially Does Not work
Inter-V: Changing IP Address of a Host
V-SAN: Split Brain Handling of DRBD if Hardware Error occur
V-SAN: Resume I/O after Split Brain Handling of DRBD Device
Backup/Restore: Virtual Machines - Field 'info' missing
System Management: Nagios Threshold for File System Check System Management: Locking Timed Out, When Cluster Share was not writable
Hardware: Update Problem if Using old Series 7 and 8 of 3ware Raid Controller
Hardware: Disk Storage greater than 10TB only usable for Disk Image files for VMs
Hardware: Software Installation Provides Default Values for Networking

Collax V-Cube 6.1.0 - Обновление

Сегодня 01.10.2012г. обновилось семейство продуктов Collax V-Family до версии 6.1.0

Кроме обычного обновления компонентов:

kernel 3.0.41, lio-utils 4.1, drbd 8.3.13, ctdb 1.12, kvm-guest-driver, lvm 2.02.88, MySQL 5.5.20 наблюдается комплексное обновление идеологии всей линейки продуктов этой серии. Вместо привычного V-Store теперь V-SAN реализующий технологию встроенного хранилища(eSAN) для более чем двух нодов, также появился высокодоступный iSCSI-Target и кластерные "шАры" теперь можно раздавать как "шАры" Windows или Apple. В рамках виртуализации добавлена миграция хранилищ, добавлена возможность увеличения размера DiskImage файлов, добавлено кеширование всех типов HDD и добавлено более тонкое управления процессорами, ядрами и сокетами для каждой виртуальной машины в отдельности. В клатеризации оптимизированы, с точки зрения юзабельности, настоечные диалоги и также появилась миграция хранилищ включая смену типа хранилища. Внесены изменения в GUI и улучшены визарды.
Внесены изменения в инсталлятор системы ускоряющие процесс развертывания системы:

На этапе инсталляции сразу выбирается модель использования

Определяется USB для быстрой загрузки конфигурации в случае восстановления или клонирования хоста

Сетевые интерфейсы для общего доступа

И сетевые интерфейсы для интерконнекта

GUI встречает измененным визадром прохождение которого как бы обязательно :)

Ну а дальше как обычно - все работает :)

Визард настройки кластера стал более понятным(хотя мне и ранее он нравился)

Теперь точно не промахнешься в конфиге

Ну и запрыгиваем в кластер

....

Collax V-Cube - первый продукт в линейке V-Family

Обзор Collax V-Cube открывает серию обзоров продуктов семейства V-Family. Нужно отметить, что мое знакомство с продукцией и замечательными сотрудниками компании Collax GmbH началось именно с V-Cube. На тот момент я работал над проектом для одного московского банка и имея уже достаточно приличный опыт реализации высокодоступных кластеров виртуализации на разных, и проприетарных, и открытых, и свободных платформах, я был озадачен необходимостью передать в эксплуатацию заказчику систему которую могли поддержать либо специалисты ИТ банка, либо специалисты вендора информационной банковской системы(ИБС) оказывающие услуги аутсорсинга :) Задача, не простая, требующая учитывать особенности сетевого трафика самой ИБС, заданной эластичности нагрузки, необходимости реализации территориальной распределенности датацентров и, что не маловажно, должна быть простой  и понятной в обслуживании, мониторинге, сопровождении:) Определившись с архитектурой, на верхнем уровне абстракции, я начал подбор программного обеспечения и в процессе поиска, "о великий интернет", был обнаружен V-Cube(русский даташит). Если честно, я радовался как ребенок :) В одном продукте было все, что необходимо для проекта, и даже больше, оставляя возможность развития...

Собственно разработчик представляет архитектуру V-Cube в виде 

Базируется все это великолепие на открытых стандартах, в качестве гепирвизора KVM, а в качестве основы и среды управления используется Collax Platform Server, о котором я уже писал ранее. Первый раз читая даташит по продукту я как завороженный смотрел на картинку в левом нижнем углу, оригинал которой хочу и Вам показать

 А добила меня картинка мониторинга виртуальных машин подсмотренная на странице продукта в интернете,

после которой я бросил все дела и начал строить "Лабу" 

 Для данного обзора я решил поставить V-Cube с нуля и надеюсь, что читатели испытают те-же чувства, что и я, полтора года назад впервые установив Collax V-Cube на сервер :) Предупреждаю сразу, что разворачиваю я V-Cube в виде виртуальной машины на ноутбуке c Ubuntu 12.04 и гипервизором KVM.
Дистрибутив на физический сервер ставится минут за 15-20 в зависимости с какого носителя CD или USB происходит установка, на виртуалке немного дольше. При наличии бэкапа конфигурации и использовании СХД это время можно принять за время восстановления системы в Business Continuity Plan(BCP).

После стандартного набора действий по начальной настройке и вводу лицензии в разделе Wizards получаем рабочий сервер виртуализации

Не особо разбираясь в том что получилось, как и полтора года назад, сразу же из раздела Wizards создаем первую виртуальную машину

загружаю образ Turnkey Core(лежал под ногами)

Первичные параметры системы

Сетевые настройки

Диск

И вуаля

Далее идем в Settings->Virtualization->Configuration->Virtual Machines

Затем идем в Settings->Virtualization->System Operation-> Machine Control

И стартуем нашу машину

Возвращаемся в System Information и наблюдаем появившийся модуль мониторинга запущенных виртуальных машин

А в разделе Ethernet Status наблюдаем

Просто? Но, поверьте - не примитивно :) Высокоразвитый сетевой функционал(обзор был ранее) позволяющий избежать многих проблем с которыми сталкиваются ИТ-службы использующие виртуализацию, развитая система бэкапирования и восстановления построенная на основе Bacula позволяющая, не только быстро восстановить сам сервер виртуализации со всеми виртуальными машинами, но и через V-Recovery восстанавливать, избирательно, необходимые файлы из виртуальных машин. Системы хранения SAN/NAS... по iSCSI сразу настраиваются в multipath

Кстати, для этого теста я развернул iSCSI NAS(dss6) от компании Open-E, как еще одну виртуальную машину, и в нем разместил виртуальную машину из V-Cube.
Управление виртуальными машинами

Управление снапшотами

Шаблонизатор для виртуальных машин

и много-много других вкусностей.

При этом все это великолепие стоит столько же сколько стоит годовая подписка на интерпрайзный Linux от любого из двух известных компаний:)
Выводы?
А нужно?