Давно не брал я в руки шашку не писал в этом блоге. А материалов, тем не менее, накопилось много, а мыслей ещё больше. Тем не менее, не так давно было окончательно объявлено, что в следующем году выходит новая версия SQL Server 2012 (ранее кодовое название Denali). Для себя я отмечаю среди новшеств и улучшений две основных темы:

• отказоустойчивость (дурацкий русский термин, мне больше по душе английский High Availability) и масштабируемость (особенно с точки зрения интеграции Vertipaq в виде ColumnStore Index в решении для хранилищ данных).
• Бизнес-аналитика (особенно проект, который носил название Crescent, демонстрации которого производят неизгладимое впечатление на пользователей).

На самом деле и про эти темы и про другие говорить можно долго, предлагаю начать знакомиться с гидом по продукту. Его можно скачать здесь. Потом нужно будет его распаковать и запустить скрипт STARTHERE.

Гид по продукту включает в себя ссылки на виртуальные лабы по SQL Server 2012 CTP3, не требующие установки, а также:

• 32 новых технических презентации;
• два кратких описания;
• лабо по AlwaysOn (как раз на тему High Availability).

Скоро будут ещё новости, так что если вы разрабатываете и внедряете решения на SQL Server, то нужно готовиться.

В интернетах шумиха по поводу “падения” одного из публичных облаков.

В этой свиязи ловите ссылки на страницы где, можно отслеживать текущие статусы работоспособности трёх публичных облачных платформ:

• статус работы IaaS облака Amazon отслеживать здесь.
• статус работы Google App Engine смотреть здесь
• статус работы Google Apps смотреть здесь
• статус работы PaaS облака Microsoft Azure здесь

У всех панелей есть возможность подписка на обновления посредством RSS, что удобно.

А вообще, коли, каждое падение какого-либо из облаков приводит к такой шумихе, когда начинают перечисляться те или иные системы, которые недоступны из-за того, что они в упавшем облаке – значит тема с публичными облаками-таки пошла.

Упоминания в Twitter

	pdiyakov Отслеживаем текущие статусы работы публичных облаков http://itaas.ru/u1c
	Re-Tweet | Reply | View Tweet

Попался мне тут опрос в LinkedIn на тему моего отношения к тому, что Oracle решила свернуть свои разработки под Itanium. Интересно, что опрос устраивается, судя по всему, кем-то из HP.

Интересны результаты. На момент данной публикации на опрос ответили 16 человек. Среди тех, кто ответил очень велик (44%) процент тех, кому безразлично это решение Oracle. Признаюсь откровенно – я один из них. И объясню почему. С точки зрения моей текущей работы – это означает, что коллегам из HP для задач работы СУБД придётся активней продавать свои сервера на Xeon, а тут мы совместно с ними сможем активнее конкурировать с Oracle. С точки зрения стороннего наблюдателя я в принципе понимаю решение Oracle: зачем им распалять свои силы на две RISC платформы, тем более, что одна из этих платформ принадлежит им же. К тому же, учитывая “натянутые” отношения между Oracle и HP, понятно желание более активно продвигать собственную аппаратную платформу. А ещё, опять же как стороннему наблюдателю, мне интересна эта ситуация тем, что HP, надеюсь, сейчас активнее начнёт работать совместно с Intel над тем, чтобы сделать более мощные системы на основе Xeon. B вот тогда заказчикам массово станут доступные очень интересные системы.

А как вы относитесь к тому, что Oracle также как и Microsoft прекратила разработку под Itanium?

Упоминания в Twitter

	pdiyakov Oracle под Itanium - не будет разрабатывать. http://itaas.ru/7z
	Re-Tweet | Reply | View Tweet

Компания Silicon Graphics (SGI) сертифицировала свой сервер Altix UV 1000 под Windows Server 2008 R2. На сегодняшний момент это самый мощный сервер для работы Windows Server 2008 R2 (поддерживает до 256 процессоров Intel® Xeon® 7500 и до 2 ТБ оперативной памяти). В сравнении с другими большими решениями на Xeon ситуация такова: относительно HP масштабируемость выше в 4 раза, в сравнении с IBM – в 2,6 раза.

Решение (а просто железкой этого монстра назвать не поворачивается язык) представляет пример того, насколько способны сервера стандартной архитектуры участвовать в задачах категории mission critical. Представим как в сочетании с Windows Server 2008 R2 Datacenter и SQL Server 2008 R2 Datacenter Edition это решение может быть использовано как для обработки больших объёмов данных, так и в сочетании с Hyper-V для консолидации большого количества серверов баз данных при централизации инфраструктуры большой организации.

В свете данного решения всё интересней становится ситуация с дорогими железками на RISC-процессорах. Как долго производители будут оправдывать высокую цену на них, с учётом особенно того, что сервера становятся всё более закрытыми. SPARC – стал процессором для СУБД Oracle, Power – для DB2. HP становится не у дел с Itanium после того, как Oracle прекратил разработку под него. Мне кажется, HP задумается над покупкой SAP, дабы у неё появился Sybase.

Вообще интересна цитата из пресс-релиза SGI относительно прогресса Intel в Xeon для критически-важных систем:

"SGI and Intel are changing the dynamics of mission critical computing," said Pauline Nist, general manager of Mission Critical Computing at Intel. "By combining the power of the Intel Xeon processor with SGI’s high-performance Altix UV system, large scale-up x86 computing is now a reality for IT looking for alternatives from the costly and proprietary RISC/mainframe architectures."

Позитивная новость: с одной стороны на Xeon есть-таки дорогие железки, а с другой стороны несмотря на дороговизну, появилось более доступное решение для построения больших систем для обработки больших объёмов данных.

Упоминания в Twitter

	pdiyakov Крупнейший сервер для Windows Server 2008 R2 от SGI http://itaas.ru/nzh
	Re-Tweet | Reply | View Tweet

На сайте, посвящённом использованию Платформы Microsoft для mission-critical систем появилось обновление. Сделан очень удобный браузер примеров-внедрений, реализованный на Pivot Viewer. Если вы ищете примеры внедрений, например, SQL Server для реализации задач BI, то с помощью данного сайта это сделать стало быстро и просто.

Упоминания в Twitter

	pdiyakov Примеры внедрений Платформы Microsoft для критически-важн http://itaas.ru/v64
	Re-Tweet | Reply | View Tweet

В недрах корпоративного интранет обнаружилась интереснейшая презентация одного американского коллеги, который с завидной регулярностью отслеживает отчёты с квадратами от Gartner и анализирует эти аналитические отчёты. Коллега, проанализировал следующие отчёты:

—Unified Communications 28 July 2010

—Enterprise Wireless E-Mail Software Market 10 June 2010

—Web Conferencing 4 November 2010

—Horizontal Portal Products 3 September 2010

—Social Software in the Workplace 25 October 2010

—*Information Access Technology 2 September 2009

—Enterprise Content Management 16 November 2010

—Business Intelligence Platforms 29 January 2010

—IT Project and Portfolio Management 6 June 2010

—Sales Force Automation (CRM) 28 July 2010

—CRM Customer Service Contact Centers 9 April 2010

—Midmarket and Tier 2-Oriented ERP for Product-Centric Companies 4 June 2009

—Business Process Analysis Tools 22 February 2010

—Data Warehouse Database Management Systems 28 January 2010

—Enterprise Application Servers 24 September 2009

—Application Infrastructure for Systemic Application Integration Projects 18 October 2010

—Application Infrastructure for Systematic SOA-Style Application Projects 21 October 2010

—Secure Email Gateways 27 April 2010

—PC Configuration Life Cycle Management Tools 4 January 2011

—IT Event Correlation and Analysis 13 December 2010

Все эти отчёты включают позиционирование продуктов, составляющих Платформу продуктивности и совместной работы. Платформа состоит из следующих компонент:

Единая платформа коммуникаций:

• Email, IM, Presence, VoIP, UM, Conferencing, Mobility

Платформа взаимодействия

• Соц. сети, Поиск, Порталы, Управление рабочими процессами, ECM

Средства Бизнес Анализа (BI)

• BI, CRM, ERP, Управление Проектами

Интеграция приложений

• Аналитические хранилища, SOA, Back-End Integration, B2B Gateways

Информационная безопасность и Управление

В итоге анализа отчётов получается, что Gartner очень любит Microsoft, так как решения Microsoft попадают во всех 20-ти отчётах в квадрат лидеров. К примеру, другие вендоры, которые тоже играют на ниве решений продуктивности совместной работы, гораздо реже попадают в квадрат лидеров:

• IBM – 11
• Oracle – 10
• HP – 3
• Salesforce.com – 2
• Google – 1

Продуктовая линейка Microsoft, составляющая Платформу, отмеченную в отчётах Gartner:

Единая платформа коммуникаций:

• Exchange, OCS, Live Meeting, Windows Mobile/Phone, Mobile Device Mgr

Платформа взаимодействия

• SharePoint Server, SharePoint Online, FAST Search and Transfer

Средства Бизнес Анализа (BI)

• Excel, SharePoint, CRM, Dynamics, Project, Portfolio, SQL, Visio

Интеграция приложений

• Windows Server, SQL, .NET, BizTalk, Visual Studio, Windows Azure

Информационная безопасность и Управление

• ForeFront, System Ctr. Config. Manager, System Ctr. Ops. Manager, MDOP

Стоит отметить, что заказчики, которые заключают соглашение Enterprise Agreement обладают по этому соглашению продуктами и решениями, которые входят в квадраты лидеров Gartner.

Конечно же ещё есть куда расти, есть возможность подвигать другие решения из квадратов Челленджеров и Визионеров, но это-то и интересно. А Заказчикам хорошо.

Упоминания в Twitter

	pdiyakov Gartner любит Microsoft http://itaas.ru/zum
	Re-Tweet | Reply | View Tweet

На сайте коллег из HP доступна детальная спецификация решений HP Enterprise Data Warehouse Appliance, которое построено на основе Microsoft SQL Server PDW. Думаю сия информация будет особенно полезна тем, кому хочется знать что же внутри этой железки именно из железа, так как в Microsoft мы любим рассказывать про бизнес-преимущества решений на основе SQL PDW, а есть аудитория, которым подавай анатомию этих самых программно-аппаратных комплексов.

Для тех, кому интересна детальная анатомия можно посмотреть на цитату из оригинала с картинками и составом Control Rack и Data Rack ниже. Тем кому интересно узнать на какие объёмы расчитаны возможные на текущий момент конфигурации могу сказать, что решение рассчитано на объёмы хранилищ от 28 Терабайт данных до 508 Терабайт.

Упоминания в Twitter

	pdiyakov Анатомия программно-аппаратного комплекса HP EDW http://itaas.ru/ct8
	Re-Tweet | Reply | View Tweet

Современные автомобильные гонки требуют постоянного анализа огромных массивов данных, поступающих с гоночных автомобилей во время тренировок, квалификаций и гоночных заездов.

Гонки же Формулы 1 представляют собой передовую инноваций не только автоспорта, но и автомобильной промышленности. Причём это касается и информационных технологий. Так, автомобиль Формулы 1 генерирует сотни миллионов точек данных в час. Данные в систему мониторинга и оценки производительности поступают от тысяч компонент автомобиля ежесекундно. Во время одной гонки или тестового заезда одна гоночная машина производит 700 миллионов значений данных, генерируемых менее чем за два часа. За один сезон, гоночная команда накапливает сотни миллионов измерений. Извлечение и анализ такого большого количества исторических данных для получения полезных и значимых данных является серьёзным вызовом для гоночных команд.

Один из лидеров современной Формулы 1 McLaren, которая, помимо участия в гонках Formula 1, также делает “гражданские” спорткары, решила одной из первых в мире испытать решение SQL Server PDW (Parallel Data Warehouse). Консультанты компании EMC помогли построить аналитическое хранилище на основе SQL Server PDW, серверов Dell PowerEdge и систем хранения EMC CLARiiON. Тестовая система, на которой отрабатывались сценарии загрузки данных и анализа, построена на стандартном оборудовании DeLL и EMC и состоит из серверного шкафа управления и одного шкафа данных, состоящего из восьми узлов БД.

Результаты тестов

• загружено 1.5 ТБ данных одной сессии в хранилище PDW.
• Скорость загрузки более 100 Мбайт в секунду.

Такие скорости загрузки позволяют загрузить в аналитическую систему данные одного заезда гоночной машины и сделать их доступными для анализа за 7 минут.

После загрузки данных в хранилище, была проведена симуляция и объём хранилища составил 12 ТБ. Это позволило эмулировать данные с 90 полных гоночных заездов и тестовых сессий. Такой объём данных позволил проводить анализ по общим данным сессий, содержащимся почти в 400 миллиардов строк телеметрических данных.

Консультанты EMC, смогли провести поиск сходных шаблонов данных между сессиями, затрачивая на каждый запрос примерно 13 секунд.

В результате тестовых испытаний Parallel Data Warehouse появилась возможность проводить интерактивный анализ по всему объёму исторических данных, получая за секунды ответы на вопросы “Где такое случалось раньше?” и “Как это событие связано с другим событием?”. Таким образом решение PDW позволяет находить и строить различные зависимости и взаимосвязи между кластерами данных в различной исторической перспективе.

Подробности о решении здесь.

По-моему этот пример, который стал одним из первых публичных примеров использования PDW для анализа данных. Прошу заметить, что этот пример, также показывает один из полезных и удобных для заказчиков моментов решения Microsoft SQL Server Parallel Data warehouse – быстрый анализ больших объёмов данных возможен за небольшие деньги на стандартном оборудовании различных вендоров.

Упоминания в Twitter

	pdiyakov McLaren собирается использовать SQL Server Parallel Data Warehouse http://itaas.ru/d6u
	Re-Tweet | Reply | View Tweet

Многие уже знают про то, что такое SQL Server 2008 R2 Parallel Data Warehouse. На сайте HP доступна информация о первом программно-аппаратном комплексе для поддержки SQL Server PDW. Называется он HP Enterprise Data Warehouse Appliance. Рассчитан HP EDWA на построение хранилищ данных размерами от 48 ТБ до 500 ТБ.

Вычислительные узлы строятся на основе серверов HP ProLiant DL360 G7 с двумя Intel® Westmere процессорами и 12 ядрами и СХД HP StorageWorks P2000 G3 MSA.

Я пока не могу очень много информации распространять, посему привожу ссылки на сайт HP, где многое доступно уже сейчас.

Статья в блоге SQLPDW про HP EDW

HP EDW site

HP EDW fact sheet

Упоминания в Twitter

	MShishov RT @pdiyakov: Немного про HP Enterprise Data Warehouse Appliance http://itaas.ru/k1t
	Re-Tweet | Reply | View Tweet

	pdiyakov Немного про HP Enterprise Data Warehouse Appliance http://itaas.ru/k1t
	Re-Tweet | Reply | View Tweet

Не всегда бывает просто понять – зачем переходить на новую версию оборудования или ПО. В случае с Microsoft SQL Server 2008, появляется достаточное количество обоснований для перехода, среди которых: инструменты бизнес-анализа; функции по обеспечению непрерывности бизнес; улучшения в производительности и управляемости. Утверждается, что миграция с SQL Server 2005 на SQL Server 2008 – проста, а миграция с SQL Server 2000 – жизненно необходима. Кстати, мы совсем недавно проводили тестирование одной критически важной системы крупного заказчика – в результате тестов на одном и том же оборудовании (после некоторых доработок) при миграции с SQL Server 2000 на SQL Server 2008 R2 производительность системы была увеличена на 40%.

В одной рассылке пришёл хороший документ с разъяснением необходимости миграции на SQL Server 2008. Основная аудитория документа – заказчики из сегмента Малого и Среднего бизнеса с уже развёрнутыми SQL Server 2005 либо SQL Server 2000 (да-да, таких очень много). Не буду полностью приводить этот документ, а приведу лишь краткие выдержки. И сразу к причинам обоснования такого перехода:

причина 1: возможности бизнес-анализа.

Да, в нашей стране с шальными нефтеденьгами тыжело говорить про бизнес-аналитику, но даже и тут есть заметные подвижки. Те бизнесы, которые всерьёз задумываются о стратегии своей жизни и выживания в конкурентной среде, с помощью инструментов бизнес-анализа, встроенных в SQL Server 2008 уже сейчас начать ими пользоваться. При этом эти инструменты встроены в саму СУБД, за них не нужно платить дополнительные деньги. Таким образом, бизнес-анализ становится доступен не только тем, кто обладает огромными бюджетами, но и тем кто “поменьше”.

Подробнее с инструментами бизнес-анализа можно познакомиться здесь:

http://www.powerpivot.com/

http://www.microsoft.com/sqlserver/ru/ru/solutions-technologies/business-intelligence.aspx

причина 2: обеспечение высокой доступности данных

В SQL Server 2008 было сделано много для повышения уровня доступности данных. Например, зеркалирование стало доступно как в редакции Enterprise Edition так и в редакции Standard Edition.

Подробнее о доступности здесь: http://www.microsoft.com/sqlserver/2008/ru/ru/high-availability.aspx

причина 3: повышение производительности баз данных

Миграция на SQL Server 2008 приводит к повышению производительности БД, при этом с высокой эффективностью с точки зрения цены. Например, можно сильно снизить затраты на систему хранения данных, используя компрессию данных как на уровне данных, так и на уровне резервной копии. 

http://www.microsoft.com/sqlserver/2008/ru/ru/benchmarks.aspx

http://www.microsoft.com/sqlserver/2008/ru/ru/performance-scale.aspx

причина 4: централизованное управление базами данных

В SQL Server 2008 появилась возможность управления серверами БД на основе политик (в редакции Enterprise Edition и в редакции Standard Edition). Данный функционал позволяет централизованно создавать политики управления всеми серверами SQL Server 2008 в рамках организации.

http://www.microsoft.com/sqlserver/2008/ru/ru/manageability.aspx

http://www.microsoft.com/sqlserver/2008/ru/ru/server-consolidation.aspx

причина 5: ни когда не мешает работать на современной версии

При абсурдности, на первый взгляд, такого тезиса он верен и интересен при детальном рассмотрении. SQL Server 2008 хорошо и тесно интегрирован с Windows Server 2008 (тут вам и виртуализация и инструменты, типа, PowerShell), с SharePoint и другими продуктами.

причина 6: SQL Server 2000 необходимо мигрировать

Хотя бы в виду сроков его поддержки со стороны Microsoft

http://support.microsoft.com/lifecycle/?p1=2852

причина 7: с SQL Server 2005  имеет смысл мигрировать

так как это простой путь миграции, который даёт все возможности, перечисленные выше без затрат на переписывание приложений. Кроме того, SQL Server 2005 также будет однажды снят с поддержки

http://support.microsoft.com/lifecycle/?p1=2855

Дополнительные ресурсы по миграции можно найти здесь:

http://www.microsoft.com/sqlserver/2008/ru/ru/migration.aspx

P.S. Обнаружилась ещё одна статья про другие 7 причин перехода на SQL Server 2008 R2 http://www.infoworld.com/d/data-management/seven-reasons-care-about-sql-server-2008-r2-631

Упоминания в Twitter

	pdiyakov Семь причин для миграции на SQL Server 2008 http://itaas.ru/kpn
	Re-Tweet | Reply | View Tweet