• Пленарный доклад (дополнительно есть английская версия)
• Microsoft, Hadoop, SQL server, StreamInsight…
• Самостоятельная бизнес-аналитика
• SQL Server Parallel Data warehouse (обзор, лучшие практики, новое в AU3)
• Data Mining: рекомендательные системы
• Оптимизатор запросов в SQL Server и статистика
• Масштабирование OLTP приложений: аспекты дизайна приложений и аппаратной платформы (новые возможности SQL Server 2012 для создания высоконагруженных приложений)
• SQL Server 2012 AlwaysOn: подробно о новых возможностях и расширениях высокой доступности
• Управление информацией организаций (DQS, MDS, SSIS, проект “Barcelona”)
• SQL 2012 и гибкие методы командной разработки c Team Foundation Server 11
• Новое в T-SQL для SQL Server 2012
• Масштабируемость  SQL Server и SQL Azure
• SharePoint Insights и SQL Server 2012

А пока публикую ссылки на замечательные видео-ролики, которые мы показывали на наших последних конференциях. Инсайдерская информация — ролики сделаны при поддержке Александра Перчикова (финансирование — Microsoft). Сценарий первого ролика писал также Александр, и идея перевода второго ролика на русский язык также его, за что ему большое спасибо!

1. Персональная аналитика – это когда пользователи используют Excel с надстройкой PowerPivot в их каждодневной самостоятельной работе. Например, менеджер по продажам анализирует результаты своей работы.
2. Коллективная аналитика – когда одни пользователи создают отчеты (например, в Excel, либо над моделью BISM с помощью Power View) и предоставляют эти отчеты в пользование другим сотрудникам. Например, директор департамента использует отчет, созданный другим сотрудником, или на основании модели BISM (например, опубликованной с помощью файла Excel) создает самостоятельно отчет Power View.
3. Корпоративная аналитика – когда процесс создания аналитической модели  и отчетов берет на себя служба информационных технологий. При этом разрабатываются интеграционные пакеты по загрузке и очистке данных (с помощью Integration Services и Data Quality Services), формируются выверенные аналитические модели с едиными в пределах организации показателями, формируются согласованные между подразделениями отчеты.

Давайте рассмотрим наиболее важные нововведения в SQL Server 2012 CTP3. На следующем рисунке приведены компоненты SQL Server, а розовым цветом выделены наиболее значимые изменения.

Business Intelligence Semantic Model (BISM)

В составе аналитических сервисов введена семантическая модель бизнес-аналитики (BISM), которая объединяет в себе многомерную (ранее — UDM) и табличную модель данных (ранее – модель данных PowerPivot).

К BISM можно строить запросы с помощью языков MDX и DAX. Нужно только иметь в виду, что хотя с помощью DAX можно делать запросы к многомерной модели BISM (ранее — UDM), с помощью DAX в этой модели нельзя будет создавать новые показатели (в табличной модели BISM, разумеется, можно)…

В части доступа к данным для многомерной модели данных используются варианты хранения данных ROLAP, MOLAP и промежуточные. Для табличной модели используется режим VertiPaq (при этом в «Denali» на несколько порядков увеличились объемы данных, которые можно обрабатывать на сервере) и новый вариант доступа в виде прямого запроса к реляционной базе данных (при этом можно использовать индексы хранения колонок (ColumnStore indexes), о которых речь пойдет в дальнейшем.

Соответственно, модель можно формировать на основании большого набора источников данных, в том числе, потоков данных и данных из облачных сервисов (SQL Azure DataMarket).

Вне зависимости от используемого типа модели данных, на основании BISM можно строить отчеты, карты показателей и информационные панели с помощью широкого спектра пользовательских инструментов, к которым в Denali добавился Power View (ранее известный как «Crescent»).

Power View для интерактивного анализа данных

Новый компонент Power View позволяет обычным пользователям самостоятельно строить интерактивные отчеты и информационные панели на основании BISM.

Построение отчетов в Power View интуитивно понятно для обычных пользователей и характеризуется высокой интерактивностью и богатыми возможностями представления информации для анализа. Компонент автоматически связывает между собой различных части отчета, при выборе определенного элемента отчета показывает те же данные в других частях отчета, позволяет просматривать изменение данных в динамике и многое другое.

В следующем демонстрационном ролике показаны основные функции Crescent на примере организации по продаже товаров.

Отчеты Crescent также можно интегрировать в презентации PowerPoint и менять запросы к данным непосредственно в этом офисном продукте.

Data Quality Services для управления качеством данных

Новый компонент SQL Server 2012 CTP3 под названием Data Quality Services предназначен для очистки и/или устранения дубликатов в данных, загружаемых из источников.

Процесс работы с DQS состоит из двух основных этапов.

1. Создается база знаний DQS, в которой задаются домены (анализируемые атрибуты данных) и правила очистки доменных значений (правила очистки, список правильных значений и альтернативных значений для переименования, внешние данные для сравнения). Далее по мере использования эта база знаний постоянно дополняется.
2. На основании базы знаний создаются проекты DQS по очистке входных данных. При этом указывается входной
   источник, соответствия полей источника и доменов, данные из источника проходят автоматическую и ручную обработку, а затем могут быть экспортированы в SQL Server или CSV-файл.

Проекты DQS также можно использовать в пакетах Integrations Services для обработки новых записей в автоматическом режиме.

Улучшения в Master Data Services

В Master Data Services также есть множество значительных улучшений, среди которых:

• надстройка MDS для Excel, позволяющая быстро создавать новые модели данных и осуществлять групповые изменения данных;
• интеграция с проектами по управлению качеством данных (DQS);
• для импорта информации для каждой сущности создается отдельная таблица, что значительно упрощает интеграцию (например, с помощью SSIS);
• удобный веб-интерфейс с использованием технологии Silverlight.

В результате этих нововведений архитектура MDS в SQL Server 2012 принимает следующий вид.

Другие улучшение в SQL Server 2012 CTP3 для бизнес-аналитики
(Microsoft BI)

В числе других улучшений входят:

• индексы хранения колонок (ColumnStore indexes) в реляционной базе данных позволяют на порядки ускорить операции JOIN на схеме базы данных тика «звезда», что значительно увеличивает производительность хранилищ данных;
• SSRS в «Denali» работает как сервис общего доступа в SharePoint, что облегчает настройку и управление (резервное копирование, восстановление, ULS-журналирование, PowerShell), а также позволяет масштабировать решение;
• благодаря возможности создания нотификаций в SSRS, интегрированных с SharePoint, пользователь интуитивно может для имеющихся отчетов задать условия, когда эти отчеты должны приходить по электронной почте;
• появилась работать с SSRS в «облаке» (SQL Azure), благодаря чему операционная отчетность организаций может формироваться на базе данных SQL Azure, и можно встраивать отчеты в приложения Windows Azure или в пределах организации;
• многое другое (об этом – в следующих публикациях).

В предлагаемом варианте решения используется PowerPivot для Excel 2010, SharePoint 2010 и SQL Server 2008 R2 (для обеспечения работы PowerPivot для SharePoint).

Решение характеризуется следующими особенностями:

1. Бюджетные ограничения и бюджеты подразделений заводятся в файлы Excel, расположенные в библиотеке SharePoint (при необходимости для загрузки бюджетных ограничений из произвольных источников можно использовать PowerPivot). К этим файлам Excel можно применить рабочие процессы SharePoint для организации различных стадий согласования введенных данных.
2. В сводном файле Excel  с помощью PowerPivot консолидируются данные из исходных файлов Excel с бюджетами подразделений. Здесь же можно реализовать сводные отчеты и диаграммы (например, для сравнения бюджета и бюджетных ограничений).
3. При публикации файла Excel с моделью PowerPivot на портале SharePoint в экземпляре сервиса SSAS (режим VertiPaq) автоматически публикуется куб SSAS, который может служить источников для различных инструментов визуализации данных, таких как Reporting Services, PerformancePoint Services, Excel.

В приведенной ниже видео-демонстрации показан пример реализации такого решения (время на разработку – полтора дня).

Project REAL – лучшие практики проектов по бизнес аналитике (термин «REAL» расшифровывается как «Reference implementation, End-to-end, At scale, and Lots of users» – примеры реализации, полное решение, большой масштаб, много пользователей). Пакет материалов содержит документ и вебкасты по проблемным областям BI-проектов:

• разработке схем данных – реляционной и многомерной;
• осуществлению процессов выгрузки, преобразования и загрузки (ETL);
• разработке и размещению систем презентационного уровня для отчетности и интерактивного анализа;
• масштабирования систем при внедрении;
• управления и обслуживания систем на постоянной основе, включая инкрементальные обновления данных.

См. также: Эти и другие обучающие материалы

Общий список докладов по теме Microsoft BI с конференции «Платформа 2011»:

• BI в SharePoint 2010 от А до Я (BI 306)
• Использование языка Data Analysis Expressions в PowerPivot (DT308)
• Visio 2010. Возможности работы с SharePoint 2010 и визуализация бизнес-информации (PS205)
• Горизонтальная масштабируемость аналитических систем в редакции SQL Server 2008 R2 Parallel DataWarehouse (BI202)
• SQL Server 2008 R2 для многопроцессорных систем в задачах построения хранилищ (BI405)
• Практика использования Microsoft SQL Server 2008 и 2008 R2 для систем хранилищ данных (BI303)

С 9 по 11 ноября главные руководители направления SQL Server – Ted Kummert, Quentin Clark и David DeWitt выступят в главном зале конференции, чтобы рассказать о последних и наиболее значимых новостях по данной теме. В частности, будут раскрыты планы развития следующей версии SQL Server.

Эти главные сессии будут доступны в онлайне, поэтому рекомендую вам оперативно зарегистрироваться для их просмотра.

Что касается сегодняшнего дня, было несколько предварительных сессий.

Лично я посетил семинар ETL with SSIS Bootcamp (BIA-225-P), на котором Brian Knight и его коллега из компании Pragmatic Works раскрыли наиболее важные моменты использования данной технологии. Это была глубокая сессия на один день, но докладчики смогли сделать ее увлекательной и даже устроили соревнование между двумя половинами аудитории…

Видео-демонстрацию работы PivotViewer для SSRS можно посмотреть по ссылке.

Источник: SQL Server Team Blog: PivotViewer extension for SQL Server Reporting Services

Основу доклада составляет демонстрация пользовательских инструментов анализа данных на русифицированной виртуальной машине R9.2.