Встреча Russian BI PASS Chapter в московском технологическом центре Майкрософт

В четверг, 27 сентября 2012 года в 19:30  в Московском технологическом центре Майкрософт состоится очередная встреча Russian BI PASS Chapter.

Докладчик: Сергей Олонцев.

Доклад: «Change data capture, change tracking и инкрементальная загрузка данных в хранилище с помощью SSIS 2012»

Ссылка для регистрации: http://www.facebook.com/events/271619339622186/

Место проведения:
Москва, ул. Лесная, 5С, 6 этаж, аудитория «Арсенальная».
При себе необходимо иметь паспорт.

Карта: http://maps.yandex.ru/-/CVqYQLK9

Анализ открытых статистических данных по РФ в Excel 2013

Excel 2013 позволяет любому пользователю Excel подключить для анализа данные, связанные с функционированием государства (с помощью PowerPivot) и проанализировать информацию с помощью интерактивных диаграмм Power View.

В представленной демонстрации показано, как использовать для анализа данные с сайта Единой межведомственной информационно-статистической системы и министерств финансов субъектов РФ.

Дополнительные материалы: Как общество может отслеживать результаты государственной деятельности с помощью Excel 2013

Онлайн-семинар по теме SQL Server и BI «24 Hours of PASS»

Сегодня (!) и завтра пройдет бесплатный онлайн-семинар по теме SQL Server и Microsoft BI в составе 24-х веб-сессий (на английском языке).

Семинар «24 Hours of PASS» представлен организацией Professional Association of SQL Server (PASS). Доклады читают лучшие мировые эксперты. Не пропустите!

Новое в Excel 2013 Preview для бизнес-аналитики

Мечты сбываются… В новой предварительной версии Excel 2013 появились те функции для анализа информации, которые выводят Excel на совершенно новый уровень и фактически задают новый стандарт аналитики, доступной для всех…

Справедливости ради стоит заметить, что наиболее важный аналитический компонент PowerPivot, позволяющий создавать аналитические модели, был доступен для использования и для предыдущей версии – Excel 2010. Но сейчас PowerPivot и Power View (ранее доступный только при работе с порталом SharePoint) встроены в Excel 2013 по умолчанию.

Функция «молниеносного заполнения» (Flash Fill)

Благодаря функции «молниеносного заполнения» (Flash Fill) Excel может интеллектуально находить шаблоны в данных и предлагать соответствующий вариант заполнения оставшихся ячеек. Найденные правила можно в дальнейшем корректировать путем редактирования других ячеек редактируемого набора данных.

Функция “быстрого анализа” (Quick Analysis)

Функция “быстрого анализа” (Quick Analysis) позволяет начинающим пользователям мгновенно находить уникальные записи и дубликаты, а также добавлять рекомендованные для наборов данных диаграммы.

Фильтр «линия времени» (Timeline)

Новый визуальный фильтр «линия времени» (Timeline) автоматически определяет измерение времени в Excel-данных и позволяет более гибко фильтровать данные по времени.

Нововведения в работу с диаграммами

  1. Появилась возможность создавать «диаграммы трендов» (trend charts) для быстрого отображения данных по времени.
  2. Сводные таблицы и диаграммы перестали быть связанными объектами, т.е. сейчас можно создать сводную диаграмму без предварительного создания таблицы.

Power View в Excel 2013 Preview

В Excel 2013 сразу после установки доступен компонент Power View (доступный без подключения к порталу) со следующими дополнительными функциями:

  1. Интерактивные карты для отображения данных из сводных таблиц Excel, в которых присутствуют названия георграфических мест. При этом координаты определяются автоматически на основании названия объекта (нужно указать уровень наименования объекта)
  2. Поддержка иерархий и ключевых показателей эффективности (KPI)
  3. Поддержка переходов вниз и вверх по иерархиям (Drill Up, Drill Down)
  4. Расширенные возможности оформления: темы оформления, изменение размеров шрифтов, поддержка гиперссылок
  5. Возможности подключения к нескольким моделям в книге Excel, диапазону набора данных, взаимодействие с интернет/интранет-книгами Excel (в Excel Services), книгами Excel в Office 365.

Составные приложения в Excel 2013

В книги Excel 2013 можно встраивать внешние приложения Office 2013, которые можно связать с данными, находящимися непосредственно в диапазонах данных Excel. Пример такого приложения – «Bing Maps для Office»

Демонстрация

Дополнительная информация

Процесс создания карты в Power View описан в статье Show Map Inside Power View in Excel 2013.

Инструменты анализа и визуализации данных в Microsoft BI

Обновил статью и соответствующий видео-ролик про Инструменты анализа и визуализации данных в Microsoft BI (актуализировал про новые компоненты SQL Server 2012).

Семантическая модель аналитических данных (BISM)

Последнее обновление: 16.04.2014

В SQL Server в составе аналитических сервисов (SQL Server Analysis Services) доступна для использования семантическая модель бизнес-аналитики (BISM – Business Intelligence Semantic Model), которая объединяет в себе многомерную модель аналитических данных (ранее носившую название UDM – Unified Dimensional Model) и табличную модель аналитических данных (также известную как модель данных PowerPivot).

Табличная (tabular) модель может быть самостоятельно создана офисными сотрудниками в Excel (с помощью компонента PowerPivot).

Табличная модель в Excel позволяет:

  • включить в модель данные из произвольных источников;
  • быстро работать с объемыми данных в десятки миллионов строк, что достугается сжатием данных на уровне колонок с помощью движка xVelocity или VertyPaq;
  • создавать вычисления с помощью языка запросов DAX (Data Analysis Expressions).

Табличную модель Excel можно преобразовать в табличный проект SQL Server Data Tools (SSDT) – по сути проект Visual Studio для бизнес-аналитики, а затем опубликовать в табличном экземпляре аналитических сервисов.

Табличный проект позволяет дополнительно использовать секционирование и разграничение доступа к объектам модели вплоть до уровня данных. С точки зрения хранения данных это может быть хранение в ОЗУ сервера (режим xVelocity, объемы данных ограничены только объемом ОЗУ сервера) и хранение непосредственно в базе SQL Server (Direct Query; при этом рекомендуется использовать индексы хранения на уровне колонок – ColumnStore Indexes).

Возможна организация циклического процесса разработки моделей, когда офисные пользователи (аналитики) модифицируют модель в Power Pivot, а сотрудники ИТ-подразделения импортируют модель в Visual Studio (SSDT), публикуют ее и применяют к ней дополнительные XMLA-скрипты для прописывания прав доступа и других расширений модели.

Многомерный проект создается как и раньше в Visual Studio (SQL Server Data Tools), для вычислений использует язык запросов MDX (Multi-Dimensional Expressions), позволяет использовать различные стратегии доступа к данным (ROLAP, MOLAP, HOLAP), различные стратегии агрегирования и так далее. В конечном итоге многомерный проект позволяет реализовать наиболее сложные аналитические модели на максимально возможных объемах данных. Недостатки многомерной модели – требуется высокая квалификация разработчика модели, а для создания модели должно быть предварительно подготовлено хранилище данных – нет возможности на лету подключать дополнительные источники данных.

В следующем докладе рассказывается подробнее о многомерных моделях и показаны демонстрации работы с такими моделями.

Про оптимизацию производительности многомерных кубов можно посмотреть доклад на TechDays.ru.

Вне зависимости от используемого типа модели данных, на основании BISM можно строить отчеты, карты показателей и информационные панели с помощью широкого спектра пользовательских инструментов (табличные модели при публикации для приложений выглядят так же, как многомерные модели).

Дополнительная информация:

  1. MSDN. Introducing the BI Semantic Model in Microsoft® SQL Server® 2012
  2. MSDN. Choosing a Tabular or Multidimensional Modeling Experience in SQL Server 2012 Analysis Services
  3. MSDN. Analysis Services MOLAP Performance Guide for SQL Server 2012 and 2014
  4. MSDN. Securing the Tabular BI Semantic Model
  5. MSDN. Using DirectQuery in the Tabular BI Semantic Model

Практические рекомендации по SSAS OLAP:

Полезные ссылки по табличной модели BISM: