Filed under: Uncategorized | 2 комментария »
Анализ «больших данных» для финансового сектора
Публикую демонстрационный сценарий анализа «больших данных» (Big Data) для компаний финансового сектора. В сценарии будут проанализированы полу-структурированные данные по стоимости акций и дивидендам в разрезе соответствующих отраслей экономики за 30 лет (на основании данных Нью-Йоркской фондовой биржи). Аналогичные задачи могут быть актуальны для участников рынка ценных бумаг включая частных и институциональных инвесторов, таких как пенсионные фонды, банки, страховые компании, а также корпорации, размещающие на рынке собственные ценные бумаги.
В этой демонстрации команда компании, торгующей ценными бумагами, совместно производит анализ данных из Hadoop:
- Архитектор данных собирает информацию и делает ее доступной для других участников. Он использует Hadoop в Windows Azure и запросы Hive для агрегирования (укрупнения) стоимости акций и дивидендов по годам.
- Финансовый аналитик анализирует данные по стоимости акций и готовит отчеты для поддержки задач торговли и управления. Она использует надстройку Power Query для Excel для объединения данных из Hadoop с дополнительным набором данных по 500 наиболее крупным компаниям из Azure Marketplace Datamarket. Дополнительно она формирует модель данных Power Pivot и создает примеры отчетов Power View.
- Начальник управления ценных бумаг отвечает за формирование предложения по составу портфелей ценных бумаг для клиентов. Он самостоятельно производит изменения в отчеты Power View, полученные от финансового аналитика.
Ниже приведены некоторые снимки экрана из демонстрационного сценария.
Filed under: Видео, Примеры, Статьи | Tagged: Big Data, Excel, Hadoop, HDInsight, Power Pivot, Power Query, Power View | Leave a comment »
Презентация для Открытого университета Сколково
Выкладываю презентацию по теме «Новые методы хранения, обработки и передачи данных», по которой я вчера делал доклад для Открытого университета Сколково.
Иван Косяков – Новые способы хранения обработки и передачи данных
Filed under: Презентации | Tagged: Big Data | 3 комментария »