Pull to refresh
  • by relevance
  • by date
  • by rating

Работа со 100 000 000 строк данных в Excel через PowerPivot

IT-companies
Доступен для загрузки продукт PowerPivot (кодовое имя Gemini). PowerPivot — это дополнение к Excel 2010, которое позволяет оперировать в реальном времени десятками миллионов записей в таблицах Excel. Кроме того, PowerPivot интегрируется с SQL Server и SharePoint для получения и отображения данных. На видео представлена небольшая презентация сразу вводящая в курс дела:



У PowerPivot есть замечательный официальный сайт, на котором можно найти массу дополнительной информации, доступные для понимания нетехнических специалистов видео-ролики, и удаленную лабораторную работу через RDP.

Если порыться в интернете, то можно найти еще видео-материалы по теме с демонстрациями инструмента.

Официальный анонс
Total votes 57: ↑38 and ↓19 +19
Views 21K
Comments 36

Выпущен SQL Server 2008 R2 SP1, дополнительные инструменты для SQL Server Denali

SQL *
image

Для загрузки доступна финальная версия первого сервисного пакета исправлений для SQL Server 2008 R2. Пакет SP1 содержит шесть вышедших ранее кумулятивных обновлений для сервера, плюс предлагает некоторые новые возможности.

Загрузить пакет исправлений для разных языков и редакций можно по следующей ссылке (версия для express-редакций).

Кроме того, для загрузки доступны инструменты для сервера баз данных следующего поколения SQL Server Denali, который недавно был выпущен в очередной предварительной версии CTP3. Среди доступных инструментов следующие:
  • Product Documentation for Microsoft SQL Server Code-Named “Denali” CTP3 (link);
  • Express Core CTP 3 (link);
  • PowerPivot for Microsoft Excel CTP 3 (link);
  • Semantic Language Statistics CTP 3 (link);
  • Report Builder CTP 3 (link);
  • Reporting Services Add-in for SharePoint Technologies CTP 3 (link).
Кроме того, через средство Web Platform Installer доступна новая версия интегрированной среды разработки баз данных под кодовым именем Juneau (для замены SQL Server Management Studio).

Читать дальше →
Total votes 31: ↑20 and ↓11 +9
Views 2.5K
Comments 7

Power Pivot: Оконные функции под соусом DAX

Microsoft SQL Server *
[в связи со спорным переносом 1 части поста на geektimes (при том что 2-я часть осталась на хабре) возвращаю 1-ю часть на место]

Работая в сфере аналитики и мониторя различные инструменты BI рано или поздно наталкиваешься на обзор или упоминание надстройки Power Pivot Excel. В моем случае знакомство с ним произошло на конференции Microsoft Data Day.

Особых впечатлений после презентации инструмент не оставил: Да, бесплатен (в рамках лицензии Office), да — есть некий ETL функционал в части получения данных с разрозненных источников (БД,csv,xls, и т.д.), Join-ов этих источников и скармливания в оперативку записей на порядки выше 1 млн.строк в Excel. Короче, посмотрел и забыл.

А вспомнить пришлось, когда появилась необходимость идентификации определённых явлений в данных
Читать дальше →
Total votes 5: ↑4 and ↓1 +3
Views 29K
Comments 0

Как Microsoft спрятала целый сервер и как его найти

System Analysis and Design *Data Mining *Microsoft SQL Server *Database Administration *Microsoft Azure
— Видишь SSAS-суслика?
— Нет…
— И я не вижу. А он есть!

Суслик SSAS

(Кадр из к/ф «ДМБ»)

Поддержка относительно новой табличной (табулярной) модели данных, в противовес устоявшейся многомерной OLAP, встроена в целый ряд продуктов компании Microsoft. Начиная с SQL-сервера (SS) и заканчивая Excel. И если с SS всё понятно – в нём содержится отдельный сепаратный продукт SQL Server Analysis Services (SSAS). А как же решена поддержка языка DAX-запросов и прочей табулярной функциональности в Power BI, SharePoint или Excel? Поищем «суслика» на примере Power BI Desktop.
Читать дальше →
Total votes 19: ↑11 and ↓8 +3
Views 23K
Comments 18

Лингвистический Epic fail, или Как запихнуть весь словарь русского языка в Power BI

Инфосистемы Джет corporate blog Semantics *Programming *Big Data *Software
image

Как-то, решая проблему лингвистического анализа в Power BI и заодно подыскивая примеры для моей предыдущей статьи, я вспомнил о задаче, которую пытался решить в Excel ещё несколько лет назад: нужно было внедрить в аналитическую систему словарь русского языка для лингвистического анализа большого количества запросов на естественном языке. Причём желательно было использовать стандартные офисные инструменты. Подавляющее большинство людей сразу взялись бы решать эту задачу в Excel, и я когда-то пошёл по тому же пути. В качестве словаря использовал открытый корпус русского языка (http://opencorpora.org/).

Но меня ждало разочарование — словарь состоял из 300 тыс. словоформ, более 5 млн записей, а для Excel это в принципе невозможный объём. Даже если запихнуть в него «всего лишь» 1 млн строк, то выполнять с ними какие-то манипуляции или, упаси боже, вычисления, сможет только очень терпеливый человек, который вообще никогда и никуда не торопится. Но в этот раз я решил натравить на задачу более подходящий инструмент — Power BI.
Читать дальше →
Total votes 24: ↑23 and ↓1 +22
Views 7.7K
Comments 18