Phan - Tich - Du - Lieu 5.12.2021

Trường ĐH Khoa Học Tự Nhiên Tp.
Hồ Chí Minh
TRUNG TÂM TIN HỌC
PHÂN TÍCH DỮ LIỆU VỚI DAX

(DATA ANALYSIS EXPRESSIONS)
Phòng Tin học Ứng dụng
2020
Nội dung
1. Introduction
2. Variables
3. Multi Filter
4. Calculate & Nested Level
5. Time Intelligence
6. Advanced Relationships
7. Optimizing DAX
Bài 03: Phân tích dữ liệu với DAX (Data Analysis Expressions) 2
Introduction
 DAX thuộc nhóm ngôn ngữ lập trình hàm (Functional Language) trong
đó cho phép kết hợp các các hàm, toán tử và hằng số để phân tích dữ
liệu.
 DAX được dùng trong Power Pivot của Excel, SQL Server Analysis
Services và Power BI.
Introduction
 Cú pháp:
NAME COLUMN/MEASURE = FUNCTION NAME( [PARAM 1], [PARAM 2], …)
 DAX sử dụng thông qua :

● Calculated Columns: giá trị được tính toán dựa trên tham chiếu tới vị trí
theo từng dòng dữ liệu.
● Measures: giá trị được tính toán dựa vào ngữ cảnh tương ứng
Introduction
 Để phân tích động, chúng ta cần hiểu rõ ngữ cảnh sử dụng trong hàm
DAX
● Filter Context
● Row Context
 Ví dụ: cho Data Model gồm 2 bảng Sales và Customer. Tính doanh thu theo
Country “OZ”
Introduction
 Data Model
Sales
Customer
 Để tính doanh thu theo Country “OZ”, ta sử dụng công thức DAX sau:
DoanhThuOZ = CALCULATE( SUMX(Sales, Sales[Amount]),

Customer[Country]=”OZ”)
Introduction
 Các bước thực thi công thức DAX:
● Thêm “OZ” vào filter context -> lọc và trả về kết quả là view mới
Introduction
 Các bước thực thi công thức DAX:
● Thêm column “X” trong View mới -> tính tổng theo công thức
● Trả về kết quả tổng trên column “X”: 250+350+220 = 820.
Variables
 Biến là đối tượng sử dụng để lưu trữ tạm thời các giá trị.
 Sử dụng biến trong biểu thức DAX:

● Đọc và hiệu chỉnh code dễ hơn.
● Tối ưu hiệu suất thực thi.
 Ví dụ:
NewDiscount =
VAR Distcount= SUM(Invoices[TotalDiscount])
RETURN
IF(
Distcount > 1000,
Distcount,
Distcount * 1.1
)
Variables
 Cú pháp:
● Sử dụng từ khóa VAR để khai báo biến, có thể khai báo nhiều biến trong
cùng khối lệnh.
● Sử dụng từ khóa RETURN để trả về giá trị trong khối lệnh, tuy nhiên kết
quả trả về phải là biến hoặc biểu thức duy nhất.
 Ví dụ:
SalesAmt =
SUMX (
InvoiceLines,
VAR Quantity = InvoiceLines[LineItem]
VAR Price = InvoiceLines[SalePrice]
RETURN
Quantity * Price
)
Variables
 Phạm vi sử dụng:
● Biến có thể tham chiếu các biến được định nghĩa trước trong khối lệnh
hoặc các biến được định nghĩa trước đó cấp bên ngoài (Hàm nhiều cấp).
 Ví dụ:
Margin =
VAR SalesAmount = SUMX ( Sales, Sales[Quantity] *
Sales[Net Price] )
VAR TotalCost = SUMX ( Sales, Sales[Quantity] *
Sales[Unit Cost] )
VAR Margin = SalesAmount - TotalCost
RETURN
Margin
Variables
 Ví dụ:
AmountCurrent =
SUMX (
'Product’,
VAR CurrentPrice = 'Product'[Unit Price]
RETURN
SUMX (
RELATEDTABLE ( Sales ),
VAR Quantity = Sales[Quantity]
VAR AmountAtCurrentPrice = Quantity * CurrentPrice
RETURN
AmountAtCurrentPrice
)
)
Variables
 Biến có thể lưu trữ giá trị Scalar hoặc Table.
 Ví dụ:
Segments =
VAR Vals =
DATATABLE(
"Segment",STRING,
"Segment Sort", INTEGER,
"Max Sales",CURRENCY,
{
{"Low",1,100000},{"Mideum", 2, 150000},{"High",3,
999999}
}
)
RETURN Vals
Multi Filter
 Tùy theo nhu cầu, ngữ cảnh phân tích và thống kê dữ liệu, đôi khi chúng
ta cần kết hợp nhiều tiêu chí bộ lọc.
 DAX cung cấp các hàm kết hợp và sử dụng các bộ lọc để đáp ứng theo
từng yêu cầu nghiệp vụ khác nhau.
 Ví dụ: xem thống kê doanh thu theo hãng xe
Multi Filter
 Hàm KEEPFILTERS:
● Qui định cách bộ lọc được áp dụng trong khi sử dụng hàm CALCULATE.
● Cú pháp
KEEPFILTERS (<Expression>)
Multi Filter
Revenue = SUM(InvoiceLines[Sales])
RevenueBentley =
CALCULATE(
SUM(InvoiceLines[Sales]),
Stock[Make]=“Bentley”
)
Multi Filter
RevenueBentley =
CALCULATE(
Stock[Make]=“Bentley”
)
Multi Filter
RevenueBentley =
CALCULATE(
KEEPFILTERS( Stock[Make]=“Bentley”)
)
Multi Filter
 Hàm ALL:
● Trả về tất các dòng trong bảng hoặc tất cả các giá trị trong cột. Bỏ qua
các bộ lọc đang áp dụng.
● Cú pháp
ALL([<table>|<column>[,<column>[,…]]])
 Ví dụ: xem thống kê doanh thu theo hãng xe và màu “Black”
Multi Filter
Revenue = SUM(InvoiceLines[Sales])
RevenueColorBlack =
CALCULATE(
FILTER(
ALL(Colors),
Colors[Color]="Black”
)
)
Multi Filter
RevenueColorBlack =
CALCULATE(
FILTER(
ALL(Colors),
Colors[Color]="Black”
)
)
Multi Filter
 Hàm REMOVEFILTERS:
● Xóa các bộ lọc đang áp dụng trên Table | Column.
● Cú pháp
REMOVEFILTERS([<table>|<column>[,<column>[,…]]])
 Ví dụ: tính tỉ lệ phần trăm Revenue theo Category “%GT”
Multi Filter
% GT =
DIVIDE(
SUM(Sales[Revenue]),
CALCULATE(
REMOVEFILTERS('Product’),
VALUES('Product'[Category])
)
)
Multi Filter
% GT = DIVIDE(
CALCULATE(
REMOVEFILTERS('Product’),
VALUES('Product'[Category])
)
)
Calculate & Nested Level
 Hàm CALCULATE:
● Đánh giá biểu thức với tham số ngữ cảnh bộ lọc mới được truyền vào.
● Cú pháp
CALCULATE(<expression>[, <filter1> [, <filter2> [, …]]])
 Ví dụ: xem thống kê Revenue theo Country “USA”
 Ví dụ: xem thống kê Revenue theo Country “USA”
RevenueCountrySumX =
SUMX(
FILTER(Sales,Sales[Country]="USA"),
Sales[Revenue]
)
RevenueCountryCalculate =
CALCULATE(
Geography[Country]="USA"
)
 Khi sử dụng hàm CALCULATE “Nested Level”, theo thứ tự thực thi từ cấp
ngoài vào trong.
 Ví dụ: xem thống kê Sales theo Color và Make
Revenue = SUM(InvoiceLines[Sales] )
 Ví dụ: xem thống kê Sales theo Color và Make
RevenueNestLevel =
CALCULATE (
CALCULATE (
SUM(InvoiceLines[Sales] ),
Colors[Color] IN { "Green", "Black" }
),
ALLSELECTED(Stock[Make])
)
Time Intelligence
 Trong mô hình dữ liệu doanh nghiệp thường lưu trữ thông tin về ngày
tháng kinh doanh.
 Phân tích dữ liệu theo thời gian là nhu cầu quan trọng và cần thiết, do đó
DAX cung cấp cho chúng ta các tính năng để thực hiện các xử lý nghiệp
vụ theo thời gian.
Time Intelligence
 Ví dụ: xem thống kê Revenue theo năm và tháng, trong đó:
● TotalRevenue: doanh thu tháng trong năm
● RunningTotalYear: doanh thu tích lũy tháng trong năm
Time Intelligence
 Mô hình dữ liệu sau khi kết nối và chuẩn hóa:
Time Intelligence
 Sử dụng hàm DAX để tạo table Date:
Date = CALENDAR(MIN(Sales[Date]), MAX(Sales[Date]))
Time Intelligence
 Tạo Relationship giữa table Date và Sales:
Time Intelligence
 Tạo thống kê Revenue theo năm và tháng:
RunningTotalYear =
VAR Result=
CALCULATE(
[TotalRevenue],
VAR CurrentDate= MAX('Date'[date])
VAR FilterDate= FILTER(ALL('Date'), 'Date'[Date] <=
CurrentDate && YEAR('Date'[Date])=YEAR(CurrentDate))
RETURN
FilterDate
)
RETURN
Result
Time Intelligence
 Trực quan hóa với Matrix
Time Intelligence
 Ví dụ: xem thống kê trung bình số ngày giao hàng theo năm và tháng, trong
đó:
● NumberDate = (DeliveryDate – InvoiceDate) + 1
● Lưu ý: không tính thứ 7, chủ nhật và các ngày nghỉ lễ
Time Intelligence
 Thiết kế Mô hình dữ liệu:
Time Intelligence
 Thống kê số ngày giao hàng trung bình:
AvgDateDelivery = AVERAGEX (
Invoices,
VAR RangeOfDates =
DATESBETWEEN (
DateDimension[DateKey],
Invoices[InvoiceDate], Invoices[DeliveryDate]
)
VAR NumberOfWorkingDays = CALCULATE (
COUNTROWS ('DateDimension’),
RangeOfDates
)
RETURN
NumberOfWorkingDays
)
Time Intelligence
 Thống kê số ngày giao hàng trung bình (không tính thứ 7, chủ nhật):
Invoices,
VAR RangeOfDates =
DATESBETWEEN (
)
COUNTROWS ('DateDimension’),
RangeOfDates,
NOT(WEEKDAY('DateDimension'[DateKey]) IN { 1, 7 })
)
RETURN
NumberOfWorkingDays
)
Time Intelligence
 Thống kê số ngày giao hàng trung bình (không tính ngày lễ):
Invoices,
VAR RangeOfDates =
DATESBETWEEN (
)
COUNTROWS ('DateDimension’), RangeOfDates,
NOT(WEEKDAY('DateDimension'[DateKey]) IN { 1, 7 }) ,
NOT(DateDimension[DateKey] IN ALL(Holiday[Date]))
)
RETURN
NumberOfWorkingDays
)
Time Intelligence
 Table Holiday chứa danh sách các ngày nghỉ lễ được nhập theo từng năm
Time Intelligence
Time Intelligence
 Ví dụ: xem thống kê Revenue và DeliveryCharge theo năm và tháng
Time Intelligence
 Sử dụng hàm DAX để tạo table DateDelivery và DateInvoice:
DateDelivery =
CALENDAR(
MIN(Invoices[DeliveryDate]),
MAX(Invoices[DeliveryDate])
)
DateInvoice =
CALENDAR(
MIN(Invoices[InvoiceDate]),
MAX(Invoices[InvoiceDate])
)
Time Intelligence
 Thiết kế Mô hình dữ liệu:
Time Intelligence
 Thống kê Revenue và DeliveryCharge
Revenue =
SUM(
InvoiceLines[Sales]
)
TotalDeliveryCharge =
SUM(
Invoices[DeliveryCharge]
)
Time Intelligence
Advanced Relationships
 DAX thực thi dựa trên mô hình dữ liệu quan hệ. Do đó, hiểu và tối ưu
thiết kế bảng và quan hệ giữa các bảng giúp nâng cao kỹ năng sử dụng
DAX.
 Có 2 loại mối quan hệ giữa 2 bảng:

● Quan hệ hiện hành được sử dụng để tính toán
● Quan hệ ảo
 Ví dụ: xem thống kê Revenue và DeliveryCharge theo năm và tháng
 Sử dụng hàm DAX để tạo table Date:
Date =
CALENDAR(
MIN(Invoices[InvoiceDate]),
MAX(Invoices[DeliveryDate])
)
 Thiết kế mô hình dữ liệu
 Thống kê Revenue và DeliveryCharge
Revenue =
SUM(
InvoiceLines[Sales]
)
TotalDeliveryCharge =
CALCULATE (
SUMX( Invoices, Invoices[DeliveryCharge]),
USERELATIONSHIP( Invoices[DeliveryDate], 'Date'[Date])
)
 Dữ liệu trong phân tích có thể từ nhiều nguồn hay trong quá trình phân
tích có thể phát sinh bảng nên trong một số trường hợp giữa các bảng
không thiết lập mối quan hệ
 Chúng ta có thể sử dụng DAX để thống kê và trực quan hóa trong ngữ
cảnh trên.
 Ví dụ: mô hình dữ liệu bán điện thoại Xiaomi
 Dữ liệu bảng KPI
 Dữ liệu bảng Sale
 Yêu cầu: thống kê và trực quan KPI và Sale của Nhân viên theo năm tháng
 Sử dụng hàm DAX thống kê Sale của nhân viên theo năm tháng:
TotalSale =
SUMX(
FILTER(
Sale,
Sale[Year-Mon] = SELECTEDVALUE('KPI'[Year-Mon]) &&
Sale[Saleman Name] =SELECTEDVALUE('KPI'[Saleman Name])
),
Sale[Sale]
)
 Trực quan KPI và Sale với Clustered column chart
Optimizing DAX
 Tối ưu hóa biểu thức DAX là điều cần thiết trong các phân tích nghiệp vụ
nâng cao nhằm tăng hiệu suất thực thi.
 DAX Studio là một trong các công cụ hỗ trợ thực thi truy vấn DAX, cho
phép xem và cải tiến hiệu suất thực thi truy vấn DAX
Optimizing DAX
 Truy cập link tải và cài đặt DAX Studio https://daxstudio.org
Optimizing DAX
 Kết nối nguồn dữ liệu và thực thi truy vấn DAX
● PowerPivot in Excel
● Power BI Desktop
● Analysis Services Tabular
Optimizing DAX
 Kết nối nguồn dữ liệu và thực thi truy vấn DAX
Optimizing DAX
 Cú pháp:
[DEFINE
{ MEASURE <tableName>[<name>] = <expression> }
{ VAR <name> = <expression>}]
EVALUATE <table>
[ORDER BY
{<expression> [{ASC | DESC}]}[, …]
[START AT {<value>|<parameter>} [, …]]]
● Từ khóa DEFINE: định nghĩa variable, measure dùng trong truy vấn DAX
● Từ khóa EVALUATE: kết quả trả về của truy vấn DAX, ở dạng table.
● Từ khóa ORDER BY: chỉ định biểu thức | cột cần sắp xếp tăng | giảm
Optimizing DAX
 Ví dụ: tính tổng doanh thu bán hàng
DEFINE
MEASURE Sales[Total Sales] =
SUM ( Sales[Revenue] )
EVALUATE
ROW("Total", [Total Sales])
 Kết quả:
Optimizing DAX
 Ví dụ: thống kê tổng doanh thu theo nhóm hàng
EVALUATE
SUMMARIZECOLUMNS(
'Product'[Category],
'Product’,
"Total", SUM(Sales[Revenue])
)
 Kết quả:
Optimizing DAX
 Ví dụ: thống kê tổng doanh thu nhóm hàng “Mix” và “Urban”
DEFINE
MEASURE Sales[Total]= Sum(Sales[Revenue])
EVALUATE
SUMMARIZECOLUMNS(
'Product'[Category],
TREATAS({"urban","mix"},'Product'[category]),
"Total",[Total]
)
 Kết quả
Optimizing DAX
 Ví dụ: hiển thị danh sách Product, thêm cột Manufacturer từ bảng
Manufacturer
EVALUATE
GENERATE(
'Product',
VAR Tri='Product'[ManufacturerID]
RETURN
CALCULATETABLE(
SELECTCOLUMNS(
Manufacturer,
"Manufacturer",
Manufacturer[Manufacturer]
),
Manufacturer[ManufacturerID]=Tri
)
)
Optimizing DAX
 Kết quả
Optimizing DAX
 Ví dụ: thống kê 3 sản phẩm có doanh thu cao nhất theo từng năm
EVALUATE
GENERATE(
SUMMARIZE('Date', 'Date'[Year]),
VAR Top3Product=
TOPN(
3,
ADDCOLUMNS(
VALUES('Product'[Product]),"@Amt",[TotalRevenue]
),
[@Amt]
)
RETURN
Top3Product
)
ORDER BY [Year], [@Amt] DESC
Optimizing DAX
 Kết quả
Optimizing DAX
 Để xem kịch bản thực thi và tối ưu truy vấn DAX, chúng ta sử dụng chức
năng:
● Query Plan: kịch bản thực thi truy vấn DAX
● Server Timings: hiệu suất và thời gian thực thi truy vấn DAX
Optimizing DAX
 Ví dụ: cho mô hình dữ liệu sau
Optimizing DAX
 Trong đó:
● Sales[SaleAmount]: số tiền thanh toán, chưa trừ giảm giá
● Customers[CustomerDiscount]: tỉ suất giảm của mỗi khách hàng
● Products[ProductDiscount]: tỉ suất giảm của mỗi sản phẩm
 Yêu cầu:
● Thống kê doanh thu bán hàng theo năm
Optimizing DAX
 Truy vấn DAX thống kê doanh thu theo năm:
DEFINE
MEASURE Sales[DiscountSale]=
SUMX(
Customers, --18484 rows
SUMX(
Products, -- 397 rows
VAR CustomerDiscount= Customers[CustomerDiscount]
VAR ProductDiscount= Products[ProductDiscount]
VAR SaleAmount= [TotalAmount]
RETURN SaleAmount * (1- CustomerDiscount)*(1-ProductDiscount)
)
)
EVALUATE
SUMMARIZECOLUMNS(
'Calendar'[CalendarYear],
"Amt",
[DiscountSale]
)
Optimizing DAX
 Query Plan
● Line
● Records
● Physical Query Plan
Optimizing DAX
 Server Timings
● Total
● SE (storage engine)
● FE (formula engine)
● SE CPU
● SE Queries
● SE Cache
Optimizing DAX
 Tối ưu truy vấn DAX thống kê doanh thu theo năm:
DEFINE
MEASURE Sales[DiscountSale]=
SUMX(
Sales, -- 60398 rows
VAR CustomerDiscount= RELATED(Customers[CustomerDiscount])
VAR ProductDiscount= RELATED(Products[ProductDiscount])
VAR SaleAmount= [TotalAmount]
RETURN SaleAmount * (1- CustomerDiscount)*(1-ProductDiscount)
)
EVALUATE
SUMMARIZECOLUMNS(
'Calendar'[CalendarYear],
"Amt",
[DiscountSale]
)
Optimizing DAX
 Query Plan
Optimizing DAX
 Server Timings
Thảo luận

Phan - Tich - Du - Lieu 5.12.2021

Uploaded by

Document Information

Original Title

Copyright

Available Formats

Share this document

Share or Embed Document

Sharing Options

Did you find this document useful?

Is this content inappropriate?

Copyright:

Available Formats

Phan - Tich - Du - Lieu 5.12.2021

Uploaded by

Copyright:

Available Formats

Trường ĐH Khoa Học Tự Nhiên Tp.

PHÂN TÍCH DỮ LIỆU VỚI DAX

4. Calculate & Nested Level

NAME COLUMN/MEASURE = FUNCTION NAME( [PARAM 1], [PARAM 2], …)

 DAX sử dụng thông qua :

DoanhThuOZ = CALCULATE( SUMX(Sales, Sales[Amount]),

● Trả về kết quả tổng trên column “X”: 250+350+220 = 820.

 Sử dụng biến trong biểu thức DAX:

 Ví dụ: xem thống kê doanh thu theo hãng xe

 Ví dụ: xem thống kê doanh thu theo hãng xe

 Ví dụ: xem thống kê doanh thu theo hãng xe và màu “Black”

 Ví dụ: tính tỉ lệ phần trăm Revenue theo Category “%GT”

CALCULATE(<expression>[, <filter1> [, <filter2> [, …]]])

 Ví dụ: xem thống kê Revenue theo Country “USA”

 Ví dụ: xem thống kê Sales theo Color và Make

Date = CALENDAR(MIN(Sales[Date]), MAX(Sales[Date]))

 Có 2 loại mối quan hệ giữa 2 bảng:

You might also like