輕鬆構建複雜數據集，永洪自服務數據查詢功能詳解

如今的報告樣式多種多樣，愈來愈炫酷以致於讓人目不暇接。若是想從數據結果上進行溯源，因爲數據處理過程盤根錯節且技術性過強，讓業務人員捉襟見肘。如何讓業務人員清晰可視化的看到數據歷來源、加工到展現的一步步操做，永洪科技爲您排憂解難。

今天這篇文章，主要介紹永洪自服務數據查詢，這種方式提供強大、便捷的數據準備和整合方式，用戶能夠經過在圖形化界面上只須要進行簡單的拖拽和可視化的操做，即可以構建複雜的數據集。

數據準備過程主要涉及三類功能節點：輸入節點（用於實現數據庫錶鏈接、導入EXCEL數據、建立內嵌數據）、中間節點 (對輸入節點進行關聯和數據操做的節點)及查詢結果節點。

1、輸入節點

輸入節點即數據源入口節點。能夠經過鏈接數據庫表、導入Excel、建立內嵌數據方式，未來自不一樣類型的查詢數據做爲自服務數據操做的輸入節點。

2、關聯&轉換節點

操做功能區中系統內嵌了關聯（聯接、聯合）和轉換（逆透視表、分組和彙總、自循環列、鏡像、去重）兩類數據處理節點。

一、關聯節點-聯接 (Join)

經過聯接節點將數據表與表之間按既定鏈接類型進行關聯、數據整合。若是數據庫表之間定義了外聯接信息，聯接節點會基於這些外聯接信息將缺省的聯接作好。

二、關聯節點-聯合 (Union All)

經過連線的方式，聯合節點能夠將列數相同的表的數據 (包括重複數據行)拼接在一塊兒。

舉例：A表包括1日到20日的交易信息，B表包括21日到30日的交易信息，現經過聯合節點將兩表數據整合到一塊兒，從而可以查看到1日到30日的全週期交易信息。

三、轉換-逆透視表 (Unpivot Table)

逆透視表節點是將多維轉爲一維的一種數據處理操做。

舉例：以下圖同一用戶有數學、語文、英語三類不一樣科目成績，現需經過數據處理對各科成績整合到單列中造成新數據集，便於進行每位同窗的彙總成績分析。

在逆透視節點中，設置數據保持不變列爲保留列和須要從多維轉一維的列爲轉換列。
便可應用該數據集按班級、人員進行各科成績的彙總分析，轉換結果以下圖所示。

四、分組和彙總 ( Aggregate)

分組和彙總即對數據進行分組聚合。

舉例：在上例的基礎上，現對每位同窗的成績進行分組，並彙總每位同窗的總成績。

五、自循環列 ( Autoloop)
自循環列就是根據設置自動分出層級關係的列，每一個查詢只能建立一個自循環列。

一般咱們會遇到一列中數據存在層級關係，如河北省、石家莊、正定縣，三個區域存在所屬關係，在區域ID上也存在父子級關係。經過自循環列操做可實現各個區域的層級劃分。

經過自循環節點進行層級處理後結果以下圖所示：

六、鏡像

經過連線鏡像節點，任意節點能夠被複制一個或多個，在須要對同一輸入節點並行進行多種數據處理的場景下應用。

七、去重
經過連線的方式，去重節點能夠把連線節點的重複記錄去掉。

舉例：A表中用戶1和用戶數據2存在重複數據，現對其進行去重，原數據以下。

鏈接去重節點以後重複記錄被去掉。

3、查詢結果節點

查詢結果節點是全部節點數據處理的終結點，查詢結果節點只能有一個輸入。可經過操做查詢結果節點將自服務數據集導入數據庫。

4、實時性能檢測

自服務數據準備中，數據執行的絕對快慢很可貴知，能夠經過連線的顏色進行實時性能檢測，連線顏色爲綠色時表示性能快，連線爲黃色時表示性能慢，用戶能夠根據性能快慢進行性能調優。

如圖則性能通常，須要進一步調優。在調整後能夠點擊畫布左上角性能檢測，小球會沿着輸入節點的軌跡，開始滾動，在查詢結果節點中止，小球的顏色跟連線的顏色相同反應性能。

5、自動佈局

自動佈局功能爲用戶提供了節點和節點之間根據既定算法優化佈局，讓佈局更加合理美觀。

自動佈局前：

自動佈局後:

總結

在自服務查詢中，用戶經過可視化的工做流方式，直接利用已建好的查詢對數據進行輕度建模與轉換，同時也能夠將外部多種數據源直接引入進行數據建模及轉換。自服務查詢不只僅提供對數據進行分組與彙總、逆透視錶轉化等轉變數據結構的功能，同時新增長多種數據轉換功能如：值映射、去除空格、去除重複記錄、缺失值替換、拆分列爲多列、建立組等。

自服務查詢可使得用戶操做過程更流暢，全視圖化界面方便用戶對數據結構及細節進行查看了解。經過連線顏色及提示信息，實時友好的展現各數據節點的性能指標，並將展現數據模型的總體性能狀態及時通告給用戶。