PentahoㄧUIDAI 利用 Pentaho 解決印度政府龐大的人口資料集
內容目錄
印度身分識別管理局(UIDAI)藉由 Hitachi Vantara 的 Pentaho 提供強大的大數據分析平台,以支持超過 10 億公民的政府數據集。
印度唯一身分識別計畫在為全國每個居民提供身份識別,主要用於提供社會福利之服務,並有效監督政府各種計劃。經印度首相批准後,印度的電子與資訊科技部門發行了 Aadhaar,一組由印度身份識別局代表印度政府頒發的十二位數個人識別碼。這個號碼將作為在印度身份和地址的證明。並且,藉由印度郵政所收到的 Aadhaar 信件和從 UIDAI 網站下載的 e-Aadhaar 信件同樣有效。
HCL Infosystems Ltd. 是印度首屈一指的分銷和 IT 服務公司,並擁有印度最大的銷售和分銷網路。HCL Infosystems Ltd. 且獲得了 UIDAI 的內聯網和知識管理門戶的設計、開發、維護的合約。此外,UIDAI 藉由 HCL Infosystems Ltd. 的分銷和 IT 服務與 GrayMatter Software Services Pvt. 成功執行了該計劃。
『 GrayMatter 專業的大數據分析技術與知識,能夠根據 UIDAI 的嚴格要求在 Pentaho 平台上進行分析。HCL 團隊與 GrayMatter 的合作對於第一階段的成功至關重要。』── UIDAI 執行團隊成員說道
計劃簡介:創建適合各種數據源和數據類型的大數據架構,並利用大量數據進行多重驗證。計劃的另一個關鍵是根據 UIDAI 的需求創建商務邏輯,以對具有國家意義的海量數據進行多重分析。
挑戰如下:
GrayMatter 與 HCL 團隊共同提供了一個大數據解決方案,最終解決了上述問題和多項關鍵的商業挑戰,而大數據架構解決方案則是其成功關鍵。
以下是執行的關鍵解決方案點:
成功建立大數據平台的主因,是從數據的應用和訊息流中執行關鍵的驗證和分析。
” Pentaho’s in…
Docker可以顯著減少了軟體套用到應用程序或部署到一個新環境所需要的時間。包含運行所需的整個文件系統:代碼、運行時間、系統工具與系統庫與任何可以在伺服器上安裝的軟體,因此開發人員能夠在任何環境繼續原本的工作。
儘管 Table input 和 Execute SQL script 兩者都支援填寫 SQL 語句,但固定條件值的頻繁調整卻會降低 ETL 流程效率。為此,Pentaho 允許將 SQL 語句設定為「動態內容」,使流程轉為更靈活的函式結構,並在 SQL 查詢中引入「動態內容」,本文將對此做法進行詳細說明。
June 10, 2016 by&nbs…
本文會介紹 SAS EG 的內建排程功能,再往下延伸 2 種結合 ETL 工具如 Trinity 來執行 SAS 軟體的 vbs 及 sas 2 種檔案的排程設定,最後透過 Trinity 環境將上文提到的兩種需求呈現出來。
透過 Hitachi Vantara 的兩種 Pentaho 版本:支援商業關鍵性任務的 Pentaho Enterprise Edition 和對開源社群貢獻的 Pentaho Community Edition 提供大數據絕佳策略和長期全套的資安支援,維持敏捷與彈性面對未來資訊管道需求。
Pentaho 原廠講師帶你了解 Pentaho 的總體優勢及客戶價值,重點介紹「支援服務」、「獨有功能」,趕快報名,搭上最新版本的列車吧!
Pentaho 6.1版本,為IT專業人員提供更多的陣列(array)運算選項,在使用Pentaho Data Integration時能更好控制複雜邏輯運算。此外,Pentaho推出新的自助服務數據上線藍圖,此產品使企業用戶和客戶無需IT輔助即可加載多樣化的資料來源。
“Using Pentaho…
透過 Hitachi Vantara 的 Pentaho 平台簡化整個機器學習工作流程,包含資料準備和特徵工程,定期更新模型,訓練、調整和測試模型,部署和操作模型。Pentaho 資料整合 (PDI) 及其分析功能在複雜的資料環境中部署機器學習模型,整合各種機器學習、深度學習語言、套裝軟體。
金融服務機構為關鍵業務計劃導入Hitachi Vantara 的 Pentaho 平台。在面臨多重挑戰下,透過自動化資料編排過程,提供企業更精細的數據。其客戶包括,ABN AMRO Clearing,Pentaho 爲其提供自助分析服務並優化資本利用率。NASDAQ 借助 Pentaho 快速獲得準確的資料並洞察客戶行為。Edo Interactive 以 Pentaho 強大的數據處理時間,並且使用情緒分析增強了原數據。
Pentaho Community Ed…
本次研討會將介紹 Apache Hop,以及比較 Pentaho、Apache Hop 兩者差異。趕快報名,一起來認識 Apache Hop 這個明日之星吧!
“Our franchise…
分享如何建立數據驅動文化 (DataOps),藉由數據協作、流程自動化、metadata 和端到端的設計思維,幫助企業更好的掌握數據、提升數據品質、安全以及合規性。