項目背景
某集成電路制造有限公司，工廠運營數字化水平優(yōu)良，系統(tǒng)完善。為解決數據孤島，同時防止數據的重復建設，該企業(yè)需要建設公司級統(tǒng)一的數據倉庫，讓所有數據需求從統(tǒng)一口徑抽取，節(jié)省人力和存儲的資源，同時也方便后期運維，通過一個平臺來治理數據指標和數據質量。
實施方案
基于客戶需求，格創(chuàng)東智將該企業(yè)的MES數據實時采集到大數據平臺中，并在平臺中實現數據的高速查詢和分析，不僅幫客戶將各個業(yè)務系統(tǒng)的數據實現了歸集，也可以讓用戶自身去使用平臺產品，通過數據的實時和離線兩種方式將數據接入，在大數據平臺中做數據的開發(fā)、匯整、展示及延伸。
該企業(yè)此前采用sqoop離線技術抽取mes系統(tǒng)數據進行計算，然后展示前端，數據延遲嚴重。通過格創(chuàng)東智大數據平臺，采用實時技術，可以毫秒級感知數據的變化，進行秒級采集計算，將產線情況實時展示給車間人員，優(yōu)勢顯著：
1、數據處理快：離線任務數據處理速率≥90萬條/秒；實時任務數據處理速率≥100萬條/秒
2、并發(fā)多：任務調度同時并發(fā)運行≥4000個
3、存儲大：支持數據量的存儲≥10PB
項目成果
通過格創(chuàng)東智大數據平臺，該企業(yè)實現了大數據平臺的數據和MES數據實時同步，并可在不影響業(yè)務的情況下進行數據的實時查看、分析。同時，數據服務開發(fā)、訂閱、分發(fā)、運營一站式管理，打破了業(yè)務數據壁壘，提升了數據一致性，有力支撐起數據資產價值化，效益顯著：
1、完成YMS、AMS、RMS、SPC等近100個生產制造單體應用系統(tǒng)數據的零延時實時接入到數據湖；
2、將歷史的數百個數據調度任務和腳本平滑遷移到大數據平臺中，并能夠進行數據治理；
3、基于數據湖，進行工業(yè)數據治理及數據分析應用，從虛擬量測、根因分析等入手，解決了12寸半導體fab的數據開發(fā)/分析/治理，進而提高質量和良率。
(審核編輯: Doris)
分享
