時間:2017-07-26 13:22:32 次數:1966
火熱七月,巨龍信息技術委員會為促進跨部門及内外部的技術交流,隆重推出“巨龍大咖說”!2017年 7月21日,來自數據事業部的技術大咖們,齊聚一堂為大家獻上了一場别開生面的技術盛宴。
主題讨論
本期巨龍大咖說的分享内容為——《公開?那就公開了吧!巨龍龍騰大數據體系産品架構解密》,數據事業部的技術大咖們對公司的大數據管家、ETL、服務總線、數據魔方等産品進行了詳細的介紹與和解讀。出乎我們預料的是,炎熱的夏天并沒能阻止小夥伴們熱愛學習交流的心, 此次分享現場座無虛席。
技術委員會會長何總分享了他對“大咖說”技術分享的的一些看法和見解。他指出,技術委員會開設的技術分享,旨在讓大家進一步提升了自身業務水平,加深對公司産品的認知,為技術人員日後開展工作奠定基礎,力争為客戶提供更加完美的服務。
下面,就由小編帶你領略一下數據事業部技術大咖們的風采吧!
聽大咖說了啥
巨龍數據事業部的優秀技術人員,結合自己的實際工作經驗,慷慨分享了産品開發設計、挑戰與彎路、團隊建設等實在、接地氣的幹貨。引導大家思考如何做好産品。
探秘一:ETL
—— ETL産品那麼多, 做它幹嘛?
在公安信息化的建設過程中,除了要求業務數據快速準确進倉之外,還要能夠支持各種清洗,校驗,數據流轉複雜業務,并保證數據整合,項目的快速響應。這對ETL産品的性能提出了新的要求。
巨龍ETL産品為公安海量數據曆提供集數據轉換、庫抽取、庫加載、文件處理、預評估等服務,不僅解決了海量異構數據的抽取和管理難題,還可為未來進一步的數據挖掘打造基礎數據平台。同時構建于普通PC Server之上的Hadoop平台具有硬件廉價,系統高容錯、水平靈活擴展、運行高效等特點。
探秘二:服務總線
—— 為什麼需要總線?
我們知道,通過數據治理形成優良的數據資産之後,下一步的工作就是數據共享和服務了。以往數據共享存在安全漏洞,有一定風險。資源服務總線是本地建設的信息共享傳輸通道,現在通過總線,可監管請求方訪問情況,有授權才可訪問,這也大大提高了數據共享的安全系數。
此外,總線還能能産生更多的價值
巨龍資源服務總線通過集合本地資源,以請求、服務的形式幫助本地實現跨應用、跨警種、跨區域的信息共享 。第三方應用通過請求總線的服務獲得數據,而不直接訪問底層數據庫。
至2017年中旬,巨龍總線已運用在公安科信、情報、網安以及海關等部門;巨龍總線已部署了20多個省廳,40多個地市,并且為公安部科信的全網分布式應用提供了很好的運行支撐;在網安,已有150多個地市部署了總線,并且這些數字在逐漸增長中。
探秘三:數據魔方
——阿裡已經有類似的産品,做它幹嘛
大數據的魅力不在于掌握龐大的信息資源,而在于科學地讓這些信息透析事物本質反映發展趨勢。如果把大數據比作一種産業,那麼這種産品實現盈利的關鍵,在于提高對數據的“加工能力”,實現數據的“增值”。換言之,“大數據”需要更新的“處理載體”由此迸發其真正的價值魅力。而數據挖掘與分析正是“載體”的關鍵。
龍騰數據魔方采用大數據雲計算為支撐架構,輔以建模可視化/數據可視化/智慧引擎/大數據計算框架/輕應用框架/快速開發框架等能力創新打造,其核心價值具體在:
參會人員全神貫注、側耳傾聽,并在互動環節與講師進行積極的交流與探讨,使原本停留在文字上的理論更加清晰明了,令大家受益匪淺。
通過此次培訓和經驗分享,加強了技術人員間的交流聯系,提升了大家對龍騰大數據體系産品的認知程度,為以後更加持續高效地工作打好了基礎。相信下次的巨龍大咖說主題研讨必定會持續帶給大家更多的驚喜,讓我們共同期待吧!