火(huǒ)熱七月，巨龍信息技(jì)術(shù)委員會(huì)為(wèi)促進跨部門(mén)及內(nèi)外部的技(jì)術(shù)交流，隆重推出“巨龍大(dà)咖說”！2017年 7月21日，來(lái)自數(shù)據事業部的技(jì)術(shù)大(dà)咖們，齊聚一堂為(wèi)大(dà)家(jiā)獻上(shàng)了一場(chǎng)别開(kāi)生(shēng)面的技(jì)術(shù)盛宴。

主題討(tǎo)論

本期巨龍大(dà)咖說的分享內(nèi)容為(wèi)——《公開(kāi)？那(nà)就公開(kāi)了吧(ba)！巨龍龍騰大(dà)數(shù)據體(tǐ)系産品架構解密》，數(shù)據事業部的技(jì)術(shù)大(dà)咖們對公司的大(dà)數(shù)據管家(jiā)、ETL、服務總線、數(shù)據魔方等産品進行(xíng)了詳細的介紹與和(hé)解讀。出乎我們預料的是，炎熱的夏天并沒能阻止小(xiǎo)夥伴們熱愛(ài)學習交流的心， 此次分享現場(chǎng)座無虛席。

技(jì)術(shù)委員會(huì)會(huì)長何總分享了他對“大(dà)咖說”技(jì)術(shù)分享的的一些(xiē)看法和(hé)見解。他指出，技(jì)術(shù)委員會(huì)開(kāi)設的技(jì)術(shù)分享，旨在讓大(dà)家(jiā)進一步提升了自身業務水(shuǐ)平，加深對公司産品的認知，為(wèi)技(jì)術(shù)人(rén)員日後開(kāi)展工作(zuò)奠定基礎，力争為(wèi)客戶提供更加完美的服務。

下面，就由小(xiǎo)編帶你(nǐ)領略一下數(shù)據事業部技(jì)術(shù)大(dà)咖們的風采吧(ba)！

聽(tīng)大(dà)咖說了啥

巨龍數(shù)據事業部的優秀技(jì)術(shù)人(rén)員，結合自己的實際工作(zuò)經驗，慷慨分享了産品開(kāi)發設計(jì)、挑戰與彎路、團隊建設等實在、接地氣的幹貨。引導大(dà)家(jiā)思考如何做(zuò)好産品。

探秘一：ETL

—— ETL産品那(nà)麽多(duō)， 做(zuò)它幹嘛？

在公安信息化的建設過程中，除了要求業務數(shù)據快速準确進倉之外，還(hái)要能夠支持各種清洗，校(xiào)驗，數(shù)據流轉複雜業務，并保證數(shù)據整合，項目的快速響應。這對ETL産品的性能提出了新的要求。

巨龍ETL産品為(wèi)公安海量數(shù)據曆提供集數(shù)據轉換、庫抽取、庫加載、文件處理(lǐ)、預評估等服務，不僅解決了海量異構數(shù)據的抽取和(hé)管理(lǐ)難題，還(hái)可(kě)為(wèi)未來(lái)進一步的數(shù)據挖掘打造基礎數(shù)據平台。同時(shí)構建于普通(tōng)PC Server之上(shàng)的Hadoop平台具有(yǒu)硬件廉價，系統高(gāo)容錯、水(shuǐ)平靈活擴展、運行(xíng)高(gāo)效等特點。

探秘二：服務總線

—— 為(wèi)什麽需要總線？

我們知道(dào)，通(tōng)過數(shù)據治理(lǐ)形成優良的數(shù)據資産之後，下一步的工作(zuò)就是數(shù)據共享和(hé)服務了。以往數(shù)據共享存在安全漏洞，有(yǒu)一定風險。資源服務總線是本地建設的信息共享傳輸通(tōng)道(dào)，現在通(tōng)過總線，可(kě)監管請(qǐng)求方訪問情況，有(yǒu)授權才可(kě)訪問，這也大(dà)大(dà)提高(gāo)了數(shù)據共享的安全系數(shù)。

此外，總線還(hái)能能産生(shēng)更多(duō)的價值

巨龍資源服務總線通(tōng)過集合本地資源，以請(qǐng)求、服務的形式幫助本地實現跨應用、跨警種、跨區(qū)域的信息共享 。第三方應用通(tōng)過請(qǐng)求總線的服務獲得(de)數(shù)據，而不直接訪問底層數(shù)據庫。

• 一點接入，全網辦案
• 數(shù)據沒壁壘，語言協調
• 進行(xíng)業務協作(zuò)，數(shù)據流轉

至2017年中旬，巨龍總線已運用在公安科信、情報、網安以及海關等部門(mén)；巨龍總線已部署了20多(duō)個(gè)省廳，40多(duō)個(gè)地市，并且為(wèi)公安部科信的全網分布式應用提供了很(hěn)好的運行(xíng)支撐；在網安，已有(yǒu)150多(duō)個(gè)地市部署了總線，并且這些(xiē)數(shù)字在逐漸增長中。

探秘三：數(shù)據魔方

——阿裏已經有(yǒu)類似的産品，做(zuò)它幹嘛

大(dà)數(shù)據的魅力不在于掌握龐大(dà)的信息資源，而在于科學地讓這些(xiē)信息透析事物本質反映發展趨勢。如果把大(dà)數(shù)據比作(zuò)一種産業，那(nà)麽這種産品實現盈利的關鍵，在于提高(gāo)對數(shù)據的“加工能力”，實現數(shù)據的“增值”。換言之，“大(dà)數(shù)據”需要更新的“處理(lǐ)載體(tǐ)”由此迸發其真正的價值魅力。而數(shù)據挖掘與分析正是“載體(tǐ)”的關鍵。

龍騰數(shù)據魔方采用大(dà)數(shù)據雲計(jì)算(suàn)為(wèi)支撐架構，輔以建模可(kě)視(shì)化/數(shù)據可(kě)視(shì)化/智慧引擎/大(dà)數(shù)據計(jì)算(suàn)框架/輕應用框架/快速開(kāi)發框架等能力創新打造，其核心價值具體(tǐ)在：

• 純浏覽器(qì)/鼠标拖拽操作(zuò)，簡單易學習，輕松駕馭大(dà)數(shù)據分析技(jì)能；
• 可(kě)視(shì)化無代碼的大(dà)數(shù)據分析應用快速開(kāi)發平台；
• 分析應用化、分析服務化、數(shù)據可(kě)視(shì)化、集成可(kě)擴展，滿足用戶多(duō)元需求；
• 資源規範化、服務規範化、開(kāi)發規範化、共享規範化、管理(lǐ)一體(tǐ)化、安全可(kě)控化，幫助信息化建設主導部門(mén)提升大(dà)數(shù)據下分析應用的需求響應及快速開(kāi)發能力；
• 高(gāo)能計(jì)算(suàn)、關聯嗅探、智慧學習，幫助用戶把握數(shù)據脈搏，掌握事物發展動态；
• 同性能，低(dī)要求，支持計(jì)算(suàn)節點資源的橫向拓展，即便使用普通(tōng)的PC服務器(qì)，也能明(míng)顯提升計(jì)算(suàn)效能，為(wèi)信息化建設的資源利用提供保障；

參會(huì)人(rén)員全神貫注、側耳傾聽(tīng)，并在互動環節與講師(shī)進行(xíng)積極的交流與探討(tǎo)，使原本停留在文字上(shàng)的理(lǐ)論更加清晰明(míng)了，令大(dà)家(jiā)受益匪淺。

通(tōng)過此次培訓和(hé)經驗分享，加強了技(jì)術(shù)人(rén)員間(jiān)的交流聯系，提升了大(dà)家(jiā)對龍騰大(dà)數(shù)據體(tǐ)系産品的認知程度，為(wèi)以後更加持續高(gāo)效地工作(zuò)打好了基礎。相信下次的巨龍大(dà)咖說主題研討(tǎo)必定會(huì)持續帶給大(dà)家(jiā)更多(duō)的驚喜，讓我們共同期待吧(ba)！