火熱七月，巨龍信息技術(shù)委員會(huì)為促進(jìn)跨部門及內(nèi)外部的技術(shù)交流，隆重推出“巨龍大咖說(shuō)”！2017年 7月21日，來(lái)自數(shù)據(jù)事業(yè)部的技術(shù)大咖們，齊聚一堂為大家獻(xiàn)上了一場(chǎng)別開(kāi)生面的技術(shù)盛宴。

主題討論

本期巨龍大咖說(shuō)的分享內(nèi)容為——《公開(kāi)？那就公開(kāi)了吧！巨龍龍騰大數(shù)據(jù)體系產(chǎn)品架構(gòu)解密》，數(shù)據(jù)事業(yè)部的技術(shù)大咖們對(duì)公司的大數(shù)據(jù)管家、ETL、服務(wù)總線、數(shù)據(jù)魔方等產(chǎn)品進(jìn)行了詳細(xì)的介紹與和解讀。出乎我們預(yù)料的是，炎熱的夏天并沒(méi)能阻止小伙伴們熱愛(ài)學(xué)習(xí)交流的心， 此次分享現(xiàn)場(chǎng)座無(wú)虛席。

技術(shù)委員會(huì)會(huì)長(zhǎng)何總分享了他對(duì)“大咖說(shuō)”技術(shù)分享的的一些看法和見(jiàn)解。他指出，技術(shù)委員會(huì)開(kāi)設(shè)的技術(shù)分享，旨在讓大家進(jìn)一步提升了自身業(yè)務(wù)水平，加深對(duì)公司產(chǎn)品的認(rèn)知，為技術(shù)人員日后開(kāi)展工作奠定基礎(chǔ)，力爭(zhēng)為客戶提供更加完美的服務(wù)。

下面，就由小編帶你領(lǐng)略一下數(shù)據(jù)事業(yè)部技術(shù)大咖們的風(fēng)采吧！

聽(tīng)大咖說(shuō)了啥

巨龍數(shù)據(jù)事業(yè)部的優(yōu)秀技術(shù)人員，結(jié)合自己的實(shí)際工作經(jīng)驗(yàn)，慷慨分享了產(chǎn)品開(kāi)發(fā)設(shè)計(jì)、挑戰(zhàn)與彎路、團(tuán)隊(duì)建設(shè)等實(shí)在、接地氣的干貨。引導(dǎo)大家思考如何做好產(chǎn)品。

探秘一：ETL

—— ETL產(chǎn)品那么多， 做它干嘛？

在公安信息化的建設(shè)過(guò)程中，除了要求業(yè)務(wù)數(shù)據(jù)快速準(zhǔn)確進(jìn)倉(cāng)之外，還要能夠支持各種清洗，校驗(yàn)，數(shù)據(jù)流轉(zhuǎn)復(fù)雜業(yè)務(wù)，并保證數(shù)據(jù)整合，項(xiàng)目的快速響應(yīng)。這對(duì)ETL產(chǎn)品的性能提出了新的要求。

巨龍ETL產(chǎn)品為公安海量數(shù)據(jù)歷提供集數(shù)據(jù)轉(zhuǎn)換、庫(kù)抽取、庫(kù)加載、文件處理、預(yù)評(píng)估等服務(wù)，不僅解決了海量異構(gòu)數(shù)據(jù)的抽取和管理難題，還可為未來(lái)進(jìn)一步的數(shù)據(jù)挖掘打造基礎(chǔ)數(shù)據(jù)平臺(tái)。同時(shí)構(gòu)建于普通PC Server之上的Hadoop平臺(tái)具有硬件廉價(jià)，系統(tǒng)高容錯(cuò)、水平靈活擴(kuò)展、運(yùn)行高效等特點(diǎn)。

探秘二：服務(wù)總線

—— 為什么需要總線？

我們知道，通過(guò)數(shù)據(jù)治理形成優(yōu)良的數(shù)據(jù)資產(chǎn)之后，下一步的工作就是數(shù)據(jù)共享和服務(wù)了。以往數(shù)據(jù)共享存在安全漏洞，有一定風(fēng)險(xiǎn)。資源服務(wù)總線是本地建設(shè)的信息共享傳輸通道，現(xiàn)在通過(guò)總線，可監(jiān)管請(qǐng)求方訪問(wèn)情況，有授權(quán)才可訪問(wèn)，這也大大提高了數(shù)據(jù)共享的安全系數(shù)。

此外，總線還能能產(chǎn)生更多的價(jià)值

巨龍資源服務(wù)總線通過(guò)集合本地資源，以請(qǐng)求、服務(wù)的形式幫助本地實(shí)現(xiàn)跨應(yīng)用、跨警種、跨區(qū)域的信息共享 。第三方應(yīng)用通過(guò)請(qǐng)求總線的服務(wù)獲得數(shù)據(jù)，而不直接訪問(wèn)底層數(shù)據(jù)庫(kù)。

• 一點(diǎn)接入，全網(wǎng)辦案
• 數(shù)據(jù)沒(méi)壁壘，語(yǔ)言協(xié)調(diào)
• 進(jìn)行業(yè)務(wù)協(xié)作，數(shù)據(jù)流轉(zhuǎn)

至2017年中旬，巨龍總線已運(yùn)用在公安科信、情報(bào)、網(wǎng)安以及海關(guān)等部門；巨龍總線已部署了20多個(gè)省廳，40多個(gè)地市，并且為公安部科信的全網(wǎng)分布式應(yīng)用提供了很好的運(yùn)行支撐；在網(wǎng)安，已有150多個(gè)地市部署了總線，并且這些數(shù)字在逐漸增長(zhǎng)中。

探秘三：數(shù)據(jù)魔方

——阿里已經(jīng)有類似的產(chǎn)品，做它干嘛

大數(shù)據(jù)的魅力不在于掌握龐大的信息資源，而在于科學(xué)地讓這些信息透析事物本質(zhì)反映發(fā)展趨勢(shì)。如果把大數(shù)據(jù)比作一種產(chǎn)業(yè)，那么這種產(chǎn)品實(shí)現(xiàn)盈利的關(guān)鍵，在于提高對(duì)數(shù)據(jù)的“加工能力”，實(shí)現(xiàn)數(shù)據(jù)的“增值”。換言之，“大數(shù)據(jù)”需要更新的“處理載體”由此迸發(fā)其真正的價(jià)值魅力。而數(shù)據(jù)挖掘與分析正是“載體”的關(guān)鍵。

龍騰數(shù)據(jù)魔方采用大數(shù)據(jù)云計(jì)算為支撐架構(gòu)，輔以建?？梢暬?數(shù)據(jù)可視化/智慧引擎/大數(shù)據(jù)計(jì)算框架/輕應(yīng)用框架/快速開(kāi)發(fā)框架等能力創(chuàng)新打造，其核心價(jià)值具體在：

• 純?yōu)g覽器/鼠標(biāo)拖拽操作，簡(jiǎn)單易學(xué)習(xí)，輕松駕馭大數(shù)據(jù)分析技能；
• 可視化無(wú)代碼的大數(shù)據(jù)分析應(yīng)用快速開(kāi)發(fā)平臺(tái)；
• 分析應(yīng)用化、分析服務(wù)化、數(shù)據(jù)可視化、集成可擴(kuò)展，滿足用戶多元需求；
• 資源規(guī)范化、服務(wù)規(guī)范化、開(kāi)發(fā)規(guī)范化、共享規(guī)范化、管理一體化、安全可控化，幫助信息化建設(shè)主導(dǎo)部門提升大數(shù)據(jù)下分析應(yīng)用的需求響應(yīng)及快速開(kāi)發(fā)能力；
• 高能計(jì)算、關(guān)聯(lián)嗅探、智慧學(xué)習(xí)，幫助用戶把握數(shù)據(jù)脈搏，掌握事物發(fā)展動(dòng)態(tài)；
• 同性能，低要求，支持計(jì)算節(jié)點(diǎn)資源的橫向拓展，即便使用普通的PC服務(wù)器，也能明顯提升計(jì)算效能，為信息化建設(shè)的資源利用提供保障；

參會(huì)人員全神貫注、側(cè)耳傾聽(tīng)，并在互動(dòng)環(huán)節(jié)與講師進(jìn)行積極的交流與探討，使原本停留在文字上的理論更加清晰明了，令大家受益匪淺。

通過(guò)此次培訓(xùn)和經(jīng)驗(yàn)分享，加強(qiáng)了技術(shù)人員間的交流聯(lián)系，提升了大家對(duì)龍騰大數(shù)據(jù)體系產(chǎn)品的認(rèn)知程度，為以后更加持續(xù)高效地工作打好了基礎(chǔ)。相信下次的巨龍大咖說(shuō)主題研討必定會(huì)持續(xù)帶給大家更多的驚喜，讓我們共同期待吧！