近日，第十二屆BigData NoSQL Meetup在快手總部圓滿落幕。來(lái)自快手、阿里云、京東、滴滴、貝殼找房的技術(shù)專(zhuān)家與近300位開(kāi)發(fā)者齊聚一堂，交流分享NoSQL等大數(shù)據(jù)技術(shù)的應(yīng)用與實(shí)踐。

本次活動(dòng)由快手技術(shù)沙龍、云棲社區(qū)等技術(shù)社區(qū)共同舉辦?？焓旨夹g(shù)沙龍是由快手舉辦的線下技術(shù)交流活動(dòng)，每期活動(dòng)將以AI、大數(shù)據(jù)、音視頻技術(shù)等技術(shù)方向?yàn)橹黝}，邀請(qǐng)產(chǎn)業(yè)、學(xué)界的專(zhuān)家、技術(shù)人員進(jìn)行分享，打造前沿技術(shù)的交流平臺(tái)。

快手大數(shù)據(jù)高級(jí)研發(fā)工程師陳楊

本次活動(dòng)上，快手大數(shù)據(jù)高級(jí)研發(fā)工程師陳楊首先分享了《HBase在千億級(jí)用戶特征數(shù)據(jù)分析中的應(yīng)用與實(shí)踐》。陳楊介紹，快手每天產(chǎn)生數(shù)百億用戶特征數(shù)據(jù)，分析師需要在跨30-90天的數(shù)千億特征數(shù)據(jù)中，任意選擇多維度組合秒級(jí)分析用戶行為。針對(duì)這一需求, 快手基于HBase自主研發(fā)了支持bitmap轉(zhuǎn)化、存儲(chǔ)、索引、快速計(jì)算的分析服務(wù)——BitBase，并成功應(yīng)用于留存分析、用戶增長(zhǎng)、廣告營(yíng)銷(xiāo)、ABTest 等多個(gè)業(yè)務(wù)場(chǎng)景。

阿里云數(shù)據(jù)庫(kù)專(zhuān)家吳陽(yáng)平

阿里云數(shù)據(jù)庫(kù)專(zhuān)家吳陽(yáng)平的演講主題為《阿里云HBase x-pack數(shù)據(jù)存儲(chǔ)檢索分析平臺(tái)》，演講分享了阿里云HBase x-pack 的平臺(tái)能力——基于 Apache HBase、Phoenix、Spark 深度擴(kuò)展,融合 Solr 等技術(shù),支持海量數(shù)據(jù)的一站式存儲(chǔ)、檢索與分析,被廣泛應(yīng)用于風(fēng)控、推薦、檢索、畫(huà)像、 社交、物聯(lián)網(wǎng)、離線數(shù)倉(cāng)等場(chǎng)景,助力企業(yè)數(shù)據(jù)智能化。

京東大數(shù)據(jù)技術(shù)專(zhuān)家吳怡燃

京東大數(shù)據(jù)專(zhuān)家吳怡燃分享了《NoSQL在京東的使用》。演講首先介紹了NoSQL在京東的使用場(chǎng)景；講解了HBase支撐在線系統(tǒng)時(shí)遇到的挑戰(zhàn)與改進(jìn)，如支持異構(gòu)配置的RSGroup、RPC優(yōu)化RWS隊(duì)列、跨集群雙活集群等；并分享了HDFS參數(shù)優(yōu)化、Zookeeper配置優(yōu)化、HBase參數(shù)優(yōu)化等經(jīng)驗(yàn)。

滴滴大數(shù)據(jù)工程師初曉

滴滴大數(shù)據(jù)工程師初曉分享了《基于HBase的NewSQL落地實(shí)踐》，主要分享了HBase及其生態(tài)組件Phoenix、Kylin 在滴滴的使用場(chǎng)景及落地中遇到的問(wèn)題及解決方法。

貝殼大數(shù)據(jù)架構(gòu)團(tuán)隊(duì)負(fù)責(zé)人趙國(guó)賢

貝殼大數(shù)據(jù)架構(gòu)團(tuán)隊(duì)負(fù)責(zé)人趙國(guó)賢分享了《流式數(shù)據(jù)的平臺(tái)化實(shí)踐與挑戰(zhàn)》，介紹了貝殼流式數(shù)據(jù)從產(chǎn)生、處理、應(yīng)用整個(gè)生命周期的管理與平臺(tái)化實(shí)踐。包括流式數(shù)據(jù)的挑戰(zhàn)、流式數(shù)據(jù)的平臺(tái)化建設(shè)以及流式數(shù)據(jù)的應(yīng)用案例。

一直以來(lái)，快手十分重視、關(guān)注NoSQL等大數(shù)據(jù)技術(shù)的發(fā)展。本次快手技術(shù)沙龍與云棲社區(qū)聯(lián)合舉辦BigData NoSQL Meetup活動(dòng)，正是希望能夠進(jìn)一步推動(dòng)相關(guān)技術(shù)的溝通與交流，看到更多經(jīng)驗(yàn)分享、更多對(duì)技術(shù)挑戰(zhàn)的突破。