摘要:阿里雲數據庫專家吳陽平分享了阿里雲HBase x-pack 的平臺能力——基於 Apache HBase、Phoenix、Spark 深度擴展,融合 Solr 等技術,支持海量數據的一站式存儲、檢索與分析,被廣泛應用於風控、推薦、檢索、畫像、 社交、物聯網、離線數倉等場景,助力企業數據智能化。第十二屆BigData NoSQL Meetup近日在快手總部舉辦,快手、阿里雲、京東、滴滴、貝殼找房等公司的技術專家與近300位開發者交流分享NoSQL等大數據技術的應用與實踐。

第十二屆BigData NoSQL Meetup近日在快手總部舉辦,快手、阿里雲、京東、滴滴、貝殼找房等公司的技術專家與近300位開發者交流分享NoSQL等大數據技術的應用與實踐。

據悉,活動由快手技術沙龍、雲棲社區等技術社區共同舉辦。快手技術沙龍是由快手舉辦的線下技術交流活動,每期活動將以AI、大數據、音視頻技術等技術方向爲主題,邀請產業、學界的專家、技術人員進行分享,打造前沿技術的交流平臺。

快手大數據高級研發工程師陳楊介紹,快手每天產生數百億用戶特徵數據,分析師需要在跨30-90天的數千億特徵數據中,任意選擇多維度組合秒級分析用戶行爲。針對這一需求, 快手基於HBase自主研發了支持bitmap轉化、存儲、索引、快速計算的分析服務——BitBase,併成功應用於留存分析、用戶增長、廣告營銷、ABTest 等多個業務場景。

阿里雲數據庫專家吳陽平分享了阿里雲HBase x-pack 的平臺能力——基於 Apache HBase、Phoenix、Spark 深度擴展,融合 Solr 等技術,支持海量數據的一站式存儲、檢索與分析,被廣泛應用於風控、推薦、檢索、畫像、 社交、物聯網、離線數倉等場景,助力企業數據智能化。

京東大數據專家吳怡燃介紹了NoSQL在京東的使用場景;講解了HBase支撐在線系統時遇到的挑戰與改進,如支持異構配置的RSGroup、RPC優化RWS隊列、跨集羣雙活集羣等;並分享了HDFS參數優化、Zookeeper配置優化、HBase參數優化等經驗。

滴滴大數據工程師初曉分享了HBase及其生態組件Phoenix、Kylin 在滴滴的使用場景及落地中遇到的問題及解決方法。

貝殼大數據架構團隊負責人趙國賢介紹了貝殼流式數據從產生、處理、應用整個生命週期的管理與平臺化實踐。包括流式數據的挑戰、流式數據的平臺化建設以及流式數據的應用案例。

相關文章