當前位置:
首頁 > 科技 > 美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

本期主題:

大數據架構與數據技術應用實踐

擁有超過十億用戶的美圖公司積累了海量的用戶數據,如何利用大數據技術充分挖掘並發揮這些數據的價值是一個很有意思也很有挑戰的問題。美圖的大數據團隊在近幾年的發展中,逐步演進和發展出美圖的大數據體系,以及在美圖業務場景下數據技術應用的最佳實踐。 本期沙龍,我們邀請了來自美圖公司的大數據負責人、架構師、魅族的數據技術專家、以及來自Apache kylin的PMC。美圖的大數據技術負責人和架構師會為大家分享美圖在大數據技術上的探索、大數據的架構、以及數據技術的應用落地。魅族的數據技術專家會為介紹魅族的DMP系統的架構設計以及系統的演進歷程。來自Apache頂級項目kylin的架構師會為大家分享kylin的技術原理與應用實踐。四位技術專家會從多個角度不同層次,為大家分享各自在大數據技術上的實踐經驗。

議題一

美圖大數據平台架構實踐

議題介紹:

美圖擁有十億級用戶,每天產生百億級用戶數據。我們經歷過從0到1的數據平台建設過程,從數據收集、數據落地存儲、數據加工清洗,再到數據平台建設,近幾年也逐步構建了穩定可靠的數據平台以及數據基礎服務,驅動美圖各業務更高效穩定地使用數據,挖掘數據價值,驅動業務增長。本次分享會給大家介紹美圖大數據平台架構以及在平台演進過程的思考和實踐。

分享嘉賓:

美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

盧榮斌

美圖公司 大數據技術總監

美圖大數據技術總監,畢業於廈門大學,14年加入美圖,主導美圖大數據平台架構設計與開發工作,負責美圖大數據平台架構建設,經歷過美圖大數據平台從無到有的搭建與架構演進,長期關注大數據相關技術體系,積累了多年大數據架構與實踐經驗。

議題二

魅族用戶洞察平台架構

議題介紹:

魅族UIP(用戶洞察平台)通過對三方受眾數據的匯聚、清洗、智能運算,構建了龐大的精準人群數據中心,提供豐富的用戶畫像數據以及實時場景識別能力。本次分享將介紹魅族用戶洞察平台的功能和架構,還原建設過程中遇到的技術難點和解決方式。以用戶洞察平台的目標定位為出發點,綜合技術與業務需求的考量進行架構設計,用戶洞察平台的功能包括人群管理、人群洞察分析、自定義標籤、人群擴展、畫像查詢服務等。並將介紹畫像標籤的生成、底層存儲、平台功能以及在精準營銷中的應用。

分享嘉賓

美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

黃振賢

魅族公司 高級架構師

多年互聯網和大數據經驗,2016年加入魅族大數據團隊負責大數據應用的架構、核心設計和落地實現。

議題三

美圖分散式bitmap實踐

議題介紹:

大數據技術及其應用系統目前已在各行業中發揮著巨大的勢能,遍地開花的開源技術也給大數據從業人員帶來了便利。bitmap作為一種大數據需求下催生出的計算體系,有著計算速度快、信息密度高、支持海量數據等優勢。

美圖擁有海量用戶,每天產生龐大的數據計算任務,而bitmap技術能大幅度削弱計算開銷,節省數據存儲成本。

不少公司做過bitmap的相關嘗試,但迄今為止還沒有出現相對成熟的分散式bitmap開源應用。在此基礎上美圖研發了自身的分散式bitmap系統,用於美圖各種場景下的相關數據計算任務。

本次分享將跟大家介紹美圖bitmap系統的迭代演進,探討美圖在bitmap系統中的實踐經驗,以及實踐過程中隨之產生的思考,與大家共勉。

分享嘉賓

美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

楊亞強

美圖公司 資深大數據架構師

2016年作為數據架構師加入美圖數據平台部。作為資深架構師,長期負責各類系統的架構和研發工作,具有多年的數據架構經驗,也作為主程參與過多個大型系統的研發。對於分散式系統、大規模數據處理等大數據組件有著豐富的研發和優化經驗。目前在美圖的數據平台部負責數據架構設計與核心模塊代碼的編寫,主要負責數據基礎設施的構建和優化。

議題四

Apache Kylin大數據可視化分析實踐

議題介紹:

Apache Kylin是領先的開源大數據OLAP分析引擎,能夠為超過PB規模數據提供亞秒級的查詢能力,並支持標準的ANSI SQL查詢介面,可無縫集成各種常見的可視化BI分析工具。本次分享將介紹Apache Kylin技術原理和可視化方案,並以Kyligence實踐的Apache Kylin+Superset方案為例,講述如何利用開源技術實現端到端的大數據可視化分析,以及如何通過Docker快速獲取這一方案。

分享嘉賓

美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

李棟

Apache Kylin項目聯合創始人、PMC、架構師

Kyligence技術合伙人兼高級架構師,Apache Kylin核心開發者和項目管理委員會成員(PMC),專註於大數據技術研發和Kylin生態拓展。畢業於上海交通大學計算機系;曾任eBay全球分析基礎架構部高級工程師、微軟雲計算和企業產品部軟體開發工程師。

活動流程


13:00-13:30 簽到(參會身份確認)
13:30-14:20 美圖大數據平台架構實踐
14:20-15:10 魅族-用戶洞察平台架構
15:10-15:30 Geek探討&茶歇&抽獎
15:30-16:20 美圖分散式bitmap實踐
16:20-17:10 Apache Kylin大數據可視化分析實踐
17:10-17:30 Geek探討&茶歇&離場

活動信息

主辦方:美圖公司

參會對象:工程師、架構師(限100人)

地 址:深圳市南山區軟體產業基地4棟D座一樓創新谷咖啡

路線引導:

1、公交:72路、B964路、M562路、高峰138、高峰150、高峰92(步行6分鐘)

2、地鐵:深圳地鐵2號線科苑站A出口(步行約15分鐘)

3、開車:導航至「創新谷咖啡」

美圖、魅族、Kylin多個一線案例,盡在周末美圖互聯網技術沙龍

美圖互聯網技術沙龍介紹

美圖互聯網技術沙龍美圖互聯網技術沙龍是由美圖公司主辦的線下技術交流系列活動,每期沙龍都將會邀請到美圖內外部技術大咖蒞臨現場圍繞著最熱門的技術話題與大家進行交流和分享,努力為中高級技術人員打造一個高質量的技術交流圈。

報名方式:點擊下方閱讀原文,填寫報名信息進行審核(通過審核者會收到確認郵件和簡訊)

點擊下方「閱讀原文」填寫報名信息

↓↓↓

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 高可用架構 的精彩文章:

從知乎「悟空」看一個成熟的Anti-Spam系統演進之路
螞蟻金服研發的金融級分散式中間件SOFA背後的故事

TAG:高可用架構 |