阿里、英特爾、百度、蘇寧等企業老司機帶你淘乾貨,架構+大數據熱點話題享不停
2017年6月10-11日,SDCC 2017·深圳站火熱開啟,擁有互聯網應用架構實戰峰會、大數據技術實戰峰會兩大峰會,秉承乾貨實料的內容原則,邀請業內頂尖的架構師和數據技術專家,共話高可用/高並發/高性能的系統架構設計、分布式緩存服務、Web App前端架構、消息引擎架構、彈性計算、大數據平台構建、優化提升大數據平台的各項性能、Spark部署實踐、企業流平台實踐,以及實現應用大數據支持業務創新發展等核心話題,旨在通過來自國內一線互聯網公司的實踐案例,為開發者提供一個最有價值的高效技術交流平台。乾貨自助時代,SDCC帶你高台起步,走近技術圈的浮生萬象。
日前主辦方也公布了大會的完整版日程,加長版預告高能來襲,It』s all for you:
首日日程
次日日程
大牛雲集,熱點齊聚:以下是本次SDCC深圳站嘉賓+議題合集首次完整披露,精彩內容提前看。
首互聯網架構實戰峰會出品人(6月10日)
徐海峰 閱文集團
徐海峰,閱文集團首席架構師,主要負責內容中心的網站架構和分布式存儲、分布式計算工作。10年互聯網開發經驗,為開源分布式文件系統fastdfs提交過代碼。曾歷任Ctrip國際機票引擎架構師、5173分布式存儲和分布式計算架構師。多年來一直致力於網站架構和分布式計算的研究與實現,對大型網站架構和分布式計算有豐富的經驗。
講師
馮嘉 阿里巴巴
阿里巴巴中間件架構師 馮嘉
個人簡介:阿里巴巴中間件架構師,具有豐富的分布式軟體架構、高並髮網站設計、性能調優經驗,擁有多項分布式、推薦領域的專利。開源愛好者,關注分布式、雲計算、大數據領域。目前主要負責阿里巴巴消息中間件生態輸出、MQ商業化 ,Apache RocketMQ聯合創始人,社區佈道者。
演講主題:《萬億級消息引擎架構、核心技術與最佳實踐-Apache RocketMQ》
演講簡介:分布式消息引擎涵蓋並試圖解決分布式領域的什麼問題?消息領域常見的問題域以及業界開源與商業化產品的發展又是如何? 阿里巴巴捐贈給Apache的RocketMQ核心技術背後的設計思路是什麼樣的?哪些場景里用到了分布式消息引擎,如何正確的使用消息引擎,最佳實踐如何?關於下一代消息引擎,我們的設計思路又是什麼樣的?Apache RocketMQ社區未來何去何從? 本次分享,嘗試從以上問題著手,深入淺出的為大家講述Apache RocketMQ背後的設計思路、典型場景、最佳實踐以及社區運營與商業化之路。
聽眾受益:
1. 了解分布式消息領域以及相關產品、技術體系;
2. 學習Apache RocketMQ核心技術設計原理以及最佳實踐;
3. 了解Apache RocektMQ開源社區演進歷史,發展規劃。
陳波 新浪微博
新浪微博研發中心平台架構技術專家 陳波
個人簡介:新浪微博研發中心平台架構技術專家。08年加入新浪,參與IM系統的後端研發。09年之後從事新浪微博的系統研發及架構工作,在海量數據存儲、峰值訪問、規模化緩存服務及開放平台等方面參與技術架構改進,當前主要負責微博平台的基礎設施、中間件的研發及架構優化工作,經歷新浪微博從起步到成為數億用戶的大型互聯網系統的技術演進過程。
演講主題:《支持百億級訪問,微博Feed的緩存架構及其演進之路》
演講簡介:2009年新浪微博上線,2013年日活用戶6140萬,2016年日活用戶1.2億。微博系統運行中,面對千億級Feed、百億級訪問、80-100萬的分鐘峰值發表,良好架構且不斷改進的Feed緩存體系起了非常重要的支撐作用。本次分享將基於微博的Feed系統架構,介紹微博的緩存模型、緩存體系架構及緩存體系在微博的擴展及演進。
聽眾收益:
1. 如何對海量數據訪問進行高效、可靠的訪問加速?可以借鑒微博的經驗,根據系統特點構建不同的緩存體系;
2. 如何應對cache節點故障,使部分節點故障不影響整體緩存架構的讀寫性能、命中率? 可以參考微博的緩存架構;
3. 各種內容都Feed化的今天,在快速響應Feed請求的同時,如何做到Feed的各種狀態、計數、擴展信息的實時更新?參考微博的計數器、存在性判斷;
4. 如何應對突發峰值流量?面對業務快速增長,cache 節點變更頻繁,如何做到容量的無痛擴縮? 參考微博的緩存架構,緩存服務化方案。
陳傑 騰訊
騰訊架構平台部高級工程師 陳傑
個人簡介:2007畢業於中科院計算所,現任職於騰訊架構平台部,負責虛擬化平台建設,經歷了騰訊內部從xen,kvm到docker的演化過程,致力於利用虛擬化技術提升資源調度及利用效率,降低業務整體成本。
演講主題:《基於空閑資源的彈性計算實踐》
演講簡介:騰訊內部業務以在線型為主,且業務場景多樣化,為保障服務質量,未考慮資源均衡分時的高效利用;近年隨著圖片,視頻,數據挖掘,AI等計算需求逐漸增多,計算成本逐漸成為一種不可承受之重,為解決這個問題,建設了騰訊計算平台,通過挖掘在線業務閑置資源,供給計算業務使用,節省了大量計算成本,本次演講的大綱如下:
1. 背景及演進歷史;
2. 整體架構方案;
3. 如何保障在線業務質量;
4. 如何保障計算業務質量;
5. 如何保障平台調度成功率;
6. 彈性計算實踐的經驗體會。
聽眾受益:
1. 了解現網業務資源復用辦法;
2. 了解大規模資源復用背後的質量保障機制。
薛珂 唯品會
唯品會基礎架構部高級架構師 薛珂
個人簡介:互聯網技術創業老兵,曾參與主導多個大型互聯網產品的整體架構;2016加入唯品會,現為基礎架構團隊核心成員;興趣集中在架構設計,分布式設計,任務調度,搜索引擎,優雅設計等領域;目前主導唯品會開源彈性調度平台Saturn的研發,推廣以及開源社區的維護。
演講主題:《日調度3000萬次,任務調度系統Saturn的架構設計和演進歷程》
演講簡介:跟大家分享一下關於我們對於什麼是好的任務調度系統的理解和相關的經驗,主要的內容有:
1. 任務調度系統的架構設計;
2. Saturn的前世今生;
3. Saturn在唯品會的應用實踐;
4. 任務調度系統的選型經驗。
聽眾收益:
1. 掌握任務調度系統的基本原理及概念;
2. 了解當前業內任務調度領域的發展現狀;
3. 通過了解唯品會的經驗,為任務調度系統選型提供一些參考依據。
陶清乾 百度
百度網頁搜索部資深研發工程師 陶清乾
個人簡介:2013年加入百度PS-FE團隊,先後負責百度Web搜索前端速度優化,百度搜索全站HTTPS改造,搜索生態體驗提升等專題工作。自2016年起,負責百度搜索前端極速瀏覽框架研發工作;2016底開始負責PWA與百度搜索和結合與落地工作。
演講主題:《基於PWA的Web App前端架構探索與實踐》
演講簡介:本次主題演講將從Web App生態體驗改善角度出發,講述Web App生態如何通過PWA改善如今困境,開發者如何通過PWA提升自己Web站點體驗,以及百度搜索在PWA中的探索與實踐經驗,演講主要為:
1. Web App生態現狀;
2. PWA給Web App的體驗與技術的福利:PWA價值與收益;
3. PWA技術下的前端架構新思路:從離線化和交互打磨PWA體驗;
4. PWA最佳實踐經驗:PWA技術選型與效果評估。
聽眾受益:
1. 學習了解PWA技術原理;
2. 了解PWA在設計與開發時與傳統Web的區別;
3. 了解百度實際產品的PWA實踐經驗。
陳秋余 前卷皮網
前卷皮網架構服務部技術總監 陳秋余
個人簡介:資深架構師&技術管理專家,十多年傳統企業應用與互聯網從業經驗;曾主導中國移動集團、南方電網IT戰略架構規劃,有負責過某知名移動特賣電商從0到1的技術架構落地,支撐數億PV,百萬級日訂單;經歷過多種類型,不同階段的技術團隊,注重團隊組織與技術架構融合互促,對敏捷有深刻理解。在TOGAF,SOA以及微服務領域有相當建樹。
演講主題:《領域模型 + 內存計算 + 微服務的協奏曲:乾坤》
演講簡介:
1. 解決分布式事務困惑的最佳選擇是不要使用分布式事務;
2. 解決高並發爭搶的最優方式是避免競爭爭搶的發生;
3. 乾坤,一套經過線上大規模實踐驗證過的,無鎖無阻塞,基於非同步和內存計算的超強性能的微服務架構;除了HA&HP,它還可以帶給你們更多的驚喜。
聽眾受益:
1. 拓展新的視野和思路:接觸一種較為新穎的微服務架構,和主流RPC微服務框架截然不同的架構邏輯;
2. 解決微服務業務邊界和粒度切分的困惑問題;
3. 解決微服務跨域查詢的尷尬;
4. 重新認識領域建模的價值:不光能解決業務複雜度問題,更可以提高性能。
帥翔 閱文集團
閱文集團架構師 帥翔
個人簡介:閱文集團內容平台中心存儲系統架構師。
演講主題:《PB級去內存化的分布式緩存系統Lest的架構設計與實踐》
演講簡介:分布式文件緩存系統,可以將數據對象經特定格式序列化後,存儲到分布式文件系統中,並提供可靠的數據訪問介面。各存儲節點間保證負載均衡。各鏡像節點支持主主模式,並保證數據同步。當前可以支持支持List和Map形式的數據對象。本次演講的主要內容如下:
1. 緩存系統的背景及現狀;
2. 系統的整體架構;
3. 如何持久化以及訪問數據;
4. 數據同步及版本控制;
5. 如何保證數據安全。
聽眾受益:
1. 了解分布式文件存儲架構;
2. 如何保證數據的安全;
3. 解決Redis等存儲系統中大內存的缺陷。
大數據技術實戰峰會出品人(6月11日)
陳敏敏 蘇寧雲商
陳敏敏,蘇寧雲商大數據中心技術總監,主要負責智能推薦、數據倉庫和數據應用等部門的研發團隊,並負責建設支撐供應鏈、物流、財務、運營等的統一數據平台。成電本科,上交碩士,《Storm 技術內幕與大數據實踐》一書作者(人民郵電出版社、出口台灣),中關村大數據產業聯盟專委會委員,2012年牽頭成立三星電子研究院上海分部技術委員會(把關 Code Review 和技術架構),後在1號店分別任資深開發經理、精準化部門總架構師,目前主要關注推薦系統、應用架構、數據平台、OLAP等相關技術。
講師
程浩 Intel
英特爾軟體與服務部門大數據研發經理 程浩
個人簡介:Intel亞太研發中心Spark團隊研發經理,Apache Spark活躍開發者,致力於Apache Spark框架在Intel平台架構上的性能分析與優化。
演講主題:《Apache Spark大數據計算性能調優之部署最佳實踐》
演講簡介:性能調優在Spark大數據應用中一直是大家普遍關心的話題。本次分享將主要探討以下內容:
1. 如何收集硬體利用率來分析Spark應用程序性能瓶頸,從而進行有效調優?
2. 新硬體採購時,怎樣的硬體配置對Spark應用可以有最佳的效能或者最好的性價比?
3. 通過展示不同特性的典型Spark應用的性能分析和調優手段,揭示如何釋放硬體性能,監控硬體性能發揮,並在此基礎上,測試不同硬體配置諸如內存、網路、磁碟、CPU選型,對於Spark大數據應用程序性能的影響,指導運維人員決策購買或者升級新的硬體零部件。
聽眾受益:針對硬體性能監控來調優Spark應用程序性能,並揭示Spark應用的最高性價比環境部署最佳實踐。
周建軍 騰訊
騰訊數據平台部高級工程師 周建軍
個人簡介:2015年加入騰訊,供職於TEG數據平台部,主要負責StreamingSQL及實時計算平台的相關工作。在加入騰訊前曾供職於京東商城、聚美優品,有多年的大數據相關工作經驗,尤其擅長分布式存儲、HBase、實時數據採集等領域。
演講主題:《StreamSQL實時計算平台的挑戰及解決方案》
演講簡介:StreamSQL是一個通過SQL描述實時計算業務需求並將其轉換成實時計算任務的開發平台。相對於傳統實時計算平台Storm,StreamSQL內建豐富的字元串處理、時間、統計、複雜數據結果處理等各類計算函數,除了支持標準SQL之外還根據流式數據特點新增窗口統計特性,具有強大的統計計算能力。StreamSQL解決了傳統Storm原生API使用複雜、上手難度高的問題,減少了用戶對複雜實時計算框架和編程語言的學習成本,讓用戶具有更加良好的流式開發體驗。
聽眾受益:
1. 深入了解StreamSQL實時計算平台;
2. 理解StreamSQL的設計目標並從中獲得啟發:讓用戶通過通用的SQL查詢語言完成實時計算需求,減少用戶對複雜實時計算框架及編程語言的學習成本,提高實時計算任務的開發效率。
周雷皓 百度外賣
百度外賣大數據平台負責人 周雷皓
個人簡介:百度外賣資深研發工程師,負責百度外賣的大數據平台,致力於大數據引擎的研究和大數據平台架構的設計和研發。
演講主題:《Greenplum在百度外賣大數據架構的應用實踐及性能優化實踐》
演講簡介:
1. GPDB架構介紹;
2. GPDB在百度外賣大數據架構中的角色以及應用場景;
3. 在生產環境中如何對gpdb進行性能優化;
4. 平台化之路,自動化性能優化平台設計思路以及架構介紹。
聽眾受益:
1. 了解MPP原理以及GPDB的架構;
2. 大數據查詢引擎優化經驗分享。
黃振賢 魅族
魅族高級數據架構師 黃振賢
個人簡介:2016年加入魅族,主要負責數據應用平台的規劃、架構設計和落地實現。
演講主題:《魅族大數據之用戶洞察平台架構設計和實踐》
演講簡介:魅族DMP(用戶洞察平台),通過對三方受眾數據的匯聚、清洗、智能運算,構建了龐大的精準人群數據中心,提供豐富的用戶畫像數據以及實時的場景識別力。
對內:無縫對接各類業務平台的數據應用,如廣告平台、PUSH推送、個性化推薦之間建立了數據通道,支持公司級的精準營銷,消息及時送達服務等場景。
對外:完善對數據的管理及輸出流程,以開放介面形式為全行業從業者提供標準的精準人群標籤,幫助優化投放並提升營銷效果。達到對受眾的精準投放,釋放數據真正價值。
本次分享將介紹用戶洞察平台所採用的架構,探討其間遇到的技術難點和解決過程,回顧目前架構的不足之處以及將來改進的方向。
聽眾受益:
1. 了解大數據時代下的用戶洞察,用戶畫像、精準營銷;
2. 了解族用戶洞察平台的架構設計和實踐。
畢洪宇 餓了么
餓了么大數據平台部總監 畢洪宇
個人簡介:曾在eBay,PPTV任職DBA。2012年加入唯品會,依次經歷從0到1參與資料庫基礎建設、大數據基礎平台和實時計算平台的工作;2016年加入餓了么負責大數據基礎架構,主要負責數據平台工具鏈及數據倉庫。
演講主題:《大數據平台工具鏈、技術選型及架構設計》
演講簡介:隨著接入需求方越來越多樣化,對大數據的數據使用、數據存儲與計算的需求也越來越多樣化,業務的飛速發展及集群的規模急速擴大。如何在這樣的場景下通過有限的資源來構建大數據平台、穩定支撐住業務的發展是一個不小的挑戰。本次分享主要談一談從數據平台工具鏈、技術選型及架構設計出發的一些個人經驗。
聽眾受益:
1. 了解如何在效率與規範、隔離和共享間平衡;
2. 學習與之相應的技術選型和架構設計;
3. 藉由餓了么在業務快速發展過程中構建大數據平台從0到N的經驗獲得啟發。
顧榮 南京大學
南京大學計算機系助理研究員 顧榮
個人簡介:博士畢業於南京大學計算機系,Alluxio PMC成員。參與完成了Alluxio社區很多工作,包括性能測試框架Alluxio-Perf、Alluxio緩存策略優化、Alluxio與Hadoop生態系統多個組件的整合等。已經以一作身份在分布式並行計算領域一流期刊/會議上發表論文10篇等,並且參與編寫書籍《深入理解大數據》。同時是南京大數據技術Meetup組織人,多次在國內外知名技術大會上演講。曾在Microsoft Research、Intel、Baidu、星環科技從事大數據系統實習工作。
演講主題:《Alluxio系統的最新原理特性、案例分析與發展方向》
演講簡介:Alluxio是一個開源內存級分布式大數據虛擬存儲系統。在三年多的時間裡,Alluxio開源社區已有來自全世界近500名的貢獻者,成為大數據領域內歷史上成長最快的項目之一。Alluxio系統已經部署在包括百度,巴克萊銀行,華泰證券,英特爾,華為和去哪兒網等許多公司當中。在其中一些生產環境中,Alluxio已經行了一年多,管理數據PB級別的數據。Alluxio項目最新幾個版本極大提升了系統性能,Scalability和用戶體驗,並增加了一系列新功能,包括統一命名空間、REST API等更加方便用戶使用Alluxio。Alluxio未來將讓更多用戶人群可以使用Alluxio,著重提高安全性支持,支持新語言binding,以及進一步增加穩定性和對資源有效使用。此外,還會探索新的API,讓應用程序能夠更有效地訪問數據。
聽眾受益:
1. 了解Alluxio項目最新版的新特性;
2. 學習Alluxio系統合適的應用場景與性能調優;
3. 交流Alluxio項目的發展方向。
張翰之 滴滴出行
滴滴出行基礎平台部研發工程師 張翰之
個人簡介:就職於滴滴出行基礎平台部,負責HBase、Spark相關開發。
演講主題:《HBase在滴滴出行的一站式服務平台實踐》
演講簡介:面對企業的快速發展,每天幾百億業務訪問、數據的瘋狂增長和多租戶場景下,到底企業該如何面對HBase集群規模不斷擴展、集群管理、資源隔離、風險管理、服務保障、成本賬單、業務監控及集群運維所帶來的問題。
聽眾受益:
1. 使用哪些技術保障HBase穩定的服務;
2. 在多租戶的背景下如何打造HBase一站式服務平台。


※物聯網安全攻防的「線上幽靈」
※基於OpenGL ES的深度學習框架編寫
※Java 9的14個新特性總結
TAG:CSDN |
※投資萬達商業、賣掉阿里股份,再看蘇寧與阿里的「聯姻之路」
※上港、魯能、國安、蘇寧、恆大爭霸,你覺得哪只球隊奪冠的可能性大?
※蘇寧、海爾、一汽紅旗、華為、海瀾、伊利、商湯,一起搞事情
※阿里巴巴聯手蘇寧放大招,網友吐槽:影響力太大!
※蘇寧聯手各大手機品牌商,強勢打造手機界的「雙十一」盛宴
※外援換的真勤!蘇寧水貨將外租老東家,薩帕塔和埃德爾穩了?
※塔波爾蘇寧都在推,視覺導航是掃地機器人的「下一站」?
※史上最拉風年貨?蘇寧門店私人飛機開售 網友:這個真香不了吧
※蘇寧成立五大商品集團 快消、時尚百貨、國際業務與家電、消費電子並重
※不來蘇寧!官方:薩帕塔租借加盟亞特蘭大
※蘇寧許宏平:智慧零售的秘密 數字化人貨場
※蘇寧收購萬達百貨全部門店;阿里巴巴正式牽手B站
※貝爾不是C羅!商業跟競技都差一檔次 蘇寧天價買他自己挖坑
※十部門發文共推家電升級,蘇寧大數據告訴你智能綠色產品多緊俏
※異業聯盟,愛瑪&蘇寧強強聯合打開渠道新模式!
※蘇寧百貨聯手瑞麗創新內容營銷 建立時尚達人庫
※瘋狂進攻全取三分!埃德爾、特謝拉蘇寧的兩把尖刀建功
※義大利媒體:蘇寧集團打算收購托希爾的股份
※蘇寧vs上港首發:埃德爾解禁攜特謝拉 胡爾克缺席埃神奧斯卡壓陣
※從內部黑馬到為行業養馬:蘇寧小店有大夢造大勢