概率之本質—從主觀概率到量子貝葉斯 張天蓉專欄
圖片來源:pixabay
前面兩篇中所介紹的大數定律和中心極限定理,都是基於多次實驗結果的經典概率觀點,屬於概率論中的頻率學派。事實上,概率和統計中還有另一個極端的派別——貝葉斯學派。兩派的爭論焦點涉及到「什麼是概率?概率從何而來?」等本質問題。
撰文 | 張天蓉
責編 | 呂浩然
概率論專欄
2017-03-16 上帝教人擲骰子——「神童」帕斯卡與概率論
2017-03-31 似是而非的答案:概率論悖論
2017-04-18 別相信直覺:概率論幫助偵破「財務造假」
2017-05-15 賭徒謬誤:賭博與大數定律
2017-06-24 無所不在的概率分布鍾型曲線
歷史回顧
托馬斯·貝葉斯(Thomas Bayes, 1702-1761)雖為英國的一位古人,卻在當代科技界「紅」了起來,原因歸結於我們曾經在第二篇中介紹過的貝葉斯定理。這個定理現在被廣泛應用於與人工智慧密切相關的機器學習中。
當年,貝葉斯研究過「白球黑球」的概率問題。概率問題可以正向計算,也能反推回去。下面舉正向計算的例子,比如,暗盒裡有10個球,黑白兩種顏色。如果我們知道10個球中5白5黑,那麼,如果我問你,從中隨機取出一個球,這個球是黑球的概率是多大?問題不難回答,當然是50%!如果10個球是6白4黑呢?取出一個球為黑的概率應該是40%。
再考慮複雜一點的情形:如果10個球中2白8黑,現在隨機取2個球,得到1黑1白的概率是多少呢?10個球取出2個的可能性總數為10*9=90種,1黑1白的情況有16種,所求概率為16/90,約等於17.5%。因此,只需進行一些簡單的排列組合運算,我們便可以在10個球的各種分布情形下,計算取出n個球,其中m個是黑球的概率。這些都是正向計算。
不過,貝葉斯當時更感興趣的是反過來的問題(可稱之為逆概率問題):假設我們預先並不知道盒子里黑球白球數目的比例,只知道總共是10個球,那麼,如果我隨機地拿出3個球,發現是2黑1白。是否可以通過這個試驗樣本(2黑1白),猜測盒子里白球黑球的比例呢?這就是逆概率問題。
可以從最簡單的拋硬幣試驗來說明「逆概率」問題。假設我們不知道硬幣是不是兩面「公平」的,也就是說,不了解這枚硬幣的物理偏向性,這時候,得到正面的概率p不一定等於50%。那麼,逆概率問題便是企圖從某個(或數個)試驗樣本來猜測p的數值。
為了解決逆概率問題,貝葉斯在他的論文中提供了一種方法,即貝葉斯定理:
後驗概率 = 觀測數據決定的調整因子×先驗概率
上述公式的意義,指的是對未知概率首先有一個「先驗」猜測,然後結合觀測數據,修正先驗,得到更為合理的「後驗」概率。「先驗」和「後驗」是相對而言的,前一次算出的後驗概率,可作為下一次的先驗概率,與新的觀察數據相結合,再得到新的後驗概率。因此,運用貝葉斯公式,有可能對某種未知的不確定性逐次修正概率模型並得到最終結果,即解決逆概率問題。
有關貝葉斯定理的論文,直到貝葉斯死後的1763年,才由朋友代為發表。後來,拉普拉斯(Pierre-Simon Laplace,1749-1827)證明了貝葉斯定理的更普遍的版本,並將之用於天體力學和醫學統計中。
頻率學派和貝葉斯學派:客觀主觀之爭
也許貝葉斯當初對他自己這個定理的意義認識不足,恐怕也沒有料到由此可以啟發人們以一種全新的思考方式來看待概率和統計,並繼而發展成所謂的「貝葉斯學派」【1,2】。
貝葉斯學派,是相對於「頻率學派」而言的,二者更像是一種哲學爭論。頻率學派將概率定義為事件多次重複後發生的頻率之極限。但是,這只是代表我們使用概率這個名詞的某一種情況。很多時候,概率無法通過多次試驗來得到,比如說,今天北京下雨的概率,或者,加州某年某月某日地震的概率,這些是無法用多次重複來驗證的。再比如說,某個國家研製的導彈,命中1000公里外目標的概率,理論上可以重複,但事實上並不會用多次重複來得到這個概率,因為花費太昂貴了。
從上面所舉的幾個實例可見,概率一詞所描述的是對「不確定性」 的度量。這種度量既有客觀因素,也有主觀因素。有時候,不確定性是物體的固有屬性,是獨立於主觀因素的客觀存在。比如硬幣或骰子,它的物理偏向性如何?某一面出現的概率是多少?是否「公平」?這些都是在物體的製造過程中決定了的,原則上可用頻率派多次實驗的方法來探索它的概率。但在某些情形,「不確定性」的客觀意義並不顯而易見,例如在清華對北大的某次籃球賽中,某人預言清華隊「贏」的概率,是他的個人觀點結合兩個球隊實力得出的主觀猜測,這時候,使用貝葉斯定理逐次更新概率模型的方法更為合適。
那麼,概率到底是客觀的,還是主觀的?這便涉及到了「概率之本質」的哲學問題,因此,頻率派和貝葉斯派的爭論焦點實際上是哲學意義上的。如果僅就科學研究的意義上,兩個學派的統計學家基本上都承認大數定律和中心極限定理,也都使用貝葉斯公式,只是兩派使用這些定理的方式和場合不完全一樣,各有利弊而已。
英國數學家及哲學家弗蘭克·拉姆齊(Frank Ramsey,1903-1930)在他1926年的論文中首次建議將主觀置信度作為概率的一種解釋,他認為這種解釋可以作為頻率解釋的一個補充或代替。
圖1:貝葉斯和拉姆齊
概率有時候是主觀的,比如以賽馬為例,大多數觀眾並不具備對馬匹和騎師等因素的全面知識,而只是憑主觀因素對賽馬結果下賭注,他們認可的某個馬匹的獲勝概率反映的是他們的個人信念,因而是主觀概率。
科學有別於哲學,儘管物理世界是客觀存在的,解決問題的科學方法卻總是人為的,難免摻進主觀的因素,自覺或不自覺地,明顯的或隱含的。不管哪個派別,主觀性都在所難免。作為數學的應用,必須具體問題具體分析,哪種方法有效便使用哪一種,主觀還是客觀之說法,只不過是凌駕於科學之上的「哲人」們對理論的不同詮釋,對解決具體問題無濟於事。
頻率派強調概率的客觀性,一般用隨機事件發生的頻率極限來描述概率;而貝葉斯派則將對不確定性的主觀置信度作為概率的一種解釋,並認為:根據新的信息,可以通過貝葉斯公式不斷地導出或者更新現有的置信度。
在歷史上,貝葉斯統計長期受到排斥,受到當時主流的數學家們的拒絕。然而,隨著科學的進步,貝葉斯統計在實際應用上取得的成功慢慢改變了人們的觀點。貝葉斯統計慢慢地受到人們的重視,人們認為它的思路更為符合科學研究的過程以及人腦的思維模式。目前貝葉斯概率已經成為一個熱門研究課題,在機器學習中大展宏圖,在物理學中也有應用。以下簡單介紹量子力學詮釋中的「量貝模型」,看看貝葉斯方法如何啟發人們從不同的視角來思考問題。
量子貝葉斯模型
儘管量子力學在應用方面已經取得了巨大的成就,但人們一直被種種詭異的量子現象所困擾,即使在頂尖物理學家之間,也難以達成共識,可謂眾說紛紜。其中主流派的觀點,也就是大多數教科書上的解釋,被稱之為「哥本哈根詮釋」。
量子理論與經典理論的不同之處以及哥本哈根詮釋,都可以藉助「薛定諤的貓」來理解。
從日常生活經驗,一隻貓要麼死,要麼活,不可能「既死又活」。但量子力學相關的實驗結果卻告訴我們,微觀粒子的狀態似乎是「死活」並存的(即波粒二象性),但我們又無法探索這種狀態的詳情,因為一旦實施測量,便沒有了既死又活的貓,結果只看到死貓或活貓。於是,哥本哈根詮釋解釋說:在進行測量之前,粒子的波函數為疊加態,一旦進行測量,便干預了量子態,發生「波函數塌縮」,按照一定的概率塌縮到「死」「活」狀態之一。塌縮概率可根據波函數的平方來計算,這種特殊的疊加態及塌縮,便是量子力學奇妙現象之根源,但哥本哈根詮釋並未真正解決「既死又活」的薛定諤貓的量子悖論。更多有關量子及量子糾纏的內容,請參考筆者在科學網和《物理》的系列文章【3】。
貝葉斯派的主觀概率思想與量子力學的哥本哈根詮釋在某些方面有異曲同工之妙,因此,在本世紀初,有三位學者發表了一篇題為《作為貝葉斯概率的量子概率》的短論文【4】,探索一種量子力學的新詮釋。三人都是經驗豐富的量子信息理論專家,他們將量子理論與貝葉斯派的概率觀點結合起來,建立了「量子貝葉斯模型」,或簡稱為「量貝模型」(QBism)。
量貝模型與哥本哈根詮釋有關,但又有所不同。哥本哈根詮釋認為波函數是客觀存在,人為的「測量」干擾並破環了這個客觀存在,使得量子疊加態「塌縮」,從而造成悖論。量貝模型則認為波函數並非客觀實在,只是觀察者所使用的數學工具。波函數不存在,也就沒有什麼「量子疊加態」,如此便能避免詮釋所產生的悖論。
根據量子貝葉斯模型的詮釋,概率的發生並不是由物質的內在結構決定的,而是與觀察者對量子系統不確定性的置信度有關。他們將與概率有關的波函數定義為某種主觀信念,觀察者得到新的信息之後,根據貝葉斯定理的數學法則得到後驗概率,不斷地修正觀察者本人的主觀信念。
量貝模型認為:波函數是主觀的,但量子系統卻是獨立於觀察者而客觀存在的。每個觀察者使用不同測量技術,修正他們的主觀概率,對量子世界作出判定。在觀察者測量的過程中,真實的量子系統並不會發生奇怪的變化,變化的只是觀察者選定的波函數。對同樣的量子系統,不同觀察者可能得出全然不同的結論。觀察者彼此交流,修正各自的波函數來解釋新獲得的知識,於是,就逐步對該量子系統有了更全面的認識。這也是貝葉斯方法的思維方式。
根據量貝模型,盒子里的「薛定諤貓」並沒有處於什麼「既死又活」的恐怖狀態。但盒子外的觀察者對裡面的「貓態」認識不夠,不足以準確確定它的「死活」,便主觀想像它處於一種死活二者並存的疊加態,並使用波函數的數學工具來描述和更新觀察者自己的這種主觀信念。
舉一個通俗例子來說明此類主觀想像的「疊加態」。在2016年美國總統大選中,特朗普和希拉里都有「勝敗」的可能性,但結果難以預測。對某個特朗普的支持者而言,在不知道特朗普最後到底是「勝」還是「敗」之前,只能憑著他個人的主觀置信度來估計特朗普「勝敗」概率(比如52%:48%),這就像認為特朗普是處於某種「勝敗」並存的疊加態中。這種疊加態的概率分配是這個人主觀的,其他人可能會有不同概率分配的主觀疊加態。
量貝模型創建者希望能用概率論來重新構建量子力學的標準理論。這個目標尚未達成,結論如何,還需拭目以待。但貝葉斯方法為量子詮釋提供了一種新視角【5】。之後介紹機器學習時,還將更詳細討論貝葉斯方法,下一篇將著重介紹隨機過程。
參考文獻:
【1】維基百科:貝葉斯概率
https://zh.wikipedia.org/wiki/%E8%B4%9D%E5%8F%B6%E6%96%AF%E6%A6%82%E7%8E%87
【2】Edwin Thompson Jaynes. Probability Theory: The Logic of Science. Cambridge University Press, (2003).
【3】張天蓉. 走近量子糾纏系列之三:量子糾纏態[J]. 物理, 2014, 43(09): 627-630.
http://www.wuli.ac.cn/CN/abstract/abstract61515.shtml
【4】C. M. Caves, C. A. Fuchs and R. Schack, 「Quantum Probabilities as Bayesian Probabilities,」 Phys. Rev. A65, 022305 (2002).
【5】Hans Christian Von Baeyer,QBism: The Future of Quantum Physics,Harvard University Press,10/3/2016。
製版編輯:呂浩然丨
本頁刊發內容未經書面許可禁止轉載及使用
公眾號、報刊等轉載請聯繫授權
歡迎轉發朋友圈


※顧晉:因為我是個醫生
※三大技術對抗日光雜訊,量子衛星有望白天上崗 前沿
※蔡天新:記憶中和素數有關的人和事
※物理學家在絕對零度附近,觀察原子「戀愛」和分子「分手」漫畫
※汪星人可能起源自歐洲;肌肉力量與基因有關嗎? | 每周播報
TAG:知識分子 |
※量子力學的世界裡,概率就是一切!揭示原子的「波函數」
※說說微觀量子世界的基本概念
※科學家首次觀測到三維量子霍爾效應
※重大突破!復旦大學:首次觀測到三維量子霍爾效應!
※我國科學家首次觀測到三維量子霍爾效應
※為什麼量子力學要用概率波描述粒子?上帝真的擲骰子嗎?
※他從一個陀螺里,看到的天文、時空與量子理論
※量子物理學的深洞——波函數之謎
※科學家拍到首張量子糾纏圖像
※曹則賢:量子力學英雄譜
※通俗物理第1講:從牛頓到量子力學再到超弦理論,世界萬物都是波
※量子理論提出「宇宙起源」新模型
※「量子之父」潘建偉:中國量子信息科技有信心繼續領跑世界
※萬物源於量子比特?數學物理界「教皇」關於量子理論的深思
※專家:丁古巧帶您解讀如何批量化生產准零維石墨烯量子點
※潘建偉:歡迎來到量子世界
※量子學說與「唯心」觀點關係密切?愛因斯坦提出反駁觀點
※科技巨頭角逐「量子霸權」
※量子技術專題
※我國量子科學家率先觀察到宇稱時間對稱