英國皇家學會院士樊文飛提出2個新理論: - 工程師

Tristan Cohan avatar
By Tristan Cohan
at 2019-09-20T09:23

Table of Contents

英國皇家學會院士樊文飛提出2個新理論:把大數據變小,突破企業資源限制

http://bit.ly/2mpT9oy

目前AI是否過熱需要冷思考,或是AI新創公司快要彈盡援絕了呢?

最近,英國皇家學會(FRS)院士樊文飛(Wenfei Fan)也是愛丁堡大學主任教授,接受『MIT 科技評論』雜誌訪問,提出把大數據變小,突破企業資源限制的看法,表示:

1.「AI 目前可以幫助我們發現一些關聯關係,提高生產效率。要使 AI 進一步發揮潛力,就需要提高基礎計算引擎的效率。」

2.「大數據是 AI 的基礎。由於大數據計算的困難性,傳統的經典計算理論已經不能夠解決大數據的問題,需要新的理論和切實可行的技術」。

3.「計算機研究的核心是理論和系統。」

樊文飛是國際學術界公認的在「資料庫理論與系統領域都做出突破性貢獻的極少數學者之一」。他是資料庫領域獲得國際資料庫理論與系統四大頂級會議的最佳論文獎或十年最佳論文獎(SIGMOD 2017,PODS 2015 & 2010,VLDB2010, ICDE 2007)。

他認為:「計算機研究的核心是理論和系統。」
人工智慧的背後代價和成本,不是一般的企業所能承受的。能否藉由理論的突破到系統的落地,來解決大多數企業因資源受限而無力進行大數據分析的現實問題。也就是說,通過『把大數據變小』,做到企業無論大小都能享受大數據分析的利益。

於是,他的團隊提出了兩個研究理論:有界計算理論(bounded evaluation)及數據驅動的近似計算(data-driven approximation)理論。」

有界計算理論(bounded evaluation)
所謂”有界計算理論”研究,基本思想是給定一個函數 F(x),參數 x 代表大數據集,然而,多數計算不需要訪問全部的 x,而是只需要取 x 的一小部分就能得到 F(x)的精確解。也就是如何根據不同的函數 F,根據語義找到所需的 x 的那一小部分。

舉例來說,大企業通過測試發現,在數十億條數據的實時查詢場景下,91% 的查詢可以用有界計算來解決;並在 70% 以上的查詢中,查詢效率提升 25 倍到 14 萬倍。剩餘 9% 不具備有界計算條件的查詢,可以通過數據驅動的近似計算理論來解決。

數據驅動的近似計算(data-driven approximation)理論
根據用戶的查詢,在數據的層次表述中動態找到所需的數據,並在有限資源下計算查詢的近似解。其特點是保證精確度,即對每個精確解,都找到一個對應的近似解使得二者之間的誤差在一定範圍內,同時每個近似解都對應一個誤差範圍內的精確解。目前,國際上還沒有查詢系統能做到這一點。

舉例來說,「在北京找一個離藝術館比較近的、價格低於 500 元的旅館,在資源有限的情況下只能查看一百條數據。但找出一個近似的結果,可能旅館是 520 元,距離美術館比較近的旅館。」

他的第一團隊「數據征服者」簡稱「CoD」
正在做「把大數據變小」這個理論的產業化落地,這個系統將有界計算和數據驅動的近似計算疊加,突破性解決大數據計算問題。該系統預計明年(2020) 將在 CNCC 大會展示區展出其系統原型。

他的第二團隊「GRAPE」
基於兩個理論研究以提升大規模圖數據計算效率,從 2016 年開始,樊文飛著手研究並提出了兩個理論:一個是基於不動點計算的單機圖算法自動並行化的程序設計模型,另一個是同步/異步自適應並發計算模型。這些理論可以降低並行圖計算程序設計的門檻,保證計算正確性,同時可以大幅提升效率。這些工作獲得了包括 SIGMOD 和 VLDB 這些行業頂級會議上的三個獎項。

該GRAPE系統,已於 2018 年 3 月 5 日在中國設立公司,後由一家網際網路巨頭所收購,將建立一個GRAPE開源社區及打造成為一個中國的國際 IT 軟體品牌。

--

All Comments

Blanche avatar
By Blanche
at 2019-09-24T03:47
small data
Ida avatar
By Ida
at 2019-09-25T22:30
edge computing
Oscar avatar
By Oscar
at 2019-09-28T13:21
Micro Data

華為員工爆料本月將大裁6000人?

Oliver avatar
By Oliver
at 2019-09-20T09:14
其實眼看美國沒有在打壓小米 沒有人在打壓其他中國科技公司 哪怕其他過來公司也有在哄偷騙搶的 為什麼只有華為? 一個高中畢業開科技公司 錢這樣燒下去 誰沒有OS:這不是一家中國企業 這是一家中共企業 要打開這個死結 華為只能上市 讓股權架構透明化 還有讓過半數的股權在市場流通 才能除掉疑慮 當然 以上的廢 ...

蔡明介:應鼓勵學生讀數學物理 不是只當

Damian avatar
By Damian
at 2019-09-20T06:20
蔡明介:應鼓勵學生讀數學物理 不是只當網紅就好 2019-9-19 20:14 IC設計大廠聯發科於19日首度開放外界參觀新啟用的無線通訊研發大樓與附設幼兒園,並 讓5G系統單晶片(SoC)亮相。聯發科董事長蔡明介表示,該公司除了有機成長,併購也 是重要的策略選項之一,未來併購範圍將不僅於無線通訊領域。 ...

園區工作不爆肝…竹科拍片吸年輕人

Kelly avatar
By Kelly
at 2019-09-20T05:41
上一篇新聞的「變老了!年輕人不愛來 竹科員工平均年齡增為37.6歲」 , 多數慣老闆根本不要人才只要奴才,科技業早已不是首選,傳產才是王道, 只能說要從事賺錢的科技業很多會選擇到對岸去,一樣是奴才那就當有錢的 奴才。 ※ 引述《orz44444 (人類總是被集體意識操控~)》之銘言: : https:/ ...

園區工作不爆肝…竹科拍片吸年輕人

Michael avatar
By Michael
at 2019-09-20T02:48
https://udn.com/news/story/7269/4056129 2019-09-19 14:15 聯合晚報 記者潘乃欣/台北報導 台灣三大科學園區今年上半年創造12兆元營業額,是科技業發展重鎮。但主計處107年統 計,三園區缺工總數高達6536人,竹科缺工數最高,其次為中科。 為吸引多年 ...

offer 請益

Caroline avatar
By Caroline
at 2019-09-20T00:07
替朋友代po, 各位大大好,中字理工碩畢後目前拿到這兩個offer,想請各位科技大老評估未來發展和工作 內容。 仁寶 台積 薪資 43k*15 45k*14 +分紅 職務 ...