List

It’s great that, collaborating with Microsoft Research Asia, our MS student Wen-Feng Cheng provides the technical cores for “image to poetry” for the live demo in the Microsoft chatbot “xiaoice“. It’s a whole new research experience for Cheng even though he delayed his graduation date due to committing more research efforts on this very challenging and exciting research. We feel grateful for Microsoft, Cheng, and MSRA folks for their amazing results. The work is also under review for a premier conference.

既然已經是公開的新聞,我們也可以分享。

微軟小冰【看圖造新詩】的核心技術 “Image to Poetry” 主要是實驗室的研究生( 鄭文峰 )在北京微軟研究院交換研究時完成的。為了持續改進這項技術,他毅然決定(碩士班)延後畢業,在服兵役前爭取更多研究的時間。

突破來自於敢與眾不同!

雖然 鄭文峰 跟他的其他同學而言,看起來是慢了。其實是超前了。

目前這項技術細節也在某個頂尖國際會議審查中。其中有趣的部份是如何逼近機器創造力的缺陷、考量圖片中的物件、情緒跟現代詩的產生過程,並自我檢測詩詞產生的品質及修正。

結果令人驚豔。

如果用四年前的標準來看,最近的技術進展,連我都會認為是造假的。但是又已經清楚的在各種實驗結果上重複呈現出來。

看到身邊的朋友們(研究人員、領先企業)正在如火如荼進行太多有趣、有影響性的研究、產品開發。何以有悲觀的理由?

”微軟終於揭開了小冰詩人的面紗。當然,這些詩歌並不是憑空產生的。人類的創作往往是一種被誘發的結果,也就是「有感而發」,小冰亦是如此,不過這裡的「有感」換成了「看圖」“

https://www.inside.com.tw/2017/05/17/microsift-ai

 

 

  Posts

1 2 3 4
July 25th, 2017

Our CVPR 2017 Paper Highlighted in NVIDIA Corporate Blog

July 24th, 2017

NVIDIA AI Lab Meetup in CVPR 2017 and new V100 GPUs

July 18th, 2017

Drone-View Object Localization/Counting and Public Vehicle Dataset (CARPK)

July 2nd, 2017

Publications vs. Industry Needs (發表學術論文跟產業脫節?)

June 9th, 2017

Team management, productivity, and appreciation

June 1st, 2017

Practical advises for embracing AI-savvy products (Hosting AI Forum in InnoVEX 2017)

May 24th, 2017

Image to Poetry — 看圖造新詩

May 15th, 2017

島內AI的隱形驅動力

前陣子協助 天下雜誌 副總編輯 Yi-Shan Chen 完成AI專輯 [AI全面啟動Ⅰ:科技島國的翻身契機]。 我在紐約,這段時間,Yi-Shan透過FB的訪談跟資料詢問,我感受到她的焦慮,急著摸清楚這個浪潮的來龍去脈,以及我們該做的、或是已經做到的。 初稿完成,正如Yi-Shan所說的,她不那麼悲觀了。或是說我們也沒有悲觀的權利。 我的觀察。 2016年初開始,國內幾家領先企業也開始注意到AI(深度學習)浪潮可能對公司的影響。已經開始研究如何在既有的核心業務上善用這些前瞻技術。 這不是將開源的類神經網路拿來使用就好、或是付費API可以全然解決。首先產品需要的偵測/辨識的項目跟benchmark資料完全不同、產品大部分是multi-label的問題而不是大家常討論的multi-class、訓練資料的取得跟缺乏、應用場域資料型態差異、學習model的參數過大、耗電、運算時間、或是在使用者端自動調適學習等。產品佈建跟論文討論的範疇有著相當大的差異。 領導者(執行長、董事長)的決心是最關鍵的問題。因為引進新的機器學習paradigm之後,牽涉到資源配置、薪資結構、產品pipeline(如使用者資料收集、AI引擎的更新)、新產品的定位等,需要很大的決心。 缺乏深度學習技術的研究人員是第二個問題。在協助幾個團隊之後發現,台灣的數理教育品質相對優良,理工科碩士論文要求對於前瞻的研究是很有幫助的。 在組織具有某些特質的工程師之後,透過適當的做中學、學中做的過程,還有我們十幾年在影像/視訊上成功跟失敗的經驗,是可以逐漸訓練出內部深度學習基本研發團隊、也能適性地將技術調整到適合的產品線上。 目前已經看到這樣的技術成果用在解決監控系統上常見的誤判的問題、照片標註、辨識、自動分類、edge端的精簡深度學習模型、或是利用各種感測器、攝影機進行未來事件預測等。甚至有些已經上線進行A/B test,交付給客戶的PoC、或是取代原本沒效率的人工分類等。 在這次的訪問當中,也將這幾個領先企業介紹給天下雜誌,但是因為公司內部的marketing跟財務時程,還不能公開披露目前的結果。 我們不選擇悲觀、抱怨、譏笑。許多團隊,也早就捲起袖子為企業帶來更具有競爭力的AI(深度學習)能力,開啟新的產品思維,如同全球企業忙著乘著巨浪向前。也感謝 天下雜誌 […]

May 10th, 2017

Quick and incomplete observations from GTC 2017

May 9th, 2017

2017 Microsoft Research Asia Collaborative Research Project Granted