List

與外部單位的合作,時常會讓我們有意想不到的收穫,以及擴張多樣性的思考空間。MSRA Outreach團隊將我們這兩年的合作成果發表在Microsoft Research的網誌上。

也感謝微軟亞洲研究院 (MSRA) 這十年來的持續支持,讓我們可以不斷探索前瞻技術的各種可能,並且有機會貢獻在微軟的產品上。

Hsu noted, “This idea was developed during our previous collaboration on XiaoIce with Ruihua Song, Principal Data and Applied Science Lead at MRSA, where we empowered a chatbot to compose modern Chinese poems for user-uploaded photos. We were very excited about how much more can be done in photo commenting for user-contributed fashion photos. In this work, we aim to create comments like a “netizen” would actually sound, which reflects the culture in the designated social community and fosters more engagement with the chatbot and between the users. We expect the results have application in social media, customer services, e-commerce, fashion mining, and other areas.”

“Diversity is one of the biggest challenges in text generation. This project not only designed brand-new diversity measurements, but also proposed a smart way of marrying topic models with neural networks to make up for the insufficiency of conventional image captioning,” said Song.

  Category: Industry

6 posts
June 9th, 2018

Collaborative Work Highlighted in Microsoft Research Blog

與外部單位的合作,時常會讓我們有意想不到的收穫,以及擴張多樣性的思考空間。MSRA Outreach團隊將我們這兩年的合作成果發表在Microsoft Research的網誌上。 也感謝微軟亞洲研究院 (MSRA) 這十年來的持續支持,讓我們可以不斷探索前瞻技術的各種可能,並且有機會貢獻在微軟的產品上。 Hsu noted, “This idea was developed during our previous collaboration on XiaoIce with Ruihua Song, […]

June 7th, 2018

First Place (#1) in Disguised Face Recognition in CVPR 2018

Feel proud that the team is ranked #1 (the First Place) in CVPR 2018 Disgusied Face Recognition! Our team just won […]

March 27th, 2018

Talk for GTC 2018 — Investigating Data Augmentation Strategies for Advancing Deep Learning Training

Data is vital for realizing machine leaning algorithms into industrial products — as sensing the strong feedbacks from the attendees […]

February 8th, 2018

開始就有機會—從無到有的深度學習影像產品開發—群暉Synology

    智能技術是泡沫嗎? 只在口沫中的就是。 智能技術最大的效用,就在提升效率,生產力、以及安全性。增益既有的產品價值,擴張新的銷售管道或是客戶。 過去一年與 Synology 群暉科技 合作的使用者照片物件、場景、人臉辨識技術已經正式deploy到群暉的NAS跟手機中。不限在具有GPU的硬體,因為辨識引擎也經過設計優化。 相關過程也在 二月六號的「TechNews科技新報」的專題報導「搞定關鍵模型,台灣NAS 廠商一年內將AI 導入商用」。 為什麼?照片管理功能對群暉還有他的客戶群是「剛需」,因為使用者相當大量的資料是照片。 『「很令人興奮的產學合作經驗,群暉在深度學習技術從無到有,甚至目前各項視覺辨識指標都達到世界級的水準。」』 這不是恭維,透過嚴謹的研究過程,更能掌握核心技術深度,還有產品化繁瑣細節,並逐漸擴充到其他受惠於智能技術的產品線。 不只是群暉,最近另一家台北的系統廠,也是從無到有,建立了即時人臉辨識的引擎,經過與某國際大廠PK之後,領導階層才意識到自己團隊這一年來建立的堅強實力;目前也在公司內部數千人的場域進行PoC,進行產品化。 『對欲導入視覺辨識等人工智慧技術的企業,徐宏民提出三點建議,首先是相信台灣具有相關領域世界級的技術研究能量;其次是確保高階主管對深度學習等技術的認可並願意投資;最後是將深度學習等技術放到產品藍圖,而非只是單純做研究。』  

February 6th, 2018

Public “NetiLook Dataset” for Netizen-Style Commenting on Fashion Photos

你能區分影像社群網站的留言是來自機器還是真實使用者嗎? 從對話機器人、或是我們之前參與的小冰寫詩,我們知道影像與自動文字描述的重要性。超越平鋪直述的影像文字敘述,過去兩年我們研究「鄉民式」的影像自動留言系統,針對流行服飾的社群網站。主要研究如何產生更生動、更多樣性的影像對話內容,結合影像以及文字的深度學習技術。我們發現如何量測「多樣性」、「新鮮感」都是個未探討的議題。 同樣地,我們樂於將先導性研究所採集的大型資料與全球的研究社群分享,也是目前唯一相關研究的資料集。所採集目前含有超過35萬張照片、一萬一千位使用者、五百萬留言的「NetiLook」資料集目前公開下載。 相關技術也將發表在頂尖會議 WWW 2018 (Cognitive Computing Track). 我們並發現,一般使用者很難區分機器產生或是使用者的留言。 Recently, image captioning has appeared promising, which is expected to […]

December 5th, 2017

深度卷積網路的產品開發經驗 (一) (Advancing Convolutional Neural Networks for Industrial Products – I)

In the past months, we are helping a Taipei-based leading Network Attached Storage (NAS) company, Synology, for realizing convolutional neural […]