List

 

無人機大量物件偵測與計算以及公開資料集

 

Along with the acceptance of ICCV 2017, we are happy to announce the first drone-based object (e.g., vehicle) counting dataset available for public use. The Car Parking Lot Dataset (CARPK) contains nearly 90,000 cars and annotations from 4 different parking lots collected by drones (PHANTOM 3 PROFESSIONAL) at approximate 40 meters height.

For leveraging drones for productive object localization and counting, we address the first few object counting problem by leveraging spatial layout information (e.g., cars often park regularly) and introducing the spatially regularized constraints into the neural networks for improving the localization accuracy. We show the proposed method outperforming strong baselines such as YOLO, Faster RCNN, etc., in terms of localization recall and counting accuracy.

We acknowledge the multi-year project supports from MediaTek and the DGX-1 supercomputer and grants from NVIDIA.

為了善用無人機在交通、管理、安全上的應用,我們首次成功設計無人機視角的(大量)物件計算以及偵測演算法,並利用了重複物件之間的位置相關性來設計新的卷積網路。為了驗證這個嶄新的應用,我們標註了將近九萬個的車輛物件,為目前唯一支持相關研究的資料集,並且公開讓研究社群使用。我們提出數種效能評估方式,並與其他的物件偵測演算法比較(例如: faster R-CNN, YOLO 等)。提出的方法都顯現出優異的效能。我們也希望研究社群,可以本於此研究以及資料集,繼續發覺無人機的優異效能。

我們得感謝聯發科 MediaTek 這幾年來大聯盟計畫上實質的協助跟研究方向的支持;也感謝 NVIDIA在研究經費以及GPU設備上的大力相助。

Demo video:

[1] CARPK dataset: https://lafi.github.io/LPN/

[2] Meng-Ru Hsieh, Yenliang Lin, Winston H. Hsu. Drone-based Object Counting by Spatially Regularized Regional Proposal Networks. ICCV 2017. (PDF)

  Posts

1 2 3 6
June 7th, 2018

First Place (#1) in Disguised Face Recognition in CVPR 2018

January 6th, 2019

意想不到的科技部「AI投資潛力獎第一名」

December 16th, 2018

Keep Recruiting for Machine Learning Research Partners for Numerous Visual Sensors

December 16th, 2018

FutureTech Demo and Breakthrough Award (未來科技突破獎)

October 12th, 2018

結合虛與實的試鞋生成網路 (Virtual Try-On Shoe with Generative Neural Networks)

我們都有這樣的困擾,在電子購物的時候,看到一雙好看的鞋子,想買。但是卻又拿不定主意自己穿起來好看嗎?或是搭配某件褲子適合嗎?怎麼讓網路虛擬商城的鞋子,可以有效試在自己的腳上呢? 這個工作的挑戰在於如何使用單張鞋子商品的照片,很自然的合成在使用者的腳上,而且腳可能會有各種姿勢、角度。如何客服這個問題? 很高興大學部專題生(EE) 周晁德 完成了這個 PIVTONS 的虛擬鞋子試穿生成網路,試著解決這個困擾大家很久的問題。 這個有趣的工作也將於十二月初,在澳洲珀斯舉辦 Asian Conference on Computer Vision (ACCV) 2018 以大會演說 (Oral) 的方式跟大家分享這個工作。接下來全新的測試資料集將會公開讓大家使用,如果可以的話,我們也將試試看將整個試穿生成系統上線,讓大家體驗虛擬試鞋的樂趣 — 可以多試穿,多省錢。 我們鼓勵high-risk的研究工作。令人慶幸的是,這工作的發想、資料收集都是專題生獨立完成。當然在過程當中遇到很多GAN生成的問題,網路設計、訓練的問題,幾乎放棄了,還好團隊成員一起想辦法解決,關關難過,關關過(甚至免費擔任model),讓這個兼具技術深度以及商業價值的系統,可以順利完成。 我們也一直努力,讓智能生成(或是辨識)系統,賦予更有意義的應用 […]

September 13th, 2018

Finalist (Top 3) in 2018 IEEE Signal Processing Society Video and Image Processing (VIP) Cup

July 29th, 2018

信手拈來的3D模型搜尋 (Cross-View and Cross-Domain 3D Model Search)

July 27th, 2018

低解析人臉辨識跟解析度放大 (Very Low-Resolution Face Hallucination and Recognition)

June 18th, 2018

Winning Third Place in CVPR 2018 Video Recognition Challenge — Moments in Time

June 13th, 2018

[Video Report] National Investment for the GPU Supercomputer?

June 9th, 2018

Amazing Crowd Size and Positive Feedbacks in the Deep Learning Lecture for GTC 2018 Taipei