YOLO-v4目标检测、换脸、视频上色全部实时手机端实现,美国东北大学等提出全自动实时移动端AI框架
极市平台
共 6253字,需浏览 13分钟
·
2020-08-24 22:23
![](https://filescdn.proginn.com/89397eb2614350610527973921632503/a47875707fe9f323fec0a8861f8228e3.webp)
极市导读
来自美国东北大学等机构的研究者提出了一种全自动模式化稀疏度感知训练框架,助力深度神经网络在移动端“看得更清,跑得更快”。>>>极市七夕粉丝福利活动:炼丹师们,七夕这道算法题,你会解吗?
基于模式化稀疏度的剪枝方法能够使深度神经网络在图像识别任务中「看得」更清楚,同时减小了模型尺寸,使模型在移动端「跑得」更快,实现实时推理。
由美国东北大学王言治教授研究团队与美国威廉玛丽学院任彬教授研究团队共同提出,IBM、清华等共同研究的模式化稀疏度感知训练框架,不仅能够同时实现卷积核稀疏模式的全自动提取、模式化稀疏度的自动选择与模型训练,还证明了所提取的模式化稀疏度与理论最佳模式化稀疏度相匹配,并进一步设计了能够利用模型特点实现编译器优化的移动端推理框架,实现了大规模深度神经网络在手机移动端上的实时推理。目前,这篇文章已被 ECCV 2020 会议收录,该文章同时入选 ECCV 2020 demonstration track。
目前,这项技术已经广泛应用在多种类型的人工智能(AI)任务中,包括但不限于:Yolo-v4 目标检测、实时相机风格迁移、AI 实时换脸、相机超分辨率拍摄、视频实时上色等,并且成功落地。以上任务全部在手机端上实现。
![](https://filescdn.proginn.com/cd035a2a641b122f4823db73dad182cf/3d1d25146441a13817724ee1e1a697e1.webp)
![](https://filescdn.proginn.com/0b54ddef684e2a731b910a261e77a9ac/0da9da82866370b37babccfb95c634bb.webp)
官方网站:https://www.cocopie.ai/
B 站:https://space.bilibili.com/573588276
![](https://filescdn.proginn.com/6dbd32814fe2fb21f7d85126ff0136b0/bfd8715e3ed3cb737f4297034c85e4e0.webp)
![](https://filescdn.proginn.com/3a6000292e196039e08bce24070888b5/ce10e61257847795c587df60dbef25d5.webp)
![](https://filescdn.proginn.com/45ddb88483641220ba6fe8371a6975b6/a02f973ab04ea20ecbd25108b7525888.webp)
理论层面
![](https://filescdn.proginn.com/47de25a6f2bccd4d9042cae6d857925a/ab9e8b83aa816f7380a1a80d92abdebe.webp)
![](https://filescdn.proginn.com/c4b5136af274d587ee2291bf6efa43ef/010322c3df073f15bb408d0feccb2b1a.webp)
算法实现层面
移动端硬件与编译器优化层面
![](https://filescdn.proginn.com/5152e81b94eb9b79fdfdcc72ef67bd80/5afad7b13a20d91d69f56dd3e8203a74.webp)
实验结果
![](https://filescdn.proginn.com/c5517ed418ed4eeaafb5f3b6274d7f06/3762713816e950e6cbe1d420ac4965d7.webp)
![](https://filescdn.proginn.com/63c93b6224d3e46af34e5ae1eece8fd2/8db064f7ac141d3290f4f91e99f2f704.webp)
![](https://filescdn.proginn.com/ea09af21bf057a72f4e8acd181fac9af/41e992d230ca5796c7bfdadb1b41abb5.webp)
![](https://filescdn.proginn.com/7f820e28f995778f6ec2ca00ba5959eb/519ec7d10d2c40247d4637a252ac68b5.webp)
![](https://filescdn.proginn.com/d4b16c1da34ea53090193c112e9774ba/ebc814d9fbf400ec583b4f731b046270.webp)
![](https://filescdn.proginn.com/2609090305a63209f96107e6196350b7/6098badac284de202ec322516edfebc8.webp)
![](https://filescdn.proginn.com/151f4490f76ca912fb01c405706b888e/2278214403bf01d5c7ee730ed17e8b19.webp)
推荐阅读
![](https://filescdn.proginn.com/16cd435158b96c05e788bbbb90708eef/efbf94463fccc68b8e9a7dc28f85c801.webp)
评论
JeeSite4 Mobile Uni-AppJeeSite 手机端框架/移动端框架
JeeSite Mobile Uni-App 是 JeeSite 手机端框架/移动端框架,基于 un
JeeSite4 Mobile Uni-AppJeeSite 手机端框架/移动端框架
0