『瀚思彼岸』» 智能家居技术论坛

标题: 利用ARM盒子实现Frigate人体识别指日可待！NPU重要性凸显！ [打印本页]

作者: twfjcn 时间: 2024-4-2 14:20
标题: 利用ARM盒子实现Frigate人体识别指日可待！NPU重要性凸显！
本帖最后由 twfjcn 于 2024-4-2 15:22 编辑

一直以来普通ARM盒子用户最大问题就是Frigate这些图像应用，因为用CPU解析简直就是噩梦！最近一些大神放出一些修改过的Frigate，支持调用NPU，效率很大提升，感觉普通ARM盒子看到了frigate曙光。
以RK3566为例:
[attach]57508[/attach]

这个表现提升还是非常大的，推理比一些X86小主机都要好。

[attach]57509[/attach]
利用加载项安装Frigate会爆满CPU,基本处于不可用状态的，利用NPU30%左右占用率，日常应用问题不大了。

PS:目前发现一些问题，识别有时候很快没延迟，有时候会有1s左右延迟，这个就等大神们解决了。

作者: ryanh7 时间: 2024-4-2 14:40
用x86大主机+显卡或神经网络计算棒就没这个问题了，不少计算还是使用CPU的，摄像头一多arm盒子怎么也扛不住。

作者: twfjcn 时间: 2024-4-2 14:40
用了一段时间，还是蛮稳定的。对于客厅开放性空间，用摄像头作为人体传感器比毫米波雷达好用，准确，还可以避免猫猫狗狗等干扰

作者: twfjcn 时间: 2024-4-2 14:42
本帖最后由 twfjcn 于 2024-4-2 14:46 编辑

ryanh7 发表于 2024-4-2 14:40
用x86大主机+显卡或神经网络计算棒就没这个问题了，不少计算还是使用CPU的，摄像头一多arm盒子怎么也扛不住 ...

目前两个，足够应付。关键好多人不需要这么大功耗和性能，可以降低成本。以前用CPU根本没法用

作者: 隔壁的王叔叔 时间: 2024-4-2 14:53

twfjcn 发表于 2024-4-2 14:42
目前两个，足够应付。关键好多人不需要这么大功耗和性能，可以降低成本。以前用CPU根本没法用 ...

用的哪个盒子？和哪个修改过的frigate呢？请大佬出个教程啊。

作者: yc0209 时间: 2024-4-2 15:07
不敢用几分钟就重启

作者: twfjcn 时间: 2024-4-2 15:09

隔壁的王叔叔发表于 2024-4-2 14:53
用的哪个盒子？和哪个修改过的frigate呢？请大佬出个教程啊。

green哪里有

作者: twfjcn 时间: 2024-4-2 15:11

yc0209 发表于 2024-4-2 15:07
不敢用几分钟就重启

没有啊，我用了大概半个月了，一切正常

作者: 隔壁的王叔叔 时间: 2024-4-2 15:11

twfjcn 发表于 2024-4-2 15:09
green哪里有

哦，green我没有，我在等大佬搞个可用用npu的黑豹。估计快了。

作者: DDDear 时间: 2024-4-2 16:01
detect fps可以设置为5，占用资源更低

作者: twfjcn 时间: 2024-4-2 16:13

DDDear 发表于 2024-4-2 16:01
detect fps可以设置为5，占用资源更低

是的，我是看到它最高可以达到15FPS
[attach]57514[/attach]

作者: wdmywm3 时间: 2024-4-2 17:19

我现在比较头疼的是，想用deepstack gpu版+doubletake做人脸识别，但是unraid应用市场里装好之后，哪怕直通了gpu，doubletake也完全不运作，只有改用cpu版本的deepstack才能运作人脸识别……现在干脆放弃了

作者: twfjcn 时间: 2024-4-2 21:00

wdmywm3 发表于 2024-4-2 17:19
我现在比较头疼的是，想用deepstack gpu版+doubletake做人脸识别，但是unraid应用市场里装好之后，哪怕直 ...

这个不是识别不准？

作者: wdmywm3 时间: 2024-4-2 21:07

twfjcn 发表于 2024-4-2 21:00
这个不是识别不准？

我在外网论坛上看人说，识别不准可能是训练用的图集不太好的缘故，最好是各个角度、且无背景的清晰人像拿去训练，还有有光和较黑两种情况
而frigate直接推送到double-take的监控截图，清晰度之类的全都不够，如果直接拿那些推送的监控截图来训练，识别起来准确率就会很低

作者: twfjcn 时间: 2024-4-3 08:04

wdmywm3 发表于 2024-4-2 21:07
我在外网论坛上看人说，识别不准可能是训练用的图集不太好的缘故，最好是各个角度、且无背景的清晰人像拿 ...

嗯，国内资料太少了

作者: zjhcr 时间: 2024-4-3 17:08
rk3588，8T算力，神一般的存在

作者: twfjcn 时间: 2024-4-3 22:20

zjhcr 发表于 2024-4-3 17:08
rk3588，8T算力，神一般的存在

10倍于RK3566,估计可以90帧

作者: kingwell 时间: 2024-4-5 23:28

zjhcr 发表于 2024-4-3 17:08
rk3588，8T算力，神一般的存在

我查到的是6T，有多个版本吗？

作者: kingwell 时间: 2024-4-5 23:40

twfjcn 发表于 2024-4-2 16:13
是的，我是看到它最高可以达到15FPS

哈喽，请问有教程吗？我搜到一篇，但是没看明白

作者: twfjcn 时间: 2024-4-6 12:03

kingwell 发表于 2024-4-5 23:40
哈喽，请问有教程吗？我搜到一篇，但是没看明白

主要在编译armbian吧

作者: 1uv_can 时间: 2024-4-7 19:57
大佬们，志强Gold 5120T 能用这个吗，这个是人脸识别吗？怎么用啊

作者: demacia 时间: 2024-4-7 20:40
现在就是拿frigate 做人在传感器用的person occupancy这个问题是延迟有点大。不知道为啥。

作者: twfjcn 时间: 2024-4-8 08:31

demacia 发表于 2024-4-7 20:40
现在就是拿frigate 做人在传感器用的person occupancy这个问题是延迟有点大。不知道为啥。 ...

识别1-2秒，客厅这种场景没啥问题。

作者: cookily 时间: 2024-4-10 16:52

学习了，准备试一下

作者: twfjcn 时间: 2024-4-10 20:20

cookily 发表于 2024-4-10 16:52
学习了，准备试一下

嗯，完全可以实用了。放在客厅识别人。省电刚刚的

作者: twfjcn 时间: 2024-5-6 11:38

cookily 发表于 2024-4-10 16:52
学习了，准备试一下

嗯，好的

作者: 三尺寒 时间: 2024-5-6 12:20
初步试了下，出现过一次把猫认成人，还有背对摄像头蹲下的时候和头部被遮住的时候都容易识别不出来

作者: twfjcn 时间: 2024-5-7 13:12

三尺寒发表于 2024-5-6 12:20
初步试了下，出现过一次把猫认成人，还有背对摄像头蹲下的时候和头部被遮住的时候都容易识别不出来 ...

哈哈，这个要训练。。。。

作者: 三尺寒 时间: 2024-5-12 11:16

twfjcn 发表于 2024-5-7 13:12
哈哈，这个要训练。。。。

咋训练啊，有教程吗

作者: hakushohzl 时间: 2024-10-23 17:10
我记得rk3566是不带npu的哈，具体的配置文件要怎么写呢？

作者: twfjcn 时间: 2024-10-24 11:40

hakushohzl 发表于 2024-10-23 17:10
我记得rk3566是不带npu的哈，具体的配置文件要怎么写呢？

[attach]64518[/attach]

详情看图。。。配置很简单改几个参数就好

作者: hakushohzl 时间: 2024-10-24 13:46

twfjcn 发表于 2024-10-24 11:40
详情看图。。。配置很简单改几个参数就好

求教程～

作者: twfjcn 时间: 2024-10-25 13:05

hakushohzl 发表于 2024-10-24 13:46
求教程～

看这：https://bbs.hassbian.com/thread-24404-1-1.html

作者: hakushohzl 时间: 2024-11-6 09:45

twfjcn 发表于 2024-10-25 13:05
看这：https://bbs.hassbian.com/thread-24404-1-1.html

我去，自编译系统的大佬啊……

作者: itispip 时间: 2025-2-22 00:24
和内存大小是否有关？

作者: gaga123 时间: 2025-8-4 17:03
rk3566怎么使用frigate跑起来，大佬有教程吗？

欢迎光临『瀚思彼岸』» 智能家居技术论坛 (https://bbs.hassbian.com/)