资讯
论坛
词条
众包
招聘
商城
下载
问答
博客
工程师家园
帮助
搜索
登录
立即注册
一牛网论坛
一流研发工程师学习交流分享电子技术的论坛!
工作时间
周一到周五 9:00-11:30 13:30-19:30
热线电话
19168984579
论坛客服
QQ:
2064607811
微信:
19168984579
商城客服
QQ:
1911822682
微信:
18924675756
手机|智能终端
MTK/联发科
高通平台
紫光展锐
瑞芯微RK
全志平台
SigmaStar/Mstar
海思平台
匠芯创
联咏科技
珠海海奇
国科微
翱捷ASR平台
其它平台
维修论坛
通讯|射频技术
射频技术
5G技术
天线技术论坛
红外技术论坛
美格智能
移远通信
鼎桥通信
瑞识科技
射频IC库
卫星通讯&定位
蓝牙
wifi
NB-IoT
通讯技术
微波&雷达技术
NFC
USB技术论坛
RFID
ZigBee
Lora
433
对讲技术
有线通讯与控制
通讯协议
开元通讯
激光
嵌入式
鸿蒙OS论坛
Freescale论坛
xmos
开阳半导体
基合半导体
平头哥半导体
富士康半导体
紫光同创
暖芯迦
Marvell
树莓派
翼辉OS论坛
UCOS技术论坛
VxWorks论坛
君正论坛
瑞昱论坛
亿智论坛
齐感论坛
Amlogic论坛
龙芯论坛
FlyThings
炬芯论坛
nxp论坛
乐鑫论坛
OpenWRT
arm开发
linux
keil技术论坛
FPGA
DSP
LVGL
PLC
Python
乐升半导体
其他
单片机
ST技术论坛
IC设计
兆易创新/GD单片机
PWM技术论坛
Arduino技术论坛
伟诠电子
国民技术
芯科|silicon labs
英飞凌|Infineon
51单片机
新唐单片机
TI技术论坛
赛元微单片机
单片机C语言
ATMEL单片机
西门子单片机
华大单片机
Intel单片机
Freescale单片机
Thomson单片机
ADI单片机
Microchip单片机
武汉新芯
瑞盟
单片机基础
航顺单片机
CPLD
灵动微单片机
美信技术论坛
人工智能AI论坛
自动驾驶
元宇宙
神经网络
NLP
机器学习
算法
智能机器人
AR/VR
NVIDIA|英伟达
版块导航
forumnav
论坛
一牛网电子研发工程师交流论坛
芯片词条
MTK/高通/海思/瑞芯微/全志/展讯/射频/蓝牙/单片机/WIFI/电源/晶晨/瑞昱等系列芯片
开发板/模块
MTK/海思/全志/瑞芯微/蓝牙/高通等系列开发板/核心板
摄像头
摄像头模块
问答
整合一牛网论坛所有电子工程师开发问题
直播预告
屏/TP
原厂合作入口
机械防抖摄像头
18-30倍可变焦模组
5G相关方案定制
T31/T40方案定制
全志方案定制
展讯4G/5G方案定制
Ai硬件方案
PD超级快充方案
MTK4G/5G方案
wifi/cpe相关方案
RK相关方案
摄像头和测温模块
FPGA高清视频方案
高通方案
显示屏方案
AMLOGIC相关方案
高精度定位模组
联咏相关方案
一牛网
»
论坛
›
物联网应用
›
无人机专区
›
基于机载计算机的无人机智能巡检方案
查看:
1102
|
回复:
3
[无人机资料]
基于机载计算机的无人机智能巡检方案
ppppppppp
当前离线
积分
8468
ppppppppp
已绑定手机
发表于 2022-7-23 14:31:24
|
显示全部楼层
|
阅读模式
来自
广东省深圳市
摘要:随着无人机飞行制造技术的不断发展,传统人力巡检在一些领域已逐渐被无人机巡检所取代,相关领域已涉及到森林虫害、电力巡检、工地安全、渔政执法等;针对目前无人机巡检中对巡检目标的实时检测、结果的实时传输以及巡检飞行的智能操控需求,设计了一种基于机载计算机的无人机智能巡检方案;通过机载计算机取代传统方案的移动图形工作站,并结合轻量化网络对检测模型进行轻量化改进,实现无人机检测端直接进行边缘计算;然后通过优化机载端与APP的传输方案以及设计云端远程巡检控制方案,实现无人机的机载端实时自动回传检测结果,并上传至云平台;实验表明,该方案无需移动端复杂操控,可实现远程下发巡检任务指令并实时接收检测结果,达到远端人员可快速精准响应的目的。
无人机巡检是近几年才发展起来的新型技术,它融合了航空、遥感、电子、通信等多项高端技术。其中四旋翼无人机具有强灵活性、低功耗和低成本等优点,这使得其相关的应用领域已涉及到森林虫害检测、电力巡检、工地安全管理、渔政执法、露天矿场检测等。这些场景的存在着区域大、环境复杂和人力巡检作业成本高的特点。无人机巡检作业不仅弥补人工巡检安全不足、成本高等问题,而且由于其可携带多种传感器和相机镜头,使得无人机巡检方式在场景适配性和功能应用性上表现突出。
文献【4-5】基于地面移动图形工作站设计了无人机森林虫害检测系统,通过无人机遥控器控制无人机拍摄森林航拍图像,图像经过图传通道回传至遥控器端,再转发给地面服务器,最后运行图像目标检测算法得到检测结果。方案中检测系统由于需要人工控制拍摄森林图像,所以智能性较差,不具备实时性巡检的条件,且地面的移动图像工作站携带较为不方便。李宁等将无人机巡检应用到输电线路缺陷检测中,通过图传通信模块、地面工作终端完成无人机视频的传输和检测。该方案的特点在于通过射频信号回传无人机相机视频流到地面服务器,但是在无人机巡检飞行中,考虑到无人机的远距离高空飞行状况以及云台相机视频分辨率较大的问题,所以很难维持长时间稳定的、实时的视频流目标检测。
上述方案可知,以地面站服务器作为巡检方案的检测单元时存在着下面3个问题∶
1)检测输入为航拍图像时∶航拍图像需要人工筛选拍摄,而当检测目标不明显时可能造成遗漏,且此种方案无法达到智能化、自动化的巡检任务要求。
2)检测输入为相机视频流时∶在目前无人机视频流导出至地面服务器的传输方案中,接收输入容易出现中断、失真和延迟,故无法保证实时、稳定的视频目标检测。
3)地面站服务器在巡检过程中携带、安装不方便。故研究人员开始研究将检测单元转移至无人机端的巡检方案,即基于无人机板载平台来设计巡检方案。焦振田"采用了无人机端搭载机载计算机来设计用于森林防火的无人机安全检测系统,方案中机载计算机可以直接获取无人机相机视频流的进行检测识别,相比于地面工作站方案使得无人机端直接具备了边缘计算的能力,但是一方面机载端检测算法采用的是YOLOv3-Tiny,检测精度差,无法满足巡检边缘计算的要求。另一方面检测结果的回传困难,未实现完整一体化、实时的边缘计算结果的接收,同时整个系统在巡检的智能操控上仍需改进。
针对上述方案存在的问题,本文设计了一种基于机载计算机的无人机智能巡检方案。该方案结合大疆SDKDI (Software Development Kit)设计了机载计算机和无人机APP的操作控制程序,可实现完整一体化的边缘计算结果地面端和云平台端双重实时接收,且巡检操作设计简单灵活。机载端为保证实时的检测计算,借助轻量化模型来提升检测算法的计算速度。另外设计了远程云平台端的巡检操控和可视化方案,实现多端控制的同时,提升了远程监控人员的巡检决策和精准响应的能力。
1、无人机智能巡检方案
1.1 总体方案设计
如图1是以建筑工地工人安全帽佩戴检测场景为例,演示无人机智能巡检方案工作模式的示意图。用户在云平台或者移动终端设置好巡检任务指令,然后搭载机载计算机、云台相机和其他传感器的无人机接收并解析巡检任务指令,开始按照设置的巡航路线和飞行参数进行巡检作业。机载计算机在巡检飞行中读取云台相机的视频流,并运行相应的安全帽检测算法进行检测,分析得到的检测结果实时压缩回传至移动终端,APP接收后自动将检测结果和相应的状态信息打包上传至云平台。远程监控人员登录云平台后可实时查看检测结果和地图组件上标注的检测位置,做到及时精准的安全响应。
当遇到飞行环境不好或者检测的巡航路线设置错误等特殊情况,移动终端可以控制暂停或结束巡检作业,此时无人端也相应停止检测任务,用户可在检查情况安全后重新设置巡航检测命令或者切换至手动操纵模式。
1.2 硬件平台搭建
1.2.1 无人机平台
方案中无人机模块采用的是大疆公司的DJIMatrice210
RTK
V2(简称M210RTKV2)。该无人机属于经纬
M200
V2系列飞行平台,其设计紧凑,扩展灵活且飞行性能显著优化,可携带下置双云台或上置单云台。强大的负载携带能力和传感器扩展能力使得它能被DIY适用于多种无人机巡检飞行任务。实物图如图2。
1.2.2 机载计算机
方案中机载计算机采用的是大疆公司的妙算Manifold 2-G。该计算平台是一款专为
智能机
器打造的高性能机载计算机,具备卓越的处理能力和响应速度,扩展灵活,适配多款大疆飞行平台和飞控系统。Manifold 2-G的处理器是NVIDIA Jetson TX2,其配备NVIDIA Pascal GPU和8G内存,性能强大,外形小巧,节能高效。作为板载处理器,拥有专门与无人机固定的安装支架,保证高空飞行时的安全稳定。
1.3 检测信息的传输方案设计
检测信息的传输指将机载计算机的检测结果和无人机的状态信息实时回传至移动终端和云平台。方案的核心首先是实现整个巡检系统检测信息的实时传输,如图4是方案的检测信息传输流程图。
机载计算机运行安全帽检测算法得到检测结果后,分类筛选出未佩戴安全帽的结果。然后筛选的结果图片采用Jpeg压缩机制压缩为图像码流,机载计算机按照自定义的协议再分段缓存发送给APP,同时APP还会接收无人机状态信息。地面端的APP接收后从图像码流中解压缩恢复出检测结果,一方面将检测信息进行本地备份,用于现场查看;另一方面将信息重新打包后通过Http协议发送给云平台, 用于远端监控人员查看。
1.3.1 回传协议与检错机制设计
方案检测结果图片回传链路采用的是无人机的机载计算机和APP的通信链路。考虑到无人机远距离高空巡检环境,局域网的方式无法保证检测图片回传通信的稳定传输,而机载计算机与APP的通信链路嵌在遥控器与无人机的通信链路中,故远距离图传较为稳定,但方案中采用的硬件提供的图传带宽较窄。为了能够准确、实时的传输检测结果,分别设计了传输协议和APP的检错接收机制。
如表1是检测结果从机载计算机端到APP的回传协议,考虑到检测结果压缩后的码流数据量仍远大于通道带宽,无法一次发完,所以缓存多次发送。单次发送的数据段包括开始标志位、有效数据、检错标志位和结束标志位。有效数据的数据量依据实际带宽而调整,检错标志位用于APP端检测当次接收的数据段。
更多详细内容请下载附件查看
游客,如果您要查看本帖隐藏内容请
回复
技术词条:
智能巡检
,
无人机
点击查看更多芯片型号
相关帖子
•
高通推出无人机平台 Qucalcomm Flight, 大家怎么看?
•
谷歌回国!发布无人机送货,元方你怎么看
•
深圳雷柏集团旗下零度无人机招聘layout工程师
•
5G能干什么?高通:连接万物
•
四旋翼飞行器设计的稀有资料
•
富士康欲收购夏普,小米无人机
•
【急】无人机研发公司招聘多个技术岗位(一牛网代招)
•
无人机飞控盒测试系统的设计
•
美国推出无人机网上登记服务:网站被“挤”崩溃
•
移动芯片厂商下一个目标:商用无人机
回复
举报
窝窝头的刘胖胖
当前离线
积分
213
窝窝头的刘胖胖
已绑定手机
发表于 2022-10-13 14:29:59
|
显示全部楼层
来自
浙江省嘉兴市
感谢,正好要用上NVIDIA Jetson
回复
顶
踩
举报
kk019
当前离线
积分
6
kk019
已绑定手机
发表于 2023-9-18 09:52:02
|
显示全部楼层
来自
江苏省苏州市
为了看东西只能注册也不知有没有用
回复
顶
踩
举报
babyld
当前离线
积分
225
babyld
已绑定手机
发表于 2023-10-20 15:49:39
|
显示全部楼层
来自
江苏省南京市
感谢分享66666666666666666
回复
顶
踩
举报
返回列表
发布新帖
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
使用Markdown编辑器编辑
使用富文本编辑器编辑
回帖后跳转到最后一页
关于我们
关于我们
加入我们
新闻动态
联系我们
服务支持
官方商城
隐私声明
常见问题
论坛总则
合作/建议
TEL: 19168984579
工作时间:
周一到周五 9:00-11:30 13:30-19:30
扫一扫关注公众号
扫一扫打开小程序
Copyright © 2013-2024
一牛网
版权所有
All Rights Reserved.
帮助中心
|
隐私声明
|
联系我们
|
手机版
|
粤ICP备13053961号
|
营业执照
|
EDI证
发布新帖
我的帖子
110520000元
项目累计金额
3911个
对接项目数量
接项目
发需求
最新回复
展讯SC9863A硬件设计指南
展讯SC9832A原理图参考
SC8825 & SC2712的开发资料和设计文件
RDA8955G/L,RDA6625硬件资料(datasheet,参考设计,原理图,PCB LAYOUT等)
展讯SC2721G数据手册/datasheet
全志T3 sys_partition.fex分区表说明书
最新热帖
MTK/联发科MT6877(天玑900)MTK5G芯片规格书/datasheet
QXDM 4 破解版下载
RK3588S数据手册Datasheet、Tablet Demo原理图&PCB
紫光展锐Simba_R8.22.2953工具下载
Rockchip RK3588 TRM资料, Rock5B和官方Toybrick-RK3588x原理图
UNISOC UDX710 1.35GHz Cortex-A55内核嵌入式5G通信处理器datasheet
热门博客
更多
DAC8228FPZ
DAC8222 双通道12位双缓冲乘法CMOS D/A转换器
DAC8426AR/883C 特性
QPA2640T 20-40 GHz 8瓦GaN放大器
QPB0220N 2-18 GHz宽带GaN SSPA 中文资料规格书PDF数据手册引脚图图片价格参数功能特
KMFN60012M-B21规格书
登录
注册
手机|智能终端
(143)
MTK/联发科
(38)
MTK硬件
MTK软件
MTK工具
高通平台
(25)
高通硬件
高通软件
高通工具
紫光展锐
(30)
RDA平台
硬件资料
软件资料
工具下载
瑞芯微RK
(23)
全志平台
(11)
全志A系列
全志D系列
全志B系列
全志F系列
全志H系列
全志R系列
全志V系列
全志T系列
全志VR系列
全志工具
全志X系列
SigmaStar/Mstar
(2)
海思平台
(5)
匠芯创
联咏科技
(1)
SoC
显示驱动
珠海海奇
国科微
(3)
翱捷ASR平台
其它平台
(2)
其它平台软件
(1)
其它平台硬件
(1)
维修论坛
(3)
手机刷机包
苹果APPLE
三星SAMSUNG
其他品牌
维修经验交流
通讯|射频技术
(21)
射频技术
(10)
5G技术
(2)
5G技术分享
5G应用/产品
5G规划/政策
天线技术论坛
(2)
红外技术论坛
美格智能
移远通信
鼎桥通信
瑞识科技
射频IC库
(1)
卫星通讯&定位
蓝牙
(2)
NORDIC技术论坛
上海博通
盛芯微
恒玄科技
汇顶科技|GOODIX
其他
富芮坤|FREQCHIP
伦茨科技
wifi
(4)
NB-IoT
通讯技术
微波&雷达技术
NFC
USB技术论坛
RFID
ZigBee
Lora
433
对讲技术
有线通讯与控制
通讯协议
开元通讯
激光
嵌入式
(27)
鸿蒙OS论坛
Freescale论坛
xmos
开阳半导体
基合半导体
(2)
平头哥半导体
富士康半导体
紫光同创
暖芯迦
Marvell
树莓派
翼辉OS论坛
UCOS技术论坛
VxWorks论坛
君正论坛
(3)
瑞昱论坛
(11)
亿智论坛
齐感论坛
Amlogic论坛
龙芯论坛
FlyThings
炬芯论坛
nxp论坛
乐鑫论坛
OpenWRT
(4)
arm开发
(1)
linux
keil技术论坛
FPGA
(1)
DSP
LVGL
(1)
PLC
(3)
Python
乐升半导体
其他
(1)
单片机
(5)
ST技术论坛
(3)
意法半导体STM
意法半导体STL
ST意法半导体
IC设计
兆易创新/GD单片机
PWM技术论坛
Arduino技术论坛
伟诠电子
国民技术
芯科|silicon labs
英飞凌|Infineon
(1)
51单片机
新唐单片机
TI技术论坛
(1)
赛元微单片机
单片机C语言
ATMEL单片机
ATmega8系列
ATmega16系列
AVR系列
AT系列
西门子单片机
华大单片机
Intel单片机
Freescale单片机
Thomson单片机
ADI单片机
Microchip单片机
武汉新芯
瑞盟
单片机基础
航顺单片机
CPLD
灵动微单片机
美信技术论坛
人工智能AI论坛
(3)
自动驾驶
元宇宙
神经网络
NLP
机器学习
算法
智能机器人
(3)
AR/VR
NVIDIA|英伟达
显示屏|触摸屏
(1)
Quanta|广达
SVA|上广电
BOE|京东方
AUO|友达光电
SAMSUNG|三星电子
CMO|奇美电子
gooddisplay|大连佳显
newvision|新相微电子
analogix|硅谷数模
sharp|夏普
lnnoLux|群创光电
天马
Eink|元太科技
GOODiX|汇顶科技
Sitronix|矽创电子
ILItek|奕力科技
LG
Atmel
永嘉微电
HOLTEK|合泰
视涯技术
格科微
SOLOMON SYSTECH
RENESAS|瑞萨
Himax|奇景光电
(1)
FocalTech|敦泰
JDI
旭曜科技
墨水屏
龙讯
联阳
Capstone|瑞奇达
Algoltek安格
显示控制
段码|点阵
其他
物联网应用
(1)
医疗电子
(1)
智能家居
无人机专区
智能产品
智能车专区
智能硬件
智能软件
工业设计
其他
Camera|视频技术
(14)
Camera摄像头
镁光Camera
扫描头
视频技术
格科微Camera
(3)
OV Camera
(3)
Sony Camera
(5)
安森美Camera
东芝Camera
原相Camera
三星Camera
思比科Camera
(1)
DB/东部Camera
SET Camera
富瀚微Camera
思特威Camera
(2)
鸿图微Camera
晶相 Camera
BYD/比亚迪Camera
美信Camera
现代Camera
松翰Camera
奇景Camera
NEXTCHIP
传感器论坛
(1)
光敏传感器
气敏传感器
力敏传感器
热敏传感器
磁敏传感器
湿敏传感器
声敏传感器
距离传感器
图像传感器
其他传感器
(1)
电源|电池|充电技术
(5)
芯达茂微电子
力芯微
恒率科技
智芯微电子
森利威尔
POE技术
开关电源技术
BMS
电池技术
(3)
充电技术
LDO DC-DC
(1)
电平转换IC库
移动电源技术
其他电源技术
(1)
元器件|物料库
(21)
Memory|存储芯片
(6)
连接器/接插件
长江连接器
其他
二/三极管
集成电路(IC)
(13)
加密&解密ic
LED二极管
晶体&振荡器
(1)
晶体管
其他元器件
(1)
其它规格书
阻容感库
TOMIISHI
电阻/电感
LED驱动IC
音频IC
安耐科
宏晶微
台湾鑫创
汇顶
上海智浦欣
顺芯
胜翼
瑞盟
普瑞
AKM|旭化成微
艾为电子
欧胜微
YAMAHA|雅马哈
耐福
凌云科技
音频IC库
移动应用开发
(0)
Android应用开发
Android源码
Android资料
开源&组件&框架
Android视频教程
android开发
Framework
IOS开发交流
iOS经验问答
iOS视频教程
iOS资料下载
Swift开发
php论坛
Java
保护器件
(0)
雷卯电子
电路保护器件
仪器|仪表|实验设备
(12)
安捷伦
安立/Anritsu
横河
TEK/泰克
星河亮点
罗德与施瓦茨
(12)
是德
advantest/爱德万
福禄克/Fluke
柯卡美能达
艾法斯
中承科技
其他品牌
PCB论坛
(3)
EDA软件与应用
(1)
PADS|Powerpcb
Allegro|OrCAD
Mentor|其它EDA
Altium|Protel
genesis|cam论坛
EDA软件下载
DFx经验交流
3D PCB
专业评审
学员专区
PCB技术资源区
(1)
原理图|SCH
PCB作品文件
Layout设计指南
EDA技术论坛
参考设计
制作工艺
(1)
PCB生产工艺
FPC专区
SMT专区
绿色无铅
夹具模具
生产设备
基础知识
(1)
硬件基础知识
(1)
软件基础知识
区块链技术
EMI|EMC|仿真
ESD
EMI
EMC
EMI器件库
活动与公告
(6)
公告专区
(1)
活动专区
灌水专区
(5)
一牛开源
(0)
新移开源
悬赏互助
—
—
—
展
开
版
块
导
航
在本版发帖
搜索
扫一扫添加微信客服
QQ客服
返回顶部
快速回复
返回顶部
返回列表