大学生创新训练项目计划申请书
项目编号 202212659003
项目名称 基于目标识别的无人机森林实时巡查系统
项目负责人 杨忠梁 联系电话 13043687265
所在学院 计算机科学与技术
学号 N19270233 专业班级 19计科二班
指导教师 陈坚祯(2534443274@qq.com)
申请日期 2022年6月12日
起止年月 2022年5月至2024年4月
衡阳师范学院南岳学院

填写说明
  1. 本申请书所列各项内容均须实事求是,认真填写,表达明确严谨,简明扼要。
  2. 申请人可以是个人,也可为创新团队,首页只填负责人。“项目编号”一栏不填。
  3. 本申请书为大16开本(A4),左侧装订成册。可网上下载、自行复印或加页,但格式、内容、大小均须与原件一致。
  4. 负责人所在学院认真审核, 经初评和答辩,签署意见后,将申请书(一式两份)报送衡阳师范学院南岳学院项目管理办公室。

一、 基本情况

项目名称 基于目标识别的无人机森林实时巡查系统
项目级别 国家级
项目类型 创新训练项目
所属学科
学科一级门: 工学   学科二级类: 计算机类
申请金额 10000.00 起止年月 2022年5月至2024年4月
负责人 杨忠梁 性别 民族 出生年月  年 月
学号 N19270233 联系电话
宅: 手机: 13043687265
指导教师 陈坚祯 联系电话
宅: 15073220662 手机: 15073220662
项目简介
森林巡查是森林管理的重要工作内容,在森林灾情监测、森林资源监控等方面发挥着关键作用。随着现代科技的发展飞速,森林防火工作开始使用不同类型的无人机进行防火巡查,无人机可以实时监测森林是否存在火灾安全隐患、监督不明火源、远程监控火情、精准快速地提供有效数据。不同功能的无人机在森林防火工作中可以应对森林防火工作的各类新需求。无人机可以拍摄火灾现场的全景图,无人机的红外线摄像头便于夜间采集图像,执行消防救援工作。无人机体积较小、方便快捷,便于消防救援人员随时携带。 无人机森林实时巡查系统主要是利用无人机高清摄像头实现巡查现场的定点取证,现场监测等工作,与传统无人机不同的是,该系统的设计理念为全自动运行,定期给无人机制定相应的巡护任务,无人机可实现自动起飞,自动返航,关键点自动取证等功能,实现了真正的“无人操作”无人机。
负责人曾经参与科研的情况
十佳原创应用 系统个人博客管理系统
指导教师承担科研课题情况

研究方向:

计算机仿真、物联网传感器、核信息测控以及流体流量测控。发表学术论文、编写教材著作等30余篇本,其中7篇被EI录用。参与申请发明专利2项。主持研究项目3项,参与多项省、部级教学及科学研究项目;参与完成多项测控产品研制与开发的横向项目,特别是“13N监测仪,该系统已运行于秦山核电站。

指导大学生创新省级项目《冰箱智慧云管理系统》,已结题。获得省级竞赛二等奖,发表论文一篇,软件著作权一项
指导教师对本项目的支持情况
已经具备研究开发的软硬件平台
项目组主要成员 姓名 学号 专业班级 所在学院 项目中的分工
杨忠梁 N19270233 19计科二班 计算机科学与技术 总体设计 图象识别
甘甜 20190107 20计科师范一班 计算机科学与技术 云计算
龙娇 20190124 20计科师范一班 计算机科学与技术 导航处理
李博宇 20190211 20计科师范二班 计算机科学与技术 嵌入式开发
林志杰 21670221 21软工一班 计算机科学与技术 手机app,网页客户端

二、 立项依据(可加页)

(一)研究目的

目前,面临着人工巡查工作强度大、巡查效率低、信息获取不及时、时效性差等缺点。尤其是在面对森林火情、树木砍伐等隐患时,传统人工巡查效率低下的缺点更被放大,如若发现延迟,很可能对森林资源造成不可逆的损失和后果。而目前的无人机操作复杂,需要人员控制,巡视效果不佳,并且无法与进行数据实时监控。因此,本项目将实现实时监测,灾情数据快速上传云端,提高巡查工作效率,降低人工成本,加强森林管理。

(二)研究内容

1. 无人机智能导航


研究无人机如何利用INS/GPS组合导航系统在未知复杂环境中自主导航和飞行控制问题。且在不确定性的条件下,实时或近乎实时地解决一系列最优化的求解问题,并且不需要人为的干预。

2.灾情检测识别。

森林监测无人机在工作时,受到强风、光照等环境因素的影响,采集的图像通常会存在干扰信息,因此在处理前需要对其进行预处理。为使森林火灾识别算法准确分别森林火灾与干扰物,从形状特征、纹理特征以及动态特征三个方面提取森林火焰及烟雾的特征应该深入研究图像的预处理及目标区域分割方法,从而消除图像噪声、改善图像质量,使图像更加清晰,保证后续处理和研究的准确性。

3.数据上传云端。

数据上传云端是无人机巡查过程中最基础,也是最重要的操作步骤,无人机将森林巡查过程中的数据利用传感器上传到云端上时,使用者能够及时的发现灾情,从而避免森林遭遇重大的损失。

4.云端数据远程实时监控的研究。

将智控模块安装于无人机上,利用多模通信技术确保无人机与服务器的稳定连接,云操作系统安装于云服务器上,承担无人机通信、飞行控制、编队管理、监控信息实时处理,显示控制终端显示云操作系统处理的动态全景地图,并接受用户指令,远程控制无人机执行任务。


(三)国、内外研究现状和发展动态

(四)国、内外研究现状和发展动态

目前国内大部分林业部门依旧采用人工巡查的方式进行林业巡查。而传统人工巡查方式,劳动强度大,效率低,且信息获取不准确,而卫星对森林资源的信息获取,由于获取周期长,时效性差,无法满足实时监控的需求。传统载人飞机改善了时效性差、人工巡查的问题,基本满足实时监测的需求,但在森林火灾等环境恶劣的环境下,飞行安全将会受到严重威胁,且其受环境、空域等影响较大,维护成本较高,不能满足林业的日常化管理。无人机辅助巡查就很有必要,但要解决以下问题:

1、无人机定位系统

全球定位系统(Global Positioning SystemGPS)是一种以人造地球卫星为基础的高精度无线电导航的定位系统,它在全球任何地方以及近地空间都能够提供准确的地理位置、车行速度及精确的时间信息。GPS自问世以来,就以其高精度、全天候、全球覆盖、方便灵活吸引了众多用户。GPS是美国从20世纪70年代开始研制,历时20年,耗资200亿美元,于1994年全面建成,具有在海、陆、空进行全方位实时三维导航与定位功能的新一代卫星导航与定位系统。GPS的应用广泛,不仅可以应用于汽车,同时也是物流行业管理的智多星,随着无人机技术的发展,可以将GPS安在无人机上来实时的掌控无人机的动态。GPS-BD定位模块与烟雾探测器由STM32CBT6型单片机(简称“STM32”)驱动。GPS-BD模块通过天线从太空轨道上的北斗和GPS卫星经通信获取导航电文,解算出无人机的速度、位置和姿态等信息,通过USART3串口将定位数据传输给STM32单片机;飞控模块通过MAVLink协议与STM32单片机进行通信,并获取无人机的速度、位置和姿态等信息,以用于无人机自主导航过程中轨迹跟踪的闭环控制。全球卫星导航系统如GPS和中国研发的北斗导航系统BDS,可获得目标的绝对位置信息和速度信息。但一方面此类方案在民用范围内会受到一定程度上的限制,精度和频率一般分别在1-10Hz5m。因而实际使用时,常配备惯性导航系统INS,利用卫星导航数据与机载惯性数据融合后提高定位精度频率才能投入实际使用。另一方面,基于全球卫星导航系统的定位方案在室内的应用效果会因建筑环境对卫星信号的影响而大打折扣,这也是全球卫星导航系统易受地形干扰的原理性缺陷,导致了更加难以形成可靠的室内方案。

2、智能识别分析的算法

Yolov5是一个基于pytorch的在在COCO数据集上进行预训练的目标检测体系结构和模型,是目前一个比较常用的目标检测模型,在现在很多实际项目中,有很好的效果,实用性较强,有模型尺寸小、部署成本低、灵活度高和检测速度快的特点,在森林灾情检测中可以得到很好的应用,烟火检测基于智能视频分析和深度学习神经网络技术,实现对视频内的烟雾和火焰进行识别、并动态识别烟雾和火焰从有到无、从小到大、从大到小、从小烟到浓烟的状态转换的识别、实时分析告警,并将报警信息及时推送给相关的管理和安全人员,及时应对与处置。方向梯度直方图(Histogram of Oriented Gradient,HOG)特征是一种在计算机视觉和图像处理中用来进行物体检测的特征描述子。它通过计算和统计图像局部区域的梯度直方图来构成特征。Hog特征结合SVM分类器已经被广泛用于图像识别中,尤其在行人检测中获得了极大的成功。HOG+SVM进行行人检测的方法是法国研究院Dalal2005CVPR上提出的。行人检测,是利用计算机视觉技术判断图像或者视频序列中是否存在行人并给予精确定位的技术.由于行人兼具刚性和柔性物体的特性,外观易受穿着、尺度、遮挡、姿态和视角等影响,使得行人检测具有非常高的研究价值"。基于HOG+SVM的行人检测方法,其中,HOG(方向直方图)对图像几何形变和光学形变能很好保持不变性,SVM(支持向量机)精度高,泛化能力好,两者结合建立行人检测模型,能够更加准确实现图像中的行人检测。

3、云计算

云计算(cloud computing)是分布式计算的一种,指的是通过网络将巨大的数据计算处理程序分解成无数个小程序,然后,通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。云计算早期,简单地说,就是简单的分布式计算,解决任务分发,并进行计算结果的合并。因而,云计算又称为网格计算。通过这项技术,可以在很短的时间内(几秒钟)完成对数以万计的数据的处理,从而达到强大的网络服务。现阶段所说的云服务已经不单单是一种分布式计算,而是分布式计算、效用计算、负载均衡、并行计算、网络存储、热备份冗杂和虚拟化等计算机技术混合演进并跃升的结果。可以将云计算技术运用到无人机远程监控系统上,和无人机进行很好的结合,将云操作系统安装于云服务器上,承担无人机通信、飞行控制、编队管理、监控信息实时处理。

(四)创新点与项目特色

1.集巡查救援于一体,信息化程度高。

本项目的基于目标识别的无人机森林实时巡查系统不仅能预防森林火灾,还能实时跟踪定位信息化管理与互联网、移动互联网完美的结合在一起,通过机载飞控模块,实现自动避障、沿规划飞行路径自主飞行、自主调整飞行姿态、云台角度、拍摄距离、相机参数等,从而高效、高质地完成巡查任务,云端实现远程管理和异地传输等强大的功能。无人机实时位置显示及定位跟踪在电子地图上准确的标注出无人机的当前位置,发生紧急事件时方便及时派遣人员解决。

2.云计算技术远程数据处理。

无人机上设有高清摄像头拍摄照片、视频等记录信息,且能通过卫星通讯模块与云端连接以接受云端的控制并将接收到的图像、数据传输到云端进行处理,直观有效的了解样点现场的实际情况,及时采取正确的处理措施。

3.图像AI智能识别,精度高

本项目通过opencvYolov5图像识别技术和3D建模技术对所得图像进行分析对比,对比分析前后巡查数据。比如,识别区域林区的植被是否发生非法砍伐,进而有方向的侦查确认。针对大量巡查所得照片,研究出适用于无人机跟踪识别的图像分割处理方法,能够准确的识别并分割出有目标存在的区域并对特定区域进行跟踪识别。

4.无人技术提高效率。

本项目的无人机搭载了不同的传感器随时勘测和监测林区植物的生长情况,实现数字林区的建设、实现林区环境治理。在整个操作过程中可以做到无人工干预全自动、高效率的自主作业,极大地降低了执法人员的工作难度。

(五)技术路线、拟解决的问题及预期成果

1.本项目采用如下技术路线:

利用无人机搭载摄影设备巡查航拍森林->结合opencv或者yolov5技术实时处理航拍图像->图像处理检测到灾情->通过机载GPS(北斗)定位系统精准定位灾情地点->将获取的图像数据实时传回至云端->云计算远程实时监控

2.拟解决的问题:

(1) 飞行稳定性并不理想,在飞行过程中经常会发生摇摆或颠簸,这会直接影响到图像或视频的清晰度

(2) 由于无人机采集的图像背景是运动的,因此只能基于单-的颜色进行目标区域分割难免出现分割不完整的现象。希望基于运动背景的图像前景分割方法,提取出更加完整的目标区域.

(3) 优化yolov5灾情检测算法以及对灾情的定位;

(4) 受天气因素影响较大,如遇大风、雷雨等,无法使用无人驾驶飞机监测设备,无法准确识别灾情并标记位置

3.预期成果:

(1) 设计与实现基于大疆筋斗云的森林实时巡查系统;

(2) 以项目研究成果参加省市级学科竞赛,并力争获奖;

(3) 发表省级及以上科研论文1篇或申报软件著作权1项;

(六)项目研究进度安排

120227—202211

  搜集参阅资料文献,对现有的算法进行全面分析,在此期间,对一些研究对模糊目标识别算法,可采用高斯滤波、形态学开运算、自适应阈值分割、区域型种子块标记图像生成对目标树木实现精准定位。

2202211—202311

  实地考察,对目标林区进行测试,收集对应的图像数据可与真实数据进行比对生成比对数据表,比对准确率,误差较大,可对次方法进行优化。

3202311—20246

  数据整理,对测试结果分析,算法优化,对无人机的一些采集信息的硬件更新升级,便于信息采集数据值更为准确。

(七)已有基础

1.与本项目有关的研究积累和已取得的成绩

1. 具备的条件

 已具备有关的技术算法和实验设备

大疆筋斗云无人机, Visual Studio2013(基本框架)、opencvyolov5(图像处理)、GPS/北斗(无人机机载定位导航)阿里云服务器(数据集编制/网站数据库系统),无线图传设备,海康威视(基于数字图像识别助手)

2.已具备的条件,尚缺少的条件及解决方法

1. 具备的条件

 已具备有关的技术算法和实验设备

大疆筋斗云无人机, Visual Studio2013(基本框架)、opencvyolov5(图像处理)、GPS/北斗(无人机机载定位导航)阿里云服务器(数据集编制/网站数据库系统),无线图传设备,海康威视(基于数字图像识别助手)


2. 算法的局限性

限于此类算法是基于对目标林区的分割近似计算,虽说结果精确性很高,但无法对被大树遮掩下的小树进行计算,同时也存在对地形不同和和拍摄角度不同对实验的影响所带来的误差。

3.硬件设施的局限性


无人机的相机像素分辨率的局限直接影响实验数据收集的准确性,由于对图像

收集的不准确从而对算法程序造成的影响也十分大。

三、 经费预算

开支科目 预算经费(元) 主要用途 阶段下达经费计划(元)
前半阶段 后半阶段
预算经费总额 10000.00 8000.00 2000.00
1. 业务费 8500.00 系统测试与维护、项目调研、参加比赛等 6500.00 2000.00
(1)计算、分析、测试费 500.00 系统测试与维护 500.00 0.00
(2)能源动力费 0.00 0.00 0.00
(3)会议、差旅费 3000.00 用于参加国内会议、调研的会议费及差旅费 2000.00 1000.00
(4)文献检索费 2000.00 购买图书课程、文献检索和复印资料 1500.00 500.00
(5)论文出版费 3000.00 用于论文发表、专利申请 2500.00 500.00
2. 仪器设备购置费 0.00 0.00 0.00
3. 实验装置试制费 0.00 0.00 0.00
4. 材料费 1500.00 用于购买实验所需设备 1500.00 0.00
学校批准经费

四、 指导教师意见

 
 
 
导师(签章):
  年        月        日  

五、 院系大学生创新创业训练计划专家组意见

 
 
 
专家组组长(签章):
  年        月        日  

六、 学校大学生创新创业训练计划专家组意见

 
 
 
负责人(签章):
  年        月        日  

七、 大学生创新创业训练计划领导小组审批意见

通过
 
导师(签章):
  年        月        日