2022-07-13
2022-07-13
2022-07-13
2022-07-13
2022-07-14
更新时间:2024-01-20 19:58:17 发布时间:24小时内 作者:文/会员上传 下载docx
2022-07-13
2022-07-13
2022-07-13
2022-07-13
2022-07-14
1.国内外的研究现状
目前国内外实现的手语识别系统主要分为基于传感器的系统识别和基于图像处理的识别系统。利用传感器识别的系统就是利用空间加速度和角速度这两个参数来进行的,当信息量比较大时,能更方便的获取到数据;缺点是需要在手臂上装置大量装置在表达上带来了不便性。基于图像的视觉识别是用摄像机采集手势信息进行识别的技术。这种方式的优点是动作的识别更加自然,缺点是图像处理识别时容易受到环境的干扰。
手势识别领域的研究在国外要比国内早,国内最早开始研究手势手语的识别是哈工大团队提出了将多种手势识别算法融合的方法,这种方法在分类时特征和模型的参数都很少,但这种技术对手语手势的识别在那个年代取得了良好的识别效果,通过将神经网络和hmm算法相结合,使系统对简单静态手语的识别率达到百分之八十以上。随着技术的发展,人们将gmm模型运用到手
语识别系统中,通过这种方法对手语识别得到的结果更好。20xx年,南开大学的李国峰等人研发了基于mems加速度传感器的简单输入系统,该系统也为自热的人机交互研究开启了新理念。20xx年华中师范大学团队开始了基于加速度传感器手语识别研究,对预设的八种手势进行识别,其识别率达到了85.3%.20xx年,清华研究团队利用semg信号去识别手臂和手指动作采用多电极阵列获取semg信号,虽然实用性不是很强,识别率不是很高,但是在该领域的探索研究,做出了大量的探索工作。20xx年,由于传感器的手势识别领域的快速发展,国内学者张欣和陈勋等人将传感器技术与生理信号相互结合,构建了手势识别系统的远程医疗系统,该系统研发为识别领域注入了新的血液,使得国内对相关领域的研究更加热衷起来。
2.课题研究的意义
根据世卫组织最近的一项报道表明,在全球有6亿多的残疾人,其中就聋哑人占残疾人口的10%.截止到20xx年末,中国残疾人的数量已经占到全国总人口数的百分之六,是世界上残疾人最多的国家。在这些残疾人当中,具有听力障碍的人占33%,人数大约为2780万,这些人中只有少部分人只有听力或语言障碍,而大多数人完全失去了与健康人类正常沟通的能力,手语则是它们唯一的交流方式。对于健康的人们来说,除一些专业人士外大部分人并不能理解手语的含义,那么将手语转换成声音和图像并被人们轻易理解就变得很有实用价值。这将清除它们与社会交流的障碍为它们融入到有声世界提供了很大的帮助。手势手语是将人体产生的动作赋予了特定的含义且高度的结构化后的集中体现。
.它主要是由人的手势决定也会有一些面部表情进行辅助,因此我们要对手语进行识别,首先必须要弄清手势含义,目前很多对手语的识别是依靠计算机视频识别来实现的。自上世纪九十年代以来,计算机技术得到迅猛发展已经深入到生活的方方面面之中影响迅速扩大,而且在日常生活中多模态接口技术已经变得越来越普遍。虽然传统鼠标和键盘随着计算机技术飞速发展而变得越来越先进,但是由于人的需求也在发生着很大的变化,这些传统设备也逐渐凸显出了它们的局限性,在虚拟现实和人机交互上这种限制是有着明显的表现。人机交互中手势是输入和输出的非常重要的方式,所以手势识别是多模式接口技术的一个重要部分。
随着技术的不断革新,用户对传统计算机的要求已经不仅仅局限在便利性和人机交互的方面,导致传统设备在人机互动方面已经无法满足用户的需求。而手势识别就是解决高人工智能领域的局限性问题的,它作为多模式人机接口技术已成为当前计算机技术继续深入研究的方向,能使通信在人机交互界面技术上使用的更加自然和谐,手势识别最接近的就是手语识别,对它的研究涉及心理学、人工智能、计算机视觉等多领域的学科研究,而且作为日常生活中沟通的一种方式已开始受到大批专家和学者的关注,并在手势识别研究方向开始投入大量科研经费和精力,由于手势手臂本身较为复杂而且它的时间和空间差异使得手势识别已经成为一个具有挑战性的多学科交叉融合的研究课题。
1.手势的表示
手势表示通常是利用手势模型和模型参数来表示的,所以在识别手势的时候首先要要对手势建模,识别是根据手势表示内容而选取手势特征量与模型匹配,由于环境文化和地区的不同会导致了手势的差异,可能会有使用不同的表达方式,所以手势通常是一个不太明确的概念,有时手势表达的含义在不同情景下承载的信息是不同的。比如不同地区表示暂停的时候是左手在上右手在下,而其它地方可能就是右手在上左手在下。
本文设计的关键是对手势的建模训练,尤其是对待识别的手势的确定。具体的应用决定了采用什么样的手势模式,只有建立准确的手势模型才能利用算法进行对识别到的手势做出正确反馈。通常手势建模和手势识别所使用到的方法是相异的,采集手势特征数据的方法也不一样。目前基于数据手套的特征捕获方法是比较常用的采集数据信息的方式,通过选择相应的识别算法实现手势的识别反馈。
2.常用手势识别算法分析
2.1人工神经网络算法
这种算法还具有抗干扰能力和容错性强识别速度快等优点,它能把预处理和识别的过程同时进行处理。在目前的识别领域中,运用的比较多的神经网络是误差反向传播神经网络(简称网络)。bp神经网络结构图算法是一种有监督式的学习算法,它由三部分构成输入层、中间层(也叫隐藏层)和输出层,其中的输入层和输出层的神经元节点是固定的数目,两层之间存在从输入层到输出层的前馈连接和输出层至输入层的反馈连接,只有隐藏层的神经元是可以自由定义的。
在人际交互识别领域中应用神经网络算法进行手势的识别时首先需要有自己的数据库系统,再对采集到的手势数据序列进行算法的训练,使用训练好的网络去识别输入的手势数据信息数据的含义即达到识别手势的目的,识别到后经由计算处理以实现人机交互的目的。神经网络的优点是抗干扰性和容错能力强,缺点是训练量比较大,扩充性不强对时序建模能力差,无法有效处理动作的速率带来的问题。
2.2动态时间规整
动态时间规整曾是语音识别的一种主流方式,它是一种将时间归整与距离测度结合起来的非线性正则化的技术,算法是建立一套科学的时间校准匹配路径将测试模式和参考模式建立起联系的算法。
dtw的算法主要利用的动态编程技术(dynamic programming,dp)去实现,它的算法实现是将全局的优化分化成众多的局部最优化。所以在使用算法的时候需要将各局部最优化,已达到全部的最优化。
在dtw算法中由于容易实现和数据的训练简单等优点被用在语音识别中广泛应用,但在手势识别领域由于其运算量太大和较弱的抗噪能力,很难达到对手势识别的实时性的要求。
2.3特征选择
手势识别本质上是对手势进行多分类任务,在实际的实验测试过程中,能够准确区分手部状态是进行手势识别任务的前提条件,且对后续的分类以及检测等任务的精准度至关重要。
比如在进行图像识别过程中,对拍摄到的图像进行特征提取是判别手势的第一步,特征性质的优劣是后续进行图像信息处理的关键,对采集到的数据进行特征提取,提取过程中如果特征过于简单就会造成对图像信息的提取不全,导致最后的判别精确度较低的问题不能满足手势识别对人体手势识别高精确度的要求,而如果不考虑提取到的.特征维度问题,容易造成数据维度灾难现象即产生大量的特征数据使计算机无法短时间进行处理,这样不能满足手势识别对于现场实时性的要求。
因为在三维空间中执行的手势是动态的,采集到的加速度和姿态角的数据也是实时变化的,所以对于手势识别的数据是由内嵌在手套中的两个六轴陀螺仪加速度传感器产生的,当手部移动时会产生加速度,角速度姿态角等实时数据信息,处理器通过对传感器识别的运动数据进行采集计算最终识别手势的动作。
1.实验手势
本章主要内容是根据前面内容进行试验,通过实验验证可穿戴智能手套翻译器能够使用改进型的识别算法提高手势的识别率和识别精度。
为验证嵌入式系统对手势手语识别的可行性,在进行试验时候从准备好的手势模型中各取四个进行手势识别试验。开始手势表达时要按箭头的方向做轨迹,同时要求一次性完成动作,不能在动作执行时有停顿,做完每一个手势都要停顿一定时间。
2.实验过程及数据统计
本文所采取的实验方法及过程如下:
首先,实验所用的手势模板是已经定义好了的手势集合,实验时从中选取定义好的手势集。
其次,从手势集合中选取部分手势进行算法识别,在这个过程中逐渐将训练样本数量由少到多增加,观察样本数量对识别率的影响。
最后,使用改进型算法对手势进行识别,同样将样本数量逐渐增多,观察样本数量对手势识别率的影响,将两种算法识别的结果进行对比,比较识别率。
整个识别的流程通常是由以下几步完成的:系统的初始化、检测动作的状态是否开始、记录数据集、检测动作是否结束,模型对比和识别结果,实验的流程图如图所示。
识别动作时最重要的是准确判断手势的开始时刻,因为每一个手势动作通常可能会连续摆动来表达含义,所以在进行动作识别时需要采集传感器信息加速度的变化去判断是否为开始信号,过程是传感器采集到数据时判断是否开始,若是开始信号则开始转换数据进行对手势的识别,当传感器停止传输数据时则表动作结束同时语音播放。
根据实验结果可知手势识别率总体上是随着样本的训练次数增加有微量上升,因此再一次增加样本的训练次数进行实验对比,来确认训练的样本数对识别率的影响,分别选用经过次和次训练的手势,总体上手势的识别率是随着样本训练次数的增加而略有提升,不过达到一定程度之后识别率就基本保持了稳定。
x年x月-x年x月,收集资料,建立模型,
x年x月-x年x月,开发软件,
x年x月-x年x月,教学试验,评价修改,
x年x月-x年x月,扩大试验,归纳总结。
[1]李强,张然,鲍国东,姜海燕。聋人大学生心理健康状况及相关因素分析[j].中国特殊教育,20xx,02:69-72.
[2]陆德阳。残疾人与近代中国残疾人事业的发展[j].齐鲁学刊,20xx,06:55-58.
[3]王丹蕾,聂桂平。手语翻译设备的发展现状及未来趋势[j].设计,20xx,(19):115-117.
[4]晶茹,刘丽娜。商务沟通中口译人员的跨文化意识培养[j].学周刊,20xx,01:217-219.
[5]贾建锋,潘梦佳,马可心。发达国家本科招生制度经验借鉴与启示--基于美国、英国和日本的多案例研究[j].重庆理工大学学报(社会科学),20xx,11:118-125.
[6]李金,宋阳,梁洪。语言残障患者医疗辅助系统设计[a].中国仪器仪表学会。第九届全国信息获取与处理学术会议论文集ⅱ[c].中国仪器仪表学会,20xx:4.
[7]孟繁玲。我国手语翻译专业教育的现状、问题及对策[j].中州大学学报,20xx,(03):87-90.
[8]刘卓璇。国内聋人高校课堂手语翻译问题与对策[j].中州大学学报,20xx,(06):61-63.
[9]贾建锋,潘梦佳,马可心。发达国家本科招生制度经验借鉴与启示--基于美国,英国和日本的多案例研究[j].重庆理工大学学报(社会科学),20xx,11:118-12.
[10]huang g,bai z,kasun l, et receptive fields based extremelearning machine[j].ieee computational intelligence magazine,20xx,10(2):18-29.
[11]王卫民,贺冬春。自然手语翻译器系统设计和实现[j].无线互联科技,20xx,(15):41-42.
依照学校实训处本学期工作安排,我有幸于本学期后半段时间到企业实习,根据学校教师到企业实践实施办法,在实习前,我便联系到了与我本人教学、科研和发展紧密联系的企业——广州奥达电子技术开发公司。在该公司采用跟班的方式进行两个多月的实习,具体时间20xx年5月1日—7月4日。
我这次实习的目的和任务是:深入企业的基层,了解该公司的生产流程、管理模式,及企业对专业人才的需求状况,从而可以为我校的计算机相关专业的教学作为借鉴和指导。通过教师亲身深入企业实践学习,亲身体会企业文化的快乐与残酷,真正实现校企联合,缩短职业教育与企业人才需求之间的差距。对今后的教育教学工作具有许多指导和借鉴作用。现将这次到企业实习情况总结如下。
一、实习单位(广州奥达电子技术开发公司)的概况
广州奥达电子开发公司是广州甘蔗糖业研究所(原轻工业部甘蔗糖业科学研究所)属下的一个专业公司,成立于一九八八年。公司的主要业务有两方面:一是以糖厂农务管理、原料及物资收购、生产管理、财务结算等管理系统为核心的糖厂计算机网络管理系统软件的开发与应用推广,以及其它办公自动化(oa)、财务、人事、企业管理等软件的开发;二是生产销售以dcs系列自动包装秤为主的各类自动包装秤以及生产过程中的各类自动定量控制系统的开发。
公司成立后就以糖厂计算机管理系统软件的开发和自动包装秤为主的自动定量控制系统的开发为研发和推广的重点。我公司开发的“电子衡微机管理系统”被批准为《国家级科技成果重点推广计划》(项目编号工3-2-5-20),同时被列为轻工业部“八五”期间新技术推广项目、广东省“八五”重点新技术推广项目,并荣获轻工业部一九九二年度科技进步奖三等奖。我们一直以糖厂为主要服务对象,为广西、广东、云南、四川、贵州、海南、湖南、江西、福建等省区的数十家糖厂开发编写地磅甘蔗及物资收购系统软件、财务管理及结算系统软件、农务微机网络管理系统软件等。近两年开发或升级农务微机网络管理系统软件等的客户有南华集团龙州分公司的龙州糖厂、霞秀糖厂、龙州第二糖厂,广西横县新凯糖业有限公司、广西天等俊杰糖业有限公司、欧亚那彭糖业有限公司、廉江华南糖业有限公司、湛江甘化糖业有限公司、湛江金岭糖业集团公司、雷州唐家糖厂有限公司、广东翁源茂源糖业有限公司、四川金沙江糖业有限公司、云南巧家白鹤滩食品有限公司等三十余家糖厂等企业。
该公司研发销售的产品主要有dcs型系列电子定量包装秤、dcs-s系列宽量程电子定量秤、dcs-l系列计量秤、输送缝包机、酒精自动计量累计秤、dcs系列液体定量秤、自动检重控制秤系统、合成混合自动定量投放料控制系统、企业生产过程微机监测系统等。我公司研制开发的电子衡器系列等产品已通过省级技术鉴定,已经在我国100 多家糖厂及其他企业推广使用,取得了显著的经济效益和社会效益。
二、实习过程
根据公司的安排,在这次实习过程中,主要做了以下三方面的工作:
1.熟悉公司的情况,了解客户,和公司人员出差
到公司后,能摆正自己的角色,把自己当作一位普通打工仔为了生计到公司打工,所以能了解更多的公司运作方式。在实习过程中,严格遵守我公司的规章制度,按时上下班,没有出现无故迟到、早退和旷工的现象。以较短的时间熟悉公司的业务,服从公司的安排,并能按时按质按量完成公司布置任务,和公司员工一起出差了解客户需求信息,先后到福建漳州、广西南宁、增城、东莞东坑镇和广州市附近多企业访问,学习到了一些和企业打交道的知识,这和书本上描述的相距甚远。
2.技术方面的指导和培训活动
在实习过程中,第二项主要工作就是技术指导和培训活动,和同事们交流过程中,总是感觉到现在知识和实际工作中的差距,我们先后进行了计算机发展技术、编程技术c/s和b/s的联系与区别、各种常用数据管理系统的比较、各种常用数据引擎的优缺点对比和企业信息化建设方面的内容。
20xx年6月14日~6月22日参加公司在广西南宁举行的“地磅计量及农务管理培训班暨农务管理经验交流研讨会” ,在会议中,我做了题目是:“加快企业管理信息化建设步伐”讲座,得到所有参加会议人员的高度评价,内容实用,对企业管理的信息化建设具有参照和指导作用。在讲座过程中,也注意结合我们学校实际情况,做免费宣传。
甲方:_____
地址:_____
电话:_____
乙方:_____
地址:_____
电话:_____
甲乙双方本着平等、自愿原则,在共同遵守国家相关法律的前提下签订本合同。甲乙双方履行各自义务后,双方无异议签字后本合同(一式两份,双方各执一份)立即生效。具体内容如下:
1、乙方在甲方商行______年 ______月______日 ,购 买 商品,证书编号 。
乙方采用 形式支付甲方人民币____________元。
2、甲乙双方共同遵守并约定:
乙方自购买商品之日起计算满______年的,如果乙方要求退还所购商品,甲方无任何理由拒绝并接受乙方退还要求。乙方在提出退还所购甲方商品要求时,需出具购买商品原始发票、商品鉴定证书和无暇疵所购商品。双方无异议时,甲方即时退付乙方购买商品原价80%现金结算。其中20%甲方作为商行成本计算,不予退还。
3、乙方自购买商品之日起计算满______年的,如果乙方要求退还所购商品,甲方无任何理由拒绝并接受乙方退还要求。乙方在提出退还所购甲方商品要求时,需出具购买商品原始发票、商品鉴定证书和无暇疵所购商品。双方无异议时,甲方即时退付乙方购买商品原价90%现金结算。其中10%甲方作为商行成本计算,不予退还。
4、 乙方自购买商品之日起计算满______年或超过______年以上的,如果乙方要求退还所购商品,甲方无任何理由拒绝并接受乙方退还要求。乙方在提出退还所购甲方商品要求时,需出具购买商品原始发票、商品鉴定证书和无暇疵所购商品。双方无异议时,甲方即时全付乙方购买商品原价100%现金结算。
如果乙方所购商品增值,甲乙双方另行商议。
5、甲方保证向乙方所销售商品品质和质量。甲乙双方在签定购销合同前无异议,合同立即生效。
6、本合同自甲方开业之日起正式施行,
无时间限制。
7、本合同未尽事宜,双方共同协商解决。
甲方:_____
乙方:_____
日期:______年 ______月______日
文件和文件夹的管理
1.熟悉windows xp的文件系统。
2.掌握资源管理器的使用方法。
3.熟练掌握在windows xp资源管理器下,对文件(夹)的选择、新建、移动、复制、删除、重命名的操作方法。
1.启动资源管理器并利用资源管理器浏览文件。
2.在d盘创建文件夹
3.在所创建文件夹中创建word文件。
4.对所创建文件或文件夹执行复制、移动、重命名、删除、恢复、创建快捷方式及设置共享等操作。
(一)文件与文件夹管理
1.展开与折叠文件夹。右击开始,打开资源管理器,在左窗格中点击“+”展开,点击“—”折叠
2.改变文件显示方式。打开资源管理器/查看,选择缩略、列表,排列图标等
3.建立树状目录。在d盘空白处右击,选择新建/文件夹,输入经济贸易学院,依次在新建文件夹中建立经济类1103
4..创建word并保存。打开开始/程序/word,输入内容。选择文件/另存为,查找d盘/经济贸易学院/1103班/王帅,单击保存
5.复制、移动文件夹
6.重命名、删除、恢复。右击文件夹,选择重命名,输入新名字;选择删除,删除文件
7.创建文件的快捷方式。右击王帅文件夹,选择发送到/桌面快捷方式
8.设置共享文件。右击王帅,选择属性/共享/在网络上共享这个文件/确定
9.显示扩展名。打开资源管理器/工具/文件夹选项/查看/高级设置,撤销隐藏已知文件的扩展名
(二)控制面板的设置。
1.设置显示属性。右击打开显示属性/桌面、屏幕保护程序
2.设置鼠标。打开控制面板/鼠标/按钮(调整滑块,感受速度)、指针
3.设置键盘。打开控制面板/键盘/速度(调整滑块,感受速度)、硬件
4.设置日期和时间打开控制面板/日期和时间
5.设置输入法。打开控制面板/区域与语言选项/详细信息/文字服务与输入语言
(三)windows附件的使用
1.计算器。打开开始/所有程序/附件/计算器/查看/科学型,
2.画图。打开开始/程序/附件/画图/椭圆/填充/选定
3.清理磁盘。打开开始/程序/附件/系统工具/磁盘清理,选择磁盘,确定
4.整理磁盘碎片。打开开始/程序/附件/系统工具/磁盘碎片整理
通过对《大学计算机基础》的学习和上机,我掌握了包括文件的管理、控制面板的设置、windows
附件的使用等在内的计算机基础知识和操作技术,让我对计算机有了初步认识。
六、实验心得
对文件的管理、控制面板的设置、windows附件的使用等在内的计算机基础知识和操作技术的学习,让我对计算机的工作原理和简单操作有了熟练地掌握,使我对计算机的运用充满好奇与热情,也为我以后在工作岗位上运用计算机技术,更好的让计算机服务于生活、工作打下坚实的基础。我相信,在老师辛勤教导下,在我的努力学习下,我一定能够让计算机及其运用技术创造我们更好的明天。
将本文的Word文档下载到电脑
推荐度: