|
386| 0
|
[项目分享] 人工智能入门课程:与昆虫对话!二哈识虫开启孩子的... |
本帖最后由 rzegkly 于 2026-6-24 17:22 编辑 ![]() 【项目背景】 假期里,与孩子共读法国作家法布尔的科普文学——《昆虫记》,书中介绍了自然界中昆虫独特的外形特征、生活习性,以及它们生存、求偶、蜕变直至死亡的生命历程,字里行间满是对生命的尊重与对自然万物的赞美。 今天,我们以 “昆虫博士” 为核心角色,通过二哈识图 2、行空板 K10、AI 小智三大设备,实现对昆虫的识别和对话,让孩子直观认识昆虫的外形特征与生活习性,激发孩子对昆虫的好奇心、创造力、观察力与想象力。让我们一起听懂昆虫的语言,一起研究,一起开启科学研究之旅吧! 【功能介绍】 一、数据采集和识别 1.Mind+对昆虫数据采集,训练昆虫模型部署二哈识图2,预设瓢虫、螳螂的特征数据; 2. 通过二哈识图2识别昆虫图像,精准识别昆虫种类; 3. 将识别到的昆虫名称数据,通过I2C总线传输到行空板K10。 二、数据处理和显示 1. 行空板K10接收二哈识图2发送的昆虫数据,在屏幕上清晰显示识别结果; 2. 通过MCP协议,将识别到的昆虫名称同步转发给AI小智,建立设备联动。 三、科普讲解和回答 1. AI小智科普讲解接收行空板K10转发的昆虫名称; 2. 与孩子进行自然对话,回答孩子对昆虫的生活习性、食物、生长过程等问题。 ![]() 【操作说明】 1. 当孩子把昆虫模型放在观察台上,二哈识图2的摄像头对准昆虫,启动昆虫模型准备识别; 2. 二哈识图2快速识别昆虫,将昆虫名称发送给行空板K10,行空板K10屏幕立即显示识别结果; 3. 行空板K10自动通过MCP协议,将昆虫名称转发给AI小智,AI小智切换为昆虫博士模式 4. 孩子发出:你好小智,唤醒昆虫小智,与AI小智对话,提出自己的疑问(如“螳螂吃什么呀?”“瓢虫的星星为什么不一样多?”),AI小智用童趣的语言解答,同时补充相关趣味知识; 5. 孩子可更换昆虫(瓢虫换螳螂,或反之),重复步骤1-4,继续探索两种昆虫的知识,加深对昆虫生活习性的认识。 ![]() 【模型训练】——模型准备 在Mind+V2平台在菜单栏中选择 “新建项目”,点击 “模型训练”。 在训练选项中找到 “图像分类(M1)” 并点击,完成项目创建。 【模型训练】—— 数据采集 1.点击 “增加类别” 按钮,为任务创建所需类别 2.点击“文件上传” 按钮,添加螳螂和七星瓢虫图片 ![]() 3.数据标注 ![]() 【模型训练】—— 训练数据 1.训练参数设置 ![]() 2.训练监测 ![]() 【模型训练】—— 模型校验 ![]() ![]() 【模型训练】—— 模型导出 ![]() 1.窗口右上角导出模型,导出昆虫模型Experience_model.zip 2.窗口右上角高级模式,数据设置导出昆虫数据集Experience.zip ![]() 3.本地模型转换 具体操作参考 基于自训练模型的颜色积木识别系统 1.查看版本 (base) C:\Users\Administrator\MindPlus_Model>python --version Python 3.13.9 2.进入onnx2kmodel-dev (onnx2kmodel-dev转换工具由DF柳工提供) (base)C:\Users\Administrator\MindPlus_Model>cd onnx2kmodel-dev (base) C:\Users\Administrator\MindPlus_Model\onnx2kmodel-dev 3.安装pip install -r requirements.txt (base) C:\Users\Administrator\MindPlus_Model\onnx2kmodel-dev>pip install -r requirements.txt 4.安装 nncase_kpu-2.10.0-py2.py3-none-win_amd64.whl (base) C:\Users\Administrator\MindPlus_Model\onnx2kmodel-dev>pip install nncase_kpu-2.10.0-py2.py3-none-win_amd64.whl 5.启动转换模型app (base) C:\Users\Administrator\MindPlus_Model\onnx2kmodel-dev>python app.py ![]() 3.将图像分类模型拷贝二哈识图2 文件夹installation_package ![]() ![]() 【配置小智MCP】 ![]() ![]() 2.小智角色配置 ![]() 3.获取小智MCP接入点地址 说明: MCP(全称Model Context Protocol,模型上下文协议),MCP可以解决(小智AI大模型)与外部世界(如数据库、工具、API)的高效连接问题,让AI从“只懂聊天”升级为“能动手做事”的智能助手。 【程序编写】 ![]() 1.打开 mind+,程序设计,选择 上传 模式 ![]() 2.点击“扩展”,在“主控扩展”中,添加“行空板K10” ![]() 3.点击“扩展”,在“模块扩展”中,添加二哈识图2和小智MCP客户端 4.程序编写 ![]() 5.图像分类程序修改 在IDE模式下,将物体分类模型 修改图像分类模型(由DF柳工提供)。 将代码中 ALGORITHM_OBJECT_CLASSIFICATION 【项目总结】 项目围绕 “昆虫博士” 角色,借助二哈识图 2、行空板 K10 与 AI 小智三大设备,完成昆虫识别与趣味对话。项目实现 “采集 — 识别 — 展示 — 问答” 全流程联动,操作简便,适合孩子自主探索。AI 以生动易懂的方式科普瓢虫、螳螂知识,让孩子在玩中学、学中记,直观掌握昆虫外形与习性。既有效锻炼观察力、动手能力与探究意识,又延续《昆虫记》对生命的敬畏之心,帮助孩子认识益虫价值,树立保护昆虫、爱护自然的环保意识,激发对自然科学的持久热爱。 ![]() |
沪公网安备31011502402448© 2013-2026 Comsenz Inc. Powered by Discuz! X3.4 Licensed