网站用哪些系统做的比较好用,做国外有那些网站,学校网站建设的风险分析,做网站怎么建立文件夹边缘智能技术快速迭代#xff0c;并与行业深度融合。它正重塑产业格局#xff0c;催生新产品、新体验#xff0c;带动终端需求增长。为促进边缘智能技术的进步与发展#xff0c;拓展开发者的思路与能力#xff0c;挖掘边缘智能应用的创新与潜能#xff0c;高通技术公司联…
边缘智能技术快速迭代并与行业深度融合。它正重塑产业格局催生新产品、新体验带动终端需求增长。为促进边缘智能技术的进步与发展拓展开发者的思路与能力挖掘边缘智能应用的创新与潜能高通技术公司联合阿加犀智能科技主办了“2024高通边缘智能创新应用大赛”。大赛共甄选出 36 个卓越项目以下为智能机器人赛道中独立开发者、高校开发者和企业开发者的优秀项目分享。 独立开发者项目
在刚过去不久的第二十六届中国国际高新技术成果交易会上具身机器人、服务机器人、调酒机器人、情感陪护机器人、灵巧手……各类机器人及相关产业产品纷纷亮相用强有力的“科技范儿”构建出了一幅幅无需再事事亲力亲为的生活、生产图景。
在此次大赛中众多参赛团队也纷纷将目光投向了这一充满挑战与机遇的领域。其中独立开发者们凭借灵活和个性化的开发思维打造出了一系列突破传统模式、有望革新行业发展的智能机器人产品。 ⚪混合式 AMR 双臂机器人
尽管机器人技术的概念在市场上被广泛讨论但实际上开发一款高性能的机器人产品面临着重重挑战。首先机器人系统的结构复杂性就是一个难以忽视的问题它涉及到个人系统与机器人系统的切换、远程登录的实现以及调试端口设备的复杂操作。
此外要设计出一款能够满足主频、运存、算力等技术参数要求的机器人同时还要保证其易于开发、低功耗和高性能这本身就是一项艰巨的任务。更进一步要让这样的产品价格亲民、生态完善使得所有人都能够负担得起并易于使用更是难上加难。
对此参赛团队基于阿加犀融合架构操作系统并将高通QCS6490平台边缘智能物联网开发板作为主控运行算法、系统和应用搭建了建图、定位、自主导航的移动机器人底盘和具备视觉识别抓取功能的双臂机械臂。移动底盘视觉抓取的组合仿真到实物的无缝衔接打破机器人传统开发极限实现了混合式AMR双臂机器人的部署应用。 融合架构操作系统高性能硬件设备机器人开发从未如此简单
软件方面阿加犀融合架构操作系统AidLux提供原生的Android/鸿蒙LinuxRTOS使用体验在进行人机交互和导航、避障、运动控制、视觉识别等机器人功能的开发过程中无需再反复切换操作系统。AidLux平台上的Wayland显示服务器QtScrcpy拷屏登录方式有效解决了用户需要显示器配置、频繁远程连接的问题简化了调试和开发流程。
同时阿加犀边缘智能工具链中的模型优化平台AIMO在性能和功能上已经能够与行业内的领先企业媲美特别是在算力生态方面可以为用户提供高效、便捷的模型转换、优化、部署等服务。
硬件方面高通QCS6490平台边缘智能物联网开发板1×A782.7GHz 3×A782.4GHz 4×A551.9GHz的CPU配置在同价位的嵌入式开发板中优势明显8GB64GB的运存存储足以轻松应对大多数应用程序、算法操作、服务、系统的需求14TOPS的算力可满足各种应用场景对机器人的复杂运算和实时响应需求。这种高性能、低功耗的硬件配置不仅提供了卓越的性能还确保了成本效益使得性价比达到了极致。
在软硬件的双重优势加持下参赛团队在开发板上完成算法验证后无缝切换实物调试。从开发到部署一套设备全搞定跑完仿真跑实物实现了项目的快速验证——具备自主导航的机器人移动底盘六轴视觉机械臂。 核心部件全解析智能底盘与视觉机械臂
其中机器人移动底盘集成了先进的多传感器系统包括多目视觉、雷达、惯性测量单元IMU和轮速计。利用LVIO传感器的传感数据融合技术构建出带有RGB色彩信息的高分辨率纹理点云地图结合模型和语义信息实现精确导航控制。此外底盘还能接收并处理LVIO的原始数据将融合后的数据与纹理点云相结合精确识别并定位具有语义信息的目标点确保机器人能够准确到达预定位置。 视觉机械臂则通过集成find object物体识别技术、DH参数和AidLux的物体识别功能实现了对物体的精准识别和抓取。在操作过程中机械臂能够灵活切换“眼在手”和“眼在外”两种模式准确解析并抓取目标物体。此外通过远程操作采集的实时关节数据机械臂可以训练出精准的抓取模型简化抓取流程只需输入图像即可执行抓取任务。 除了作为高等教育和科研的学习套件提供高性价比且性能卓越的教学服务以外持续深化具身感知能力的混合式 AMR 双臂机器人还将有望在广泛的复杂应用场景中提供服务进一步拓展实用性和市场潜力。例如在工业生产装配领域自动完成物料搬运、组装等任务减少人力成本提高生产效率在新零售服务领域提供更加个性化和互动性的服务增强顾客购物体验等等。 ⚪智能电动轮椅
随着人口老龄化的加速电动轮椅的需求正日益增长。根据市场研究2023年中国电动轮椅行业市场规模约为 70 亿元人民币随着人口老龄化的加剧和慢性病患者数量的增加中国电动轮椅市场还将迎来爆发式增长。然而当前市场上的电动轮椅功能相对基础缺乏智能化辅助且普遍存在功能同质化的问题难以满足用户对高安全性和便捷性的需求。
与此同时自动驾驶技术正在迅速进步尤其是基于视觉的辅助驾驶技术已经趋于成熟。随着技术的进步这些技术的成本和算力需求正在显著降低为电动轮椅行业带来了新的发展机遇。考虑到电动轮椅的运行速度通常不超过10km/h且在遇到问题时需要立即提示用户接管电动轮椅成为了L2级别辅助驾驶技术应用的理想场景。
边缘智能技术驱动电动轮椅迈向无人辅助驾驶新台阶
对此参赛团队聚焦人流量较小的人行通道或公园景区等特殊应用场景将先进的辅助驾驶技术整合到现有电动轮椅中利用嵌入式系统本身多接口的优势使用单一摄像头以及一个算力平台打造出具有无人辅助驾驶功能的高端电动轮椅整体成本低且对原车的侵害小。 当然边缘智能计算终端电动轮椅的应用方案与汽车辅助驾驶系统的应用场景存在显著差异——电动轮椅的使用环境通常涉及更多的特殊情况和复杂多变的行驶条件有时甚至比传统道路更为复杂。因此电动轮椅的辅助驾驶系统也必须要能够应对这些挑战才能确保用户在各种环境下的安全和便利。
为满足这些要求参赛团队采用了算力高达14TOPS的高通QSC6490平台边缘智能物联网开发板通过摄像头和深度神经网络技术实现对电动轮椅周围环境的精准识别和测距。目前大多数电动轮椅的底层通讯依赖于CAN或UART串口该开发板具备与这些系统进行无缝对接和控制的能力从而使得电动轮椅能够实现L2级别的辅助驾驶功能。
该项目使用单个摄像头的纯视觉导航摒弃了自动驾驶中冗余的传感器使其电动轮椅在无需人工控制的情况下高效自主完成环境感知、障碍物避让、路径规划以及安全移动等一系列复杂操作极大地提升了电动轮椅的智能化水平和用户体验。 多场景应用赋能商业化落地启航
这一项目不仅推动电动轮椅技术的创新提升了电动轮椅的智能化水平还带来了更加人性化和智能化的产品为老年人和行动不便人士提供更加便捷、安全和舒适的移动体验满足他们对高品质生活的追求。
在确保实用性和性能稳定性的同时高通平台结合阿加犀技术打造的智能电动轮椅方案具有显著的经济优势如果该方案能够以千元的价格成功推向市场预计销售额将达到亿元规模。例如通过与电动轮椅制造商和医疗设备供应商合作提升传统产品的智能化水平或者直接向消费者和医疗机构销售智能辅助系统来实现。 ⚪陪伴式对话机器人
人工智能技术正逐渐渗透并影响着众多行业其中儿童智能机器人领域也受到了不少开发者的关注。随着技术的演进儿童对于智能终端的需求早已超越了单一的学习机而变成了一个既能益智又能提供情感陪伴的多功能伙伴儿童智能硬件也从最初的点读机、家教机发展到了现在的第三代——智能陪伴机器人。
在这样的背景下开发者们利用边缘智能技术为智慧教育注入新活力打造了一款集知识与情感于一体的陪伴式对话机器人demo。
边缘智能技术实现高质量陪伴陪护
这款机器人通过外接的摄像头、麦克风和扬声器进行数据采集并在高通QCS6490平台边缘智能物联网开发板上高效进行数据分析和处理。得益于阿加犀边缘智能开发工具链的支持开发者成功在端侧部署了大型语言模型LLM、自动语音识别ASR和文本转语音TTS技术使得机器人能够快速执行人脸识别、动作捕捉、图像识别、语音交互和前端效果展示等多种功能。 具体应用场景包括识别陌生人入侵并发送警报、监控儿童坐姿并提醒、拍照解题、英语口语对话练习、游戏互动如飞花令以及根据需求讲故事、播放音乐和进行自然流畅的对话等。总体来看这款机器人不仅能够提供学习辅导、情感支持和娱乐互动还能智能预警守护儿童安全。 输出文本的同时也会输出语音对话
结合前端用户界面UI该陪伴式对话机器人能够进一步打造符合儿童认知特点的可视化交互界面更完美地服务于需要高质量教育和陪伴资源的中高端家庭服务为3至12岁的儿童提供用户友好、多元化、互动性强且安全性高的陪伴体验。 高校开发者项目
随着科技的飞速发展机器人技术已成为推动社会进步的重要力量。在工业自动化、医疗健康、家庭服务等多个领域机器人的应用正逐渐深入人们的日常生活展现出巨大的潜力和价值。
全球对于智能机器人的需求日益增长这不仅催生了产业界的激烈竞争也为学术界提供了广阔的研究空间。在这样的大背景下高校作为科技创新的摇篮正利用其学术优势和研究资源积极投身于机器人技术的研究与应用开发中。
在本次大赛中高校的开发者们凭借深厚的学术积累和创新精神将理论研究转化为实际应用打造出了一系列令人瞩目的机器人作品。这些作品不仅在技术上实现了突破更在实际应用中展现出了强大的潜力为机器人技术的发展注入了新的活力。 ⚪智能机械手掌控系统
近年来随着人工智能技术的迅猛发展人类生活得到了极大的便利。但一些高危和高风险的工作仍需要人员长时间在其中工作这对工作者的身体健康和安全构成了严峻挑战。
为解决这些问题参赛团队通过深度整合高通QCS6490平台边缘智能物联网开发板阿加犀边缘智能工具链的软硬一体化能力快速打造了一款智能化、高性能且易于管理的智能机械手掌控系统。 先进视觉算法与多元技术助力智能操控系统升级
具体来说该项目接入高分辨率摄像头采用了YOLO 目标检测算法和先进的视觉处理算法Mediapipe实现用户手部动作位置、姿态和运动轨迹的高精度实时捕捉和分析处理。 同时设计和优化了实时反馈控制系统通过串口通信将处理后的数据转化为控制指令发送给机械手使其能够快速响应并实现精准动作控制确保在各种复杂场景下的高精度执行。
除了通过视觉识别实现控制以外参赛团队还通过HTML、CSS、JavaScript 和 Bootstrap 等技术制作了动态网页使用 Python 中的 Flask 框架控制服务器的网页请求并通过串口通信将请求发送到机械手从而使使用者实现进一步的精确控制。 开发者项目界面
此外关于扩展智能机械操控系统的应用范畴参赛团队并不仅仅着眼于手掌部分的精准识别与控制而是致力于实现整个机械臂的完整集成。该系统将全面覆盖从手掌、手腕、到肘部直至肩部的连贯控制形成一个高度协调的操作链。通过集成更多先进的传感器和复杂的控制算法能够赋予机械臂执行更加细腻和复杂动作的能力包括但不限于抓取重型物品、进行精密装配以及操作复杂的工具。
智能机械手绘制多域应用场景蓝图
为减少距离所带来的困扰参赛团队还引入了远程控制和实时数据传输技术。通过智能机械手掌控系统操作人员可以在远程环境中实时控制机械手避免了直接接触高危环境和有害物质的风险。这种远程操控的能力显著提升了系统在危险环境中的应用价值同时也具备广阔的市场潜力和重要的社会效益例如赋能智能机械手在医疗手术、工业生产和服务机器人领域等发挥关键作用。
2024年高通边缘智能创新应用大赛已圆满结束但其搭建的交流平台为参赛者架起了一座促进项目商业化落地的桥梁。参赛团队将继续基于阿加犀技术和高通平台深化智能机械手掌控系统的研发。例如在系统中引入了语音控制功能甚至结合边缘端语言大模型应用让用户通过简单的语音命令操控机械手臂实现多样化的操作需求。
融合语音控制的设计能够极大提升操作的效率和灵活性让机械臂的使用变得更加直观和用户友好从而拓宽其适用范围使其能够轻松适应各种复杂和多变的工业应用场景进而在工业自动化和智能化领域实现重要价值。 ⚪基于大型语言模型与语音交互的全端侧聊天机器人
近年来智能语音聊天机器人以下简称“聊天机器人”行业呈现出井喷式发展态势。据市场研究报告预测未来几年全球智能语音聊天机器人市场将保持高速增长态势预计从2023年的约200亿美元市场规模到2027年将增长至超过500亿美元年均复合增长率超过25%。
但聊天机器人在处理自然、复杂的语言交互时仍存在理解偏差和生成不自然回复的问题特别是在多轮对话中保持上下文连贯性和准确捕捉用户意图成为一大难题。此外聊天机器人的智能化、个性化服务、数据隐私与安全风险以及研发和维护的技术、成本门槛也是巨大的挑战。
端侧大模型赋能多技术融合创新实践
在此背景下参赛团队打造了一款端侧智能聊天机器人集自动语音识别、大型语言模型与文本到语音转换技术于一体能够在无网络环境下实现流畅语音交互——将用户的语音输入识别转换为文本并通过大型语言模型生成相应的对话内容最后通过文本到语音转换技术再将生成的文本回复转换为自然流畅的语音输出。 开发者打造的端侧LLM聊天机器人外形呆萌
参赛团队利用自研的语音唤醒和自定义语音活动检测技术结合微调的Whisper模型和Qwen系列大语言模型通过阿加犀边缘智能工具链技术对模型进行优化部署并充分发挥高通QCS8550平台边缘智能物联网开发板的性能大幅提升了模型的推理速度实现了模型在高通平台上的高效运行确保其在边缘侧与用户进行流畅的语音互动。
端侧方案优势尽显卓越体验开启多元应用未来
全端侧解决方案支持离线环境运行这意味着无论身处何地即使在飞机、野外等信号受限的极端环境中用户也能畅享无缝、稳定的的语音交互体验。这一特性不仅极大地拓宽了应用场景更为用户带来了前所未有的便利。
此外得益于边缘计算技术的应用本款聊天机器人直接在本地进行数据储存和处理不仅有效避免了上传云端而导致的数据泄露风险还成功降低了部署和硬件成本用户无需承担持续性的订阅制云端服务费用。
在用户体验方面端侧智能聊天机器人通过多轮对话管理、情感识别和个性化推荐等技术提供了更加人性化、智能化的服务和独特有趣的交互内容。
凭借高性价比、高安全性、高性能、低功耗等多项优势本项目技术方案有望深刻影响情感支持、医疗健康、娱乐休闲、金融等多个领域为各类业务场景提供便捷、安全与经济的语音交互新体验。 企业开发者项目
机器人技术正向深度智能驱动、高效以虚驭实、泛在敏捷操作及多元感知交互方向演进。这意味着机器人不仅能够执行简单的任务还能够更加智能化地与人类协作提高生产效率和质量。
例如在工业领域智能机器人已成为现代生产线上不可或缺的一部分广泛应用于焊接、冲压、涂装、装配等工艺流程在服务领域智能机器人也逐渐成为人们日常生活中的重要助手医疗机器人、养老机器人、智能家居机器人等正不断涌现为人们提供更加便捷、高效的服务。
在此次大赛中企业开发者们立足自身所能凭借行业视角洞悉市场脉络基于高通平台打造了一系列既具有创新意义又具备实际应用价值的机器人作品。 ⚪大田农业智能除草、喷药机器人
在农业现代化的进程中机器人技术的应用也成为了推动行业发展的关键力量。特别是在大田种植面积国内最大的新疆农业现代化的需求尤为迫切。其中新疆棉花产业不仅种植面积广阔经济收益显著而且农艺涉及多、技术挑战大适合打磨标准化产品。
此外数据显示新疆2021年飞防渗透率达到80%即超80%的耕地面积使用过农业无人机作业该地区无人化程度高产业链成熟也为进一步的技术渗透和应用提供了良好的基础。正是在这样的背景下参赛团队将目光投向新疆棉花产业连续3年在新疆进行棉花数据采集且持续采集了完整的种植季数据属国内唯一并基于如此大量数据进行模型训练打造了田间管理机器人。
与市场上功能单一例如只能精确除草或打顶的农业机器人相比这款田管机器人采用了先进的视觉识别技术和多传感器融合技术结合无人驾驶技术能够实现对农作物田间管理的全周期、全作业覆盖从而大幅提升农业生产效率和精准度。 阿加犀打通高通产品到智慧农业解决方案场景应用的“最后一公里”
本次大赛中参赛团队在阿加犀技术支持下顺利将该方案迁移至高通平台。这一技术迁移显著提升了机器人的性能使其能够高效执行视觉识别和精准的三维定位追踪等关键功能。针对棉花种植的全过程该机器人可在所有生长周期内实现田间作业包括除草、打顶、杀虫、杀菌、化学控制、叶面施肥、脱叶、中耕松土、自动封土、防风固膜以及自动化播种等等。
在阿加犀边缘智能工具链和高通QCS8550平台的赋能下该机器人前置多组双目摄像头能够同时识别前方3米内数百个物体精准判断是苗是草精准定位作业目标在非铺装路面1.1米/秒的速度下保障3厘米的作业精度误差对作物误伤率低于5%。
此外该机器人还充分满足田间作业在机耕带沿种植条行驶、自动跨膜、水带阀门规避、精确定向喷药、补药、跨地块等各项需求同时支持现有成熟机具及新型自动化机具挂载真正实现全无人自动、更高效率作业推动农业现代化建设和智能化升级。 边缘智能助力大田作业增效升级
经过测试该机器人相比无人机作业增效1.5倍相比拖拉机增效4倍降低种植户的综合田管成本50%以上提高农服公司、合作社综合收益50%以上有望在机械化率高的大田农业场景中以无人一体化主机实现对中小型拖拉机、无人机的全面替代升级例如棉花、玉米、辣椒、番茄、西瓜种植地等。
这款为大规模种植的农作物提供田间管理作业的智能自动化农业机器人在阿加犀工具链的辅助下充分发挥并高效利用了高通平台的强大性能凭借边缘智能技术的优势切实提高了生产效率和资源利用率更好地落实了国家智慧农业战略有望为新疆种植业务及后续国际业务周边产棉大国提供有力支撑。 ⚪超声医疗机器人
人工智能技术在医疗领域的应用日益广泛涵盖了急诊预检、病情评估和医学影像智能辅助诊断等多个关键场景。通过整合计算机视觉、自然语言图像识别和机器人技术等前沿科技人工智能为传统医疗模式带来了革命性的变革并推动了新型诊疗方法的发展。
在这一技术浪潮中具备专业能力的医疗机器人展现出了显著的优势和价值。参赛团队基于高通QCS6490平台边缘智能物联网开发板开发了一款集成人工智能技术、实时远程控制技术和超声影像技术于一体的智能超声机器人。这款机器人利用力反馈监测技术能够精确复制超声专家的操作手法在护士完成初步审核后自动执行超声扫描辅助患者完成超声检查。 该超声机器人具备多项先进功能包括自动影像保存、影像质量判断提示、自动扫查引导、动态实时病灶标记和组织实时标记等并支持多部位扫查。目前该机器人已实现甲状腺、乳腺、腹部、血管、胎儿产检等部位的实时辅助诊断算法且心脏等更多部位的算法正在积极开发中。
机器人精准扫查医疗诊断更便捷、更智能
在具体的应用场景中超声机器人能够在二级和三级医院自动导航至患者身边进行扫查并将标准视频实时传输至超声诊断中心使医生能够远程实时坐诊或在其他时间段完成诊断。在乡镇或社区卫生院护士可以将超声机器人推至患者床边由机器人自动完成扫查并将视频发送至上级医院的超声诊断中心由上级医生后续出具诊断报告。此外超声机器人还能自动介绍上级医生的基本信息和标准超声操作手法。 超声机器人在为病人进行超声扫查
该超声医疗机器人可将资深教授扫查手法复现到基层医疗单位有望广泛应用于基层筛查、远程诊疗、院前诊断、健康体检和医疗救援等多个场景能够有效缓解超声科医生的工作负担满足跨院区、跨科室、跨区域的远程医疗需求。 ⚪室内外一体配送机器人
随着5G、人工智能等前沿技术的快速发展数字化和智能化转型已成为全球各行各业的共同趋势。消费者对于便捷生活的需求日益增长对物流配送服务的效率和质量提出了更高要求。在这样的市场背景下参考团队专为社区、园区等复杂场景设计了一款全自主配送机器人。 基于高通QCS6490平台边缘智能物联网开发板打造的全自主配送机器人具备卓越的导航定位能力和强大的环境适应性。它能够在雨雪冰雹、高温高寒等极端气候条件下在景观道路、草坪泥地等复杂地形中稳定运行。此外该机器人能够与电梯、闸机、推拉门、感应门禁、可视电话等传统设施无缝对接实现室内外自如运行从小区门口无缝衔接至家门口。
此外该配送机器人搭载的SaaS系统能够整合快递、超市、周边零售商等资源实现用户下单后的24小时全链路配送上楼到家服务。这不仅极大提高了物流配送效率也为消费者带来了前所未有的便利。 室内外一体机器人高效破解复杂场景配送难题
在应用前景方面配送机器人市场正迎来快速发展期。随着电子商务的蓬勃发展和“最后一公里”配送难题的日益凸显机器人以其高效、低成本、全天候服务的优势成为解决这一问题的关键技术之一。预计未来几年配送机器人将在物流、零售、餐饮等多个领域得到广泛应用市场规模将持续扩大。
目前参赛团队打造的室内外配送机器人已在高端社区、养老院、产业园区等场景中陆续落地显示出其广泛的应用潜力和市场前景。随着技术的不断进步和市场的进一步开拓该机器人有望在未来的智能物流领域扮演更加重要的角色服务全国数以万计的商业楼宇和住宅社区推动物流配送服务的跨区域发展满足亿万消费者的需求。
