首页 / ROS开发
#

ROS开发

#
7326次浏览 114人互动
此刻你想和大家分享什么
热门 最新
机器人/自动驾驶C++嵌入式项目:低时延ROS-大模型Agent-端到端机器人
1. 项目描述:设计并实现了一套完整基于RK芯片-低时延ROS-大模型Agent-端到端机器人系统,涵盖ROS-高带宽数据-共享内存低时延通信优化,低时延端侧大模型 Agent 离线/在线双版本交互(离线版:ASR->Qwen3-0.6B微调-量化部署->Function Call指令遵循->TTS全流式链路;在线版:Qwen全家桶ASR->qwen-plus记忆推理->Function Call指令遵循->TTS全流式响应)、完整的低时延相机视觉处理全链路(V4L2相机驱动数据采集->RK-MPP/RGA硬件加速优化数据处理->多线程NPU推理加速YOLO模型目标检测->多传感器融合实现目标跟踪)、底盘运动控制、建图导航、STM32-MCU固件开发、工业化部署(自启动、Docker容器化部署)、端侧系统性能监控等核心模块。系统采用模块化架构,支持ROS1/ROS2通信切换,实现了高性能、低延迟的实时通信与数据处理能力。1.1 功能概述1. ROS-高带宽数据-共享内存低时延通信优化2. ROS1/ROS2通信切换,ROS1 VS ROS2 机器人时延性能分析3. 端侧大模型在线/离线部署-记忆-微调-量化-部署-机器人指令遵循4. 低时延相机视觉处理全链路:V4L2相机驱动数据采集->RK-MPP/RGA硬件加速优化数据处理->多线程NPU推理加速YOLO模型目标检测->多传感器融合实现目标跟踪5. 上位机-ROS-控制模块:运动学建模、PID控制算法和里程计计算6. 下位机-STM32 MCU固件:负责实时电机控制、编码器反馈和安全保护7. 机器人导航系统模块 :集成ROS导航栈实现机器人自主导航系统,解决机器人路径规划、障碍物避障、定位和导航控制问题。8. 雷达传感器链路:实现YDLidar激光雷达的完整驱动链路,通过适配器模式封装YDLidar SDK、工厂模式支持多雷达类型、配置管理实现参数验证。9. 端侧监控系统:设计并实现系统性能监控框架,解决机器人系统中系统级和进程级资源监控、性能分析和问题定位问题。10. 配置管理与工业化部署:设计并实现完整的Web控制界面、环境自动化配置脚本、自启动方案以及Docker容器化部署方案,解决机器人系统配置管理分散、部署复杂、运维困难等问题,确保机器人系统的工业化部署和运维管理。11. 机器人URDF模型:设计并实现完整的机器人URDF模型系统,解决机器人物理建模、多传感器坐标系定义、TF变换树构建、Gazebo仿真配置等问题。
点赞 评论 收藏
分享
具身智能数据平台-刻行时空-招聘机器人应用工程师
刻行时空,成立于2022年5月,是时空智能领域的数据基础设施构建者。承载着“以数据驱动通用智能”的使命,我们为行业客户提供全面的数据基础设施产品与解决方案,支持其研发、算法开发及运维等核心环节。【接受优秀应届生、或者在校生实习】简历直达:**********岗位JD岗位职责- 研究并分析主流的具身智能算法、仿真软件、数据与相关工具链(如 LeRobot、HuggingFace 数据集、RL policies、Mujoco/Isaac Sim/Gazebo 等)。 将上述技术与刻行时空的产品融合,通过搭建典型示例项目,帮助行业从业者快速落地- 构建面向实际开发者的参考项目与模板,沉淀复用性强的解决方案;- 协同内部研发团队,定义平台能力接口标准,辅助完成产品的开发与演进;- 持续跟进机器人/具身智能/边缘大模型等技术发展,识别可整合进平台的新工具。- 协同售前工程师与客户进行对接,完成解决方案的搭建。任职要求- 本科及以上学历,计算机、机器人、人工智能、自动化等相关专业;- 有完整机器人软件、算法或具身智能项目的实战经验,至少在感知/决策/控制/仿真/算法部署等方向之一有深度参与;- 熟悉 ROS / ROS2,有实际开发或系统调试经验;- 熟悉 Python 编程,能够快速搭建脚本系统; C++ 为加分项;- 有开源模型本地部署经验(如 HuggingFace、ONNX 推理、TensorRT 加速等)者优先;- 熟悉至少一种机器人仿真平台,如 Gazebo、Isaac Sim、MuJoCo,并具备任务构建与调试能力;- 熟悉 Linux 下的研发环境,掌握 Git、Docker 等开发工具。加分项- 有具身智能算法、控制策略(RL/IL)或多模态感知相关经验;- 有移动机器人 SLAM、导航、路径规划等算法移植和实机验证经验;- 熟悉机器人相关数据闭环流程,包括数据采集、解包、标注、训练、部署、测试等任意模块;- 有实际参与面向企业/开发者的工具平台开发或 SDK 构建经验;- 有 GitHub 技术项目可展示者优先。
点赞 评论 收藏
分享
玩命加载中
牛客网
牛客网在线编程
牛客网题解
牛客企业服务