我们在做机器人或小车调试时，只能通过串口发命令来控制，有时跟着出门了还得带着电脑，实在很不方便，今天来教大家如何使用PS2蓝牙手柄来直接控制Arduino设备。
小猪学arduino—PS2蓝牙手柄控制
发表评论
分类目录归档：人工智能ai
机器人操作系统ROS—使用深度相机实现vSLAM建图与导航
上一次，我们实现了激光雷达+自研底盘的SLAM建图和导航。这次将带大家一起使用深度相机实现机器人的SLAM建图及导航。
机器人操作系统ROS—自研底盘的精准控制
我们完成SLAM建图后，如何在导航时让自己的底盘正常工作，是很多新手面临的问题。上位机大家通常采用pi或nvidia jetson nano甚至更强算力的板子，系统一般采用ubuntu，这使得上位机的库几乎是通用的；而底盘不同，单片机有stm32、arduino、51等，电机的种类就更多了，电机的精准度和质量参差不齐，容易在底盘动起来后难以实现精准控制。如何利用电机编码器进行精准的底盘移动并上报odom，不少人会在这里花费大量时间，本文将针对此类问题进行具体讲解。
CentOS8安装Dlib
最近换了台服务器，在发布pydp时依赖的人脸识别库dlib总是安装失败，查了下pip安装dlib似乎都会遇到这个问题，这里记录下解决方法。
机器人操作系统ROS—树莓派Pi4B+激光雷达SLAM建图环境搭建(Ubuntu20.04.3 + ROS Noetic)
之前学习ros，nvidia jetson nano板子装的ubuntu18.04系统比较正常，但是pi4b的板子装的raspberry系统会出现各种依赖问题。最近想充分利用下几块Pi4B的板子，反复试了pi4安装官方/非官方的ubuntu18.04.5+ROS Melodic版本，最终都会卡在map-server或rviz等依赖上。最终用Pi4B + Ubuntu20.04.3 + ROS Noetic + RpLidar安装测试成功，记录一下安装过程。
机器人操作系统ROS—rviz上的”2D Nav Goal”按钮不工作
在测试ros的slam建图，建好地图使用时，出现一个很诡异的现象：在rviz上里点击”2D Nav Goal”按钮指定目的地时机器人没反应，也没有任何错误日志，像是就没发出去似的。
机器人操作系统ROS—分布式跨机通讯配置
ROS 机器人的实验和开发中，通常需要一台移动机器人和一台 PC 配合使用，不少初学者都会有个困惑，即PC和机器人上的ROS命令都只针对本机，而机器人上的ubuntu通常都不是桌面版，那么PC上那些可视化的工具怎么应用在机器人上呢？即怎么才能利用PC上的ROS指令和工具直接访问和展示机器人上的数据呢？其实非常简单，通过ROS_MASTER_URI就可以方便的实现，本文我们就来简单介绍一下吧。
智能驾驶功能软件平台设计规范
一、概述
近期国家智能网联汽车研究中心及十几家产业链公司联合起草并发布业界首个智能驾驶功能软件平台设计规范，已经详细到接口/信号数据结构定义粒度，将会加速推动自动驾驶汽车软件的规范化。
机器人操作系统ROS—使用激光雷达RpLidar A1进行SLAM定位建图
移动机器人在环境中获取障碍物的具体位置、房间的内部轮廓等信息都是非常必要的，这些信息是机器人创建地图、进行导航的基础数据。考虑成本，买了一个SLAMTEC公司的低成本二维激光雷达RpLidar A1进行初步的学习，它可以最快10hz的频率检测360度范围内的障碍物信息，最远检测距离12米，适合室内移动机器人使用。本文讲解如何使用它感知周围环境。
机器人操作系统ROS—树莓派Pi4环境(Raspberry Pi OS + ROS Melodic)
新入手一个Pi4，4核1.5GHz 64位A72处理器、8G内存（想起我的第一台电脑，赛扬处理器+512M内存…），用来做机器人的控制中心。由于树莓派4暂时还无法使用Ubuntu MATE，本文讲解给它安装Raspberry Pi OS系统 + ROS Melodic的过程。
机器人操作系统ROS—Arduino执行机构
最近学习ROS，涉及底盘移动等执行机构时，发现买robot套件太贵了，又懒得从pi上直接开发，翻箱倒柜找到一个以前跟儿子一起做的arduino履带坦克，就拿它作ros机器人的action执行机构吧。
机器人操作系统ROS—ROS2探索
简单点说，ROS2与ROS最大的区别就是：
机器人操作系统ROS—入门
上次我们通过机器人操作系统ROS—初探了解了ROS的基本概念和运行机制，并用内置的小龟模拟器进行了测试。本文我们开始学习如何编写自定义的Service/Client节点进行指定msg格式通信、尝试bag的录制和回放、并简单了解下三维可视化。
一、创建ROS msg消息和srv服务格式
温习一下，上一次我们了解到topic里的Message、ROS Services概念：
消息(msg):
msg文件就是一个描述ROS中所使用消息类型的简单文本。它们会被用来生成不同语言的源代码。
机器人操作系统ROS—初探
一直听到ROS这个名字，很好奇它为什么在机器人领域这么出名，所以从今天起我将从零开始学习一下，看看它到底有哪些神奇之处。本文作为初探篇会先带大家了解ROS的基本概念，通过安装和创建/运行程序包了解Nodes节点、Topics/Msg、Service服务/参数服务器、几个常见的工具。
ROS (Robot Operating System, 机器人操作系统) 提供一系列程序库和工具以帮助软件开发者创建机器人应用软件。它提供了硬件抽象、设备驱动、库函数、可视化、消息传递和软件包管理等诸多功能。ROS遵守BSD开源许可协议。
ROS的官网：https://ros.org/
ROS 图（graph）概念：
-
Nodes:节点,一个节点即为一个可执行文件，它可以通过ROS与其它节点进行通信。
华硕ROG安装ubuntu18.4+CUDA10.0+CUDNN7.4
申请了好久的预算老婆终于批了，入手华硕的GPU本（RTX2070），默认预装了正版win10，平时还是习惯用linux，本文记录了如何安装ubuntu18.4的过程。
高可用/高安全的物联网实时消息传输服务方案选型
目前全球进入人工智能、物联网、自动驾驶、5G的新一轮技术革命浪潮中，深度学习、强化学习技术使计算机在某些特定领域（例如人脸识别、AlphaZero）下实现了比人类更好的效果，物联网促进所有电子设备的互联互通，自动驾驶使汽车更加智能和安全，5G使万物互联成为可能。
很多新技术在现实中的落地应用都避免不了大量的消息实时通信，例如物联网或自动驾驶，要想实时的获取海量设备或车辆的信息并进行远程控制指令下发，频繁的断开连接是无法确保通信效率和可靠性的，尤其是自动驾驶v2x等场景，云端结合路灯、红绿灯、其他车辆的数据判定某辆车必须进行减速以避免事故时，指令下发的时效性和送达率将是致命的问题，另外还有网络信号不稳定、地库等特殊环境信号差等情况，本文将针对这些问题来研究和探讨如何构建一个支持弱网的高送达率、高时效性、高安全性、高传输效率的实时双向/多向消息传输服务。
多源融合SLAM的现状与挑战
全国SLAM技术论坛由中国图象图形学学会CSIG主办，每年举办一届，邀请学术界和企业届的专家围绕SLAM技术的研究、发展以及产业化应用作技术分享。本文整理自浙江大学刘勇教授在第二届全国SLAM技术论坛中的报告。
刘勇，浙江大学智能系统与控制研究所教授，浙江大学求是青年学者，浙江省“新世纪151人才工程”第二层次培养人员，担任浙江省机器换人专家组专家。承担NSFC-浙江两化融合联合基金、国家自然科学基金青年和面上项目、科技部863重点项目子课题、浙江省杰出青年基金、工信部重大专项等国家级省部级项目多项。获得浙江省自然科学奖2017（一等奖），科学进步奖2013（一等奖）。主要研究方向包括：智能机器人系统、机器人感知与视觉、深度学习、大数据分析，多传感器融合等。
多源融合SLAM-现状与挑战
SLAM的定义比较经典，它的核心就是一个状态估计问题，根据传感器观测到的数据以及一些实际的模型，如何对这两者进行结合来准确估计实际情况。这个问题虽然在数学模型上比较简单，但是在实际过程中会面临很多的挑战以及不如意的实际现象。
首先的一个挑战就是landmark在实际应用中的复杂性（由于环境的复杂性引起）；其次，由于sensor的不同，也会存在一些其他的问题。具体来讲，在纹理少、四季天气变化、光照剧烈变化、车载条件IMU退化、长走廊、机器人剧烈运动等情况下，原来很好用的SLAM方法在这些情况下往往会无用。这都是很棘手的场景，这些场景会给我们带来实际应用中的困惑，采用单一的传感器会面临这个问题，所以多源融合这个领域很热门，被产业界所认可。
基于VL-SLAM的无GPS自动驾驶系统研究
随着自动驾驶技术的发展，在未知环境中智能汽车的定位技术成为该领域研究的核心。目前定位技术主要的解决方案是基于全球定位系统（GPS），但是在某些特殊的环境中如下车库，没有 GPS 信号如何解决定位问题就是本文研究的关键所在。
近年来，同步定位与地图构建（Simultaneous Localization and Mapping，SLAM）技术的日益成熟，配合多传感器融合解决方案，自动驾驶车辆在未知环境无 GPS 信号的情况下，完成路径规划的自动驾驶任务得以实现。本文先介绍了自动驾驶系统概述、视觉激光融合的 SLAM 理论与算法，又基于 ROS 框架搭建了自动驾驶汽车的建图与路径规划仿真实验，最后完成了在地库中的实车算法验证实验，并做了论文结论总结与自动驾驶技术的未来展望。
1.自动驾驶系统概述
自动驾驶汽车即无人驾驶智能汽车，在没有人为参与的情况下，依靠车内的控制系统与智能算法，通过多重传感器数据融合控制汽车底层协议完成正常的车辆行驶功能。智能驾驶汽车是一个综合的集成系统，包括了自动泊车系统、自动驾驶系统、障碍物停障系统等，又分为了感知层、决策层和控制层三个部分如图 1 所示。
其中感知层包括各路传感器的数据采集、处理与融合等，更加精确和全面的感知周围环境信息。决策层的输入包括感知层的信息、路径的规划以及控制层反馈回来的数据，通过增强学习算法下发决策指令。决策指令包括了循迹、跟车、超车、刹车、转向、调头等等；最终通过控制层下发 CAN 总线下发指令完成智能驾驶汽车的自动驾驶任务，包括油门与刹车的控制、方向盘与挡位的控制等等。
自动驾驶汽车发展与研发中的核心技术是车辆线控技术和车辆精确定位技术。本论文主要分析车辆的精确定位，目前最常用的解决方法就是使用 GPS，可以让汽车实时地得到自身的位置坐标。本文则基于 SLAM 技术研究了一种新的定位方法。
结合 SLAM 技术，自动驾驶汽车的传感器分别由摄像头、激光雷达、车载毫米波雷达、车载超声波雷达、惯导组合、工业控制器等组成，具体的安装位置如图 2 所示。
使用openMVG+PMVS实现视觉三维重建
一、什么是视觉三维重建？
我们知道，照相机的原理是将一个三维场景投影到二维平面。所谓视觉三维重建，顾名思义就是从已有的二维图像中复原原始三维场景。
三维重建的原理大致如下：
- 首先，通过多角度拍摄或者从视频中提取得到一组图像序列，将这些图像序列作为三维重建系统的输入；
- 然后分析多个视角的图像，根据纹理特征提取出稀疏特征点（稀疏点云），通过这些特征点估计相机位置和参数；
- 在得到相机参数并完成特征点匹配后，就可以获得更稠密的点云（这些点可以附带颜色，从远处看就像还原了物体本身一样，但从近处能明显看出它们只是一些点）；
- 最后根据这些点重建物体表面，并进行纹理映射，就还原出三维场景和物体了。
基于图像的三维重建基本流程
对比几个三维重建系统
本文简要介绍三维重建的基本流程，列举若干常见系统，给出项目和文档地址，比较它们的工作管线，为深入钻研系统结构作为铺垫。
三维重建概述
我们知道，照相机/摄像机的原理是将一个三维场景或物体投影到二维平面上，过去是胶片，现在是经过感光元件再记录到存储器。降维的过程通常不可避免地会存在信息的损失，而所谓的重建(Reconstruction)，顾名思义就是要从获取到的二维图像中复原原始三维场景或物体。
相对照相机的诞生，三维重建的概念本身说年轻也算年轻；但相比从2012年开始比较火的深度学习、神经网络等概念，三维重建也算是古老的研究领域了，因为第一个基于图像的三维重建系统诞生于1992年（CMU的Tomasi等人的工作）。
三维重建的流程大致如下：首先，通过多角度拍摄或者从视频中提取得到一组图像序列，将这些图像序列作为整个系统的输入；随后，在多视角的图像中，根据纹理特征提取出稀疏特征点（称为点云），通过这些特征点估计相机位置和参数；在得到相机参数并完成特征点匹配后，我们就可以获得更稠密的点云（这些点可以附带颜色，从远处看就像还原了物体本身一样，但从近处能明显看出它们只是一些点）；最后根据这些点重建物体表面，并进行纹理映射，就还原出三维场景和物体了。
概括起来就是：图像获取->特征匹配->深度估计->稀疏点云->相机参数估计->稠密点云->表面重建->纹理映射
目前已有不少免费系统（部分系统已开源）能够完成三维重建的整个流程，在深入研读某一个系统的代码之前，我决定先根据前人资料横向比较一下这些系统的异同。除了亲自运行了几个系统外，主要参考了这个视频的讲解（需要科学上网），以下内容的部分截图也出自这里。感谢视频原作者和以下每个系统的创造者。
现有系统简要对比
图中从左至右的过程依次是从原始图像到稀疏点云、重建稠密点云、重建表面和纹理映射。对应列的绿色代表该系统具备此功能，红色反之。