DQN算法实战-小车上山案例分析实验环境用线性近似求解最优策略用深度Q学习求解最优策略 ……继续阅读 » 柯南404 4年前 (2021-04-26) 2764浏览 0评论525个赞
1、变换设置 设计一……继续阅读 » 月照银海似蛟龙 4年前 (2021-04-26) 2341浏览 0评论1589个赞
策略梯度方法-python车杆平衡实战案例分析同策策略梯度算法求解最优策略异策策略梯度算法求解最优策略……继续阅读 » 柯南404 4年前 (2021-04-26) 2004浏览 0评论2348个赞
坐标系中，一个刚体的状态可用位置和姿态来描述，位置即为该刚体在坐标系中的空间位置，用一个坐标向量即可表达。而要描述刚体的姿态，有很多种表示方法，以下列出常用的：1 旋转矩阵（Rotation matrix）旋转矩阵是在乘以一个……继续阅读 » 寒鸦Glory 4年前 (2021-04-26) 2847浏览 0评论1151个赞
基本概念：1、状态方程： 某一时刻的状态用Xt表示，它是一个列向量，表征了当前位置Pt和当前速……继续阅读 » Techblog of HaoWANG 4年前 (2021-04-26) 2026浏览 0评论190个赞
0x00 概述在前面的教程中，一直都是使用默认提供的一个地图。是不是stdr只能使用这个地图呢？那你就太小看stdr了，它加载地图的方式其实跟我们在amcl中要进行定位时的地图是一样的，都是需要类……继续阅读 » ROS小课堂 4年前 (2021-04-26) 2842浏览 0评论1421个赞
……继续阅读 » yuanguobin01 4年前 (2021-04-26) 2807浏览 0评论1179个赞
actor-critic方法（一）— 同策方法同策actor-critic方法动作价值actor-critic算法优势actor-critic算法……继续阅读 » 柯南404 4年前 (2021-04-26) 1924浏览 0评论146个赞
ROS TF2当前坐标系如何计算其它历史坐标系的坐标变换1、时间旅行2、更高级 的 lookupTransform() 函数 API3、检查结果4、 完成……继续阅读 » 月照银海似蛟龙 4年前 (2021-04-26) 3012浏览 0评论2022个赞
英文原文链接：http://www.bzarg.com/p/how-a-ka……继续阅读 » Techblog of HaoWANG 4年前 (2021-04-26) 2281浏览 0评论1701个赞
1.序言倒腾一段时间的LIO-SAM，实在是累，是那种没任何收获的感觉。吐槽几点……继续阅读 » yuanguobin01 4年前 (2021-04-26) 1749浏览 0评论618个赞
1 机器视觉为什么要做相机标定机器视觉是采用相机成像来实现对三维场景的测量、定位、重建等过程。是一个利用二维图像进行三维反推的过程，我们所处的世界是三维的，而图像或者照片是二维的，可以把相机认为是一个函数，输入量是一个三维场景，输出量是一幅二维图像。正……继续阅读 » 寒鸦Glory 4年前 (2021-04-26) 2178浏览 0评论763个赞
hector_quadrotor编译总结 | ubuntu 14.04 ros-indigo版本基于Ubuntu 14.04 LTS系统所用ROS版本为 Indi……继续阅读 » windSeS 4年前 (2021-04-26) 1984浏览 0评论1043个赞
在MDP环境中训练Q learning创建MDP智能体环境创建Q learning智能体训练Q learning智能体验证Q learning结果……继续阅读 » 柯南404 4年前 (2021-04-26) 1591浏览 0评论845个赞
ROS TF2 中的 四元数 基础部分1、四元数的组成……继续阅读 » 月照银海似蛟龙 4年前 (2021-04-26) 3086浏览 0评论2249个赞
1 概述机器视觉就是用机器代替人眼和人脑来做测量和判断。机器视觉系统工作的基本过程是获取目标的图像后，对图像进行识别、特征提取、分类、数学运算等分析操作，并根据图像的分析计算结果，来对相应的系统进行控制或决策的过程。在很多机器视觉应用中……继续阅读 » 寒鸦Glory 4年前 (2021-04-26) 1920浏览 0评论2920个赞
在机械工程中，Denavit-Hartenberg 参数(也称为 DH 参数)是与一个特定约定相关联的四个参数，用于将参考坐标系附加到空间运动链或机器人操作臂的连杆上。“Jacques Denavit and Richard Hartenberg ……继续阅读 » Techblog of HaoWANG 4年前 (2021-04-26) 3203浏览 0评论2767个赞
0x00 gmapping简介gmapping是一种高效的Rao-Blackwellized粒子滤波器，用于根据激光雷达测距数据来生成2D珊格地图。gmapping是OpenSLAM下……继续阅读 » ROS小课堂 4年前 (2021-04-26) 1338浏览 0评论309个赞
马尔可夫决策-悬崖寻路python实现案例分析要点概括环境使用求解Bellman期望方程求解Bellman最优方程总……继续阅读 » 柯南404 4年前 (2021-04-26) 1519浏览 0评论2288个赞
【Matlab Robotics Toolbox】robotics toolbox学习及使用记录，方便自己后面复习、改进。基于Matlab R2019b 9.5; Peter Corke的Robotics Toolbox 10.3.1……继续阅读 » Techblog of HaoWANG 4年前 (2021-04-26) 1553浏览 0评论1709个赞
hector_quadrotor编译总结 | ubuntu 16.04 ros-kinetic版本基于Ubuntu 16.04 LTS系统所用ROS版本为 Kin……继续阅读 » windSeS 4年前 (2021-04-26) 1424浏览 0评论2797个赞
0x00 hector_mapping简介hector_mapping是一种SLAM算法，它可以在没有里程计的情况在未知环境下构建当前环境的地图。跟gmapping不同，gmapping建图时需要……继续阅读 » ROS小课堂 4年前 (2021-04-26) 1447浏览 0评论543个赞
这篇博客主要是一些调试中踩的坑及验证过的东西，以供大家参考。1.GTSAM使用篇……继续阅读 » yuanguobin01 4年前 (2021-04-26) 2358浏览 0评论2706个赞
在无人车系统（十一）：轨迹跟踪模型预测控制(MPC)原理与python实现【40行代码】中介绍了MPC……继续阅读 » windSeS 4年前 (2021-04-26) 2258浏览 0评论1084个赞
0x00 为何需要定点巡航现在我们已经可以在已知地图中进行自动导航了，那就可以利用这个功能来解决一些实际生活中的需求了。下面就是我思考的几个实际场景中可能用到定点巡航的功能：在工厂中经常会遇到需要……继续阅读 » ROS小课堂 4年前 (2021-04-26) 1428浏览 0评论2133个赞
……继续阅读 » Techblog of HaoWANG 4年前 (2021-04-26) 2499浏览 0评论2999个赞
opencv调用yolov3模型进行深度学习目标检测，以实例进行代码详解对于yolo v3已经训练好的模型，opencv提供了加载相关文件，进行图片检测的类dnn。下面对怎么通过opencv调用yolov3模型进行目标检测方法……继续阅读 » 月照银海似蛟龙 4年前 (2021-04-26) 2015浏览 0评论675个赞
出租车调度-Q learning & SARSA案例分析实验环境使用同策时序差分学习调度异策时序差分调度< ……继续阅读 » 柯南404 4年前 (2021-04-26) 2827浏览 0评论2404个赞
0x00 简要介绍在stdr仿真这个系列教程中，前面已经有八篇文章了。到现在才开始正式的指导大家如何下载前面所有的测试代码，那是因为我希望大家可以自己动手来输入各篇文章中的代码来测试学习。如果我一开始就告诉大家如何下载……继续阅读 » ROS小课堂 4年前 (2021-04-26) 2586浏览 0评论2463个赞
之前写的文章分析了全向小车运动原理和基本构型，今天尝试把它部署到 Ros 上。……继续阅读 » Techblog of HaoWANG 4年前 (2021-04-26) 1690浏览 0评论1801个赞
car_demo|无人车仿真环境全教程最近需要在Ackerman（阿克曼）……继续阅读 » windSeS 4年前 (2021-04-26) 1861浏览 0评论2941个赞
深度Q学习原理及相关实例8. 深度Q学习8.1 经验回放8.2 目标网络8.3 相关算法8.4……继续阅读 » Stan Fu 4年前 (2021-04-26) 1607浏览 0评论2351个赞
yolo-v3模型测试及测试结果转化文章目录yolo-v3模型测试及测试结果转化1.制作2019_test.txt文件2. 修改./……继续阅读 » 月照银海似蛟龙 4年前 (2021-04-26) 2660浏览 0评论1883个赞
已经脱更好久了，最近在金山实习，白天做公司的游戏项目，晚上做自己的课题，实在是抽不出时间。接下来几篇，我们要实现一个机械臂reach的训练，先看一下要达到的效果。……继续阅读 » bug404 4年前 (2021-04-26) 2600浏览 0评论1311个赞
PID 控制是自动化控制领域应用非常广的控制方式，P 代表比例，I 代表积分，D 代表微分，从这些名词中可以看出，PID 控制是基于数学中一项重要的分支：微积分学为基础的数字化自动控制方式，它以传感器采集的数据作为输入源，按预定的 PID 参数根据特定的公式计算以后输出控制……继续阅读 » Rugels.Dix 4年前 (2021-04-26) 2574浏览 0评论1268个赞
@[toc]一、初始化特征匹配<……继续阅读 » 一抹烟霞 4年前 (2021-04-26) 1160浏览 0评论251个赞
前言： 之前展哥（导师）喊我在入学前做一个具有冗余腿的四足机器人用于部署XXX算法，验证XXX的i……继续阅读 » JameScottX 4年前 (2021-04-26) 2754浏览 0评论2492个赞
创建Simulink环境并训练智能体水箱模型创建环境界面创建DDPG智能体训练智能体验证训练的智能体本地函数……继续阅读 » 柯南404 4年前 (2021-04-26) 1390浏览 0评论2135个赞
A. 标准层 Static Map Layer:为了做全局规划，机器人需要一个超越其传感器的地图，以了解墙壁和其他静态障碍物的位置。 静态地图可以先用SLAM算法生成，也可以从架构图中……继续阅读 » LiAr 4年前 (2021-04-26) 1530浏览 0评论2491个赞
一般来说著名的linux系统基本上分两大类：RedHat系列：Redhat、Centos、Fedora等Debian系列：Debian、Ubuntu等Red……继续阅读 » 玥茹苟 4年前 (2021-04-26) 1222浏览 0评论2229个赞
描述在使用ROS的kinetic版本控制UR机械臂时，moveit规划成功但UR机械臂不运动的问题失败表现UR机械……继续阅读 » 绿竹巷人 4年前 (2021-04-26) 1252浏览 0评论2662个赞
准备工作安装桌面完整版ROSsu……继续阅读 » 初霁 4年前 (2021-04-26) 2196浏览 0评论2868个赞
增量学习方法背景介绍人工智能的参照样本始终没有离开人类本身。而终身式、增量式的学习能力是人类最重要的能力之一。机器人如果……继续阅读 » windSeS 4年前 (2021-04-26) 1390浏览 0评论2235个赞
创建水箱强化学习模型问题描述行动与观测奖励信号终止信号创建环境对象重置函数&nbs……继续阅读 » 柯南404 4年前 (2021-04-26) 2338浏览 0评论1910个赞
我们继续上一篇文章。上一篇已经完成了critic的设计，下面我们再来把actor完成。……继续阅读 » bug404 4年前 (2021-04-26) 3115浏览 0评论2306个赞
![[强化学习实战]DQN算法实战-小车上山(MountainCar-v0)](https://blog.75271.com/wp-content/themes/com75271/timthumb.php?src=https://img-blog.csdnimg.cn/20201024095956671.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dhbmd5aWZhbjEyMzQ1Nnp6,size_16,color_FFFFFF,t_70#pic_center&h=123&w=200&q=90&zc=1&ct=1)
![[强化学习实战]策略梯度方法(policy gradient)-python车杆平衡实战](https://blog.75271.com/wp-content/themes/com75271/timthumb.php?src=https://img-blog.csdnimg.cn/20201026110818256.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dhbmd5aWZhbjEyMzQ1Nnp6,size_16,color_FFFFFF,t_70#pic_center&h=123&w=200&q=90&zc=1&ct=1)
![[强化学习实战]actor-critic方法（一）—同策方法](https://blog.75271.com/wp-content/themes/com75271/timthumb.php?src=https://blog.75271.com/wp-content/themes/com75271/css/img/pic/10.jpg&h=123&w=200&q=90&zc=1&ct=1)
![[强化学习实战]马尔可夫决策-悬崖寻路python实现](https://blog.75271.com/wp-content/themes/com75271/timthumb.php?src=https://img-blog.csdnimg.cn/20201030132741678.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dhbmd5aWZhbjEyMzQ1Nnp6,size_16,color_FFFFFF,t_70#pic_center&h=123&w=200&q=90&zc=1&ct=1)
![[强化学习实战]出租车调度-Q learning & SARSA](https://blog.75271.com/wp-content/themes/com75271/timthumb.php?src=https://img-blog.csdnimg.cn/20201030195932993.png#pic_center&h=123&w=200&q=90&zc=1&ct=1)
