本文会介绍 OpenAI 中 MountainCar-v0 这个环境。主要介绍其中 action 和 observation 分别是什么。以及最后给一个简单的 policy，可以使...
10月19日评论
强化学习环境
Reinforcement Learning(强化学习)-MountainCar 环境介绍
10月19日评论
强化学习环境
10月19日评论
SUMO 资料
使用 SUMO 进行仿真(4)-信号灯（Traffic Light）
本文会介绍 SUMO 中信号灯（Traffic Light）的相关内容。包括如何生成带有 Traffic Light 的路网，如何设置信号灯，如何利用 TraCI 来控制信号灯。
09月26日评论
SUMO 资料
使用 SUMO 进行仿真(3)-车流的生成（Route 文件）
在本文中我们会着重介绍了车流的生成。包括生成车流的方式，也会介绍 route 文件的相关内容。生成车流的方式包括直接修改 route 文件，通过 flow 指定起点和终点，通过 t...
09月25日评论
SUMO 资料
使用 SUMO 进行仿真(2)-Node 和 Edge
本文是 SUMO 进行仿真的第二篇。主要详细的介绍 Node 和 Edge 这两个文件类型（详细了解一下这两个文件的组成，如何生成 Network），通过这两个文件来生成 Netw...
09月24日评论
SUMO 资料
使用 SUMO 进行仿真(1)-快速入门
本文会介绍 SUMO。主要是从 node 和 edge 文件开始，一步一步新建 network，route，最后完整路网和车流的生成。
09月23日评论
深度学习
使用 OpenCV 和 K-Means 聚类进行图像分割
本文介绍使用 OpenCV 中的 K-Means 来对图像颜色进行聚类（减少图像颜色），根据聚类结果对图像进行分块，或是替换某种颜色。
08月13日评论
深度学习
Pytorch 计算卷积输出的大小
这一篇文章会给出两个计算函数，第一个可以方便根据 input size，kernel size，stride 和 padding 计算出 output size 的大小。第二个可以...
02月10日评论
Pytorch快速入门
Pytorch入门教程16-Pytorch中模型的定义和参数初始化
这一篇详细介绍Pytorch中模型定义的几种方法. 同时, 也简单介绍参数的初始化.
10月15日评论
Pytorch快速入门
Pytorch入门教程15-Pytorch中模型的保存和加载
当我们完成了模型的训练之后, 我们会希望将其保存下来, 之后可以进行使用. 或是在训练过程中, 我们需要定时对模型进行保存. 所以这一篇, 我们会介绍Pytorch中模型的加载和保...
10月14日评论
Pytorch快速入门
Pytorch入门教程14-Pytorch中的经典网络结构
在Pytoch中, 会有一些已经预训练好的模型, 我们可以使用这些模型来加快我们的训练速度. 这一篇就是会介绍如何使用Pytorch中的已经定义好的模型. 我们会使用一个简单的迁移...
10月13日评论
15