低空模拟器

Continuous Integration Badge Releases Badge License Badge Supported Platforms Badge

该项目基于 AirSim 项目,可单独使用,也可以将其作为一个插件集成到 HUTB 项目中,配置方法请参考 链接

2017年,微软研究院创建了 AirSim,作为人工智能研究和实验的模拟平台。2022 年微软调整战略,放弃了该项目的维护,我们在 AirSim 的基础之上继续开发,经过多年发展,这个研究项目已实现其目标,并取得了长足进展——成为共享研究代码和测试空中人工智能开发与模拟新想法的常用方式。此外,时间也推动了我们将技术应用于现实世界的方式不断进步,尤其是在空中机动和自主系统方面。例如,无人机送货不再是科幻故事,而是商业现实,这意味着新的需求需要满足。我们在此过程中收获颇丰,并感谢社区成员一直以来的积极参与。

欢迎来到低空模拟器

低空模拟器 Air 是一款基于虚幻引擎的无人机、汽车等模拟器。它是开源的跨平台仿真器,支持使用 PX4 和 ArduPilot 等主流飞行控制器进行软件在环仿真,以及使用 PX4 进行硬件在环仿真,以实现物理和视觉上逼真的模拟。它以虚幻插件的形式开发,可以轻松集成到任何虚幻环境中。

我们的目标是将 Air 开发为一个人工智能研究平台,用于试验自动驾驶汽车的深度学习、计算机视觉和强化学习算法。为此,Air 还开放了 API,以便以独立于平台的方式检索数据和控制车辆。

观看 1.5 分钟的快速演示

Air 中的无人机

AirSim Drone Demo Video

Air 中的汽车

AirSim Car Demo Video

如何获取

Windows

Build Status

Linux

Build Status

macOS

构建状态

有关更多详细信息,请参阅 使用预编译二进制文件 文档。

如何使用

快捷键效果

按 F10 查看各种可用的天气效果选项。您还可以使用 APIs 控制天气。按 F1 查看其他可用选项。

record screenshot

动作
F1 弹出帮助信息
F10 参数设置
F 切换到第一人称视角(FPV)
B 切换到"跟随"视角
\ 切换到地面观察者视角(俯视)
/ 切换到“弹簧臂跟随”模式(相对于“跟随”视角更平)
F3 按下F1时切换线框模式
M 切换到手动相机控制
Page Up/Down 向上/向下移动
W, S 俯仰控制
A, D 偏航控制
R 切换记录
; 切换调试报告(物理、动力学、旋转等实时数据)
0 切换所有子窗口
1 切换深度子窗口
2 切换分割子窗口
3 切换场景子窗口
T 切换轨迹线
Backspace 重置一切
方向键 [汽车模式] 驾驶汽车

手动控制

如果您拥有如下所示的遥控器 (Remote Control, RC),则可以在模拟器中手动控制无人机。对于汽车,您可以使用箭头键手动驾驶。

更多详细信息

record screenshot

record screenshot

程序控制

Air 提供 API,方便您在模拟中以编程方式与飞行器进行交互。您可以使用这些 API 检索图像、获取状态、控制飞行器等等。这些 API 通过 RPC 公开,并可通过多种语言访问,包括 C++、Python、C# 和 Java。

这些 API 也可作为独立的跨平台库的一部分使用,因此您可以将它们部署到车辆的配套计算机上。这样,您就可以在模拟器中编写和测试代码,然后在真实车辆上执行。迁移学习及相关研究是我们的重点领域之一。

请注意,您可以使用 SimMode 设置 来指定默认车辆或新的 ComputerVision 模式,这样您就不会在每次启动 AirSim 时收到提示。

收集训练数据

您可以通过两种方式从 AirSim 生成用于深度学习的训练数据。最简单的方法是直接按下右下角的“录制”按钮。这将开始记录每一帧的姿势和图像。数据记录代码非常简单,您可以根据自己的喜好进行修改。

record screenshot

按照您所需的方式生成训练数据的更好方法是访问 API。这使您可以完全控制记录数据的方式、内容、位置和时间。

计算机视觉模式

AirSim 的另一种使用方式是所谓的“计算机视觉”模式。在此模式下,您无需使用车辆或物理引擎。您可以使用键盘在场景中移动,或使用 API 将可用的摄像头定位到任意姿势,并收集诸如深度、视差、表面法线或物体分割等图像。

更多详细信息

教程

参加

论文

更多技术细节请参阅 AirSim 论文(FSR 2017 会议)) 。请引用:

@inproceedings{airsim2017fsr,
  author = {Shital Shah and Debadeepta Dey and Chris Lovett and Ashish Kapoor},
  title = {AirSim: High-Fidelity Visual and Physical Simulation for Autonomous Vehicles},
  year = {2017},
  booktitle = {Field and Service Robotics},
  eprint = {arXiv:1705.05065},
  url = {https://arxiv.org/abs/1705.05065}
}

贡献

如果您正在寻找可以做出贡献的领域,请查看 未解决的问题

谁在使用 AirSim?

我们维护着一份我们所知的一些项目、人员和团体的 列表 。如果您希望被收录在此列表中,请 在此处提交申请

联系

加入我们的 GitHub 讨论组 以了解最新动态或提出任何问题。

最新动态

如需查看完整的变更列表,请查看我们的 变更日志

常问问题

如果您遇到问题,请查看 常见问题解答 并随时在 AirSim 存储库中发布问题。

行为守则

本项目已采用 微软开源行为准则 。更多信息请参阅行为准则常见问题解答,或联系 open@hutb.edu.cn 提出其他问题或意见。

许可证

本项目遵循 MIT 许可证发布。请查看 许可证文件 了解更多详情。