导读 Loon 是一家公司，该公司一直致力于一个项目，旨在使用漂浮在平流层中的超压气球来提供互联网连接。我们不常听说这个项目，有些人可能想知
Loon 是一家公司，该公司一直致力于一个项目，旨在使用漂浮在平流层中的超压气球来提供互联网连接。我们不常听说这个项目，有些人可能想知道它是否仍然与 SpaceX 相关，SpaceX 已经在试用其使用卫星的 Starlink 互联网服务。Loon 部署了一些非常有趣的东西，该公司声称这是世界上第一个强化学习航空航天系统的部署。
长期以来，该公司的目标是有效地将气球引导到需要连接的位置。挑战在于让超压气球穿越平流层有两种选择：向上或向下。导航很复杂，任务非常适合自动化。潜鸟气球跟随盛行的风。
Loon 表示，其公司内部的一个小组和谷歌 AI 一直在合作开发一个利用深度强化学习 (RL) 的更强大的导航系统。RL 是一种机器学习，它使代理能够通过来自其自身行为和经验的反馈在交互式环境中通过反复试验进行学习。该公司承认，早期并不清楚深度强化学习对其高空气球是否实用或可行。
测试已经证明 RL 对于一组平流层气球是实用的。今天使用的导航系统面临着一个复杂的任务，它通过一种算法来解决，该算法通过计算机在模拟中试验气球导航来学习。RL 系统前面的任务非常复杂，因为气球通常缺乏理想机动所需的动力。
这意味着频繁的决策机会跨越了很长的规划范围。尽管存在复杂性，但强化学习已承诺帮助 Loon 比现在广泛使用的人类设计算法更有效地操纵气球。RL 可以快速启用导航系统来管理新飞机和管理 Loon 机队的不同用途。到目前为止，RL 控制器已经在一组气球上导航了近 3000 个飞行小时，并取得了该公司所说的出色结果。