mugeminorum / snake-ai

Using deep reinforcement learning to play Snake game. The used algorithm is PPO for discrete! It has the brilliant performance in the field of discrete action space just like in continuous action space. You just need half an hour to train the snake and then it can be as smart as you.|使用深度强化学习玩蛇游戏。 使用的算法是离散的 PPO！ 它在离散动作空间领域有着与连续动作空间一样的出色表现。

笑死🤣 👇这还有个黑塔小人

我的主要作品集均已移至个人工作室号@MuGeminorum 因此面板看起来缩水

snake-ai's Issues

Snaqe 的 CI 环境仍未修复

需要 VS2015 + QT5.7 环境，可能涉及命令脚本替换文件操作

优化C++版snakeAI，避免死循环

暂时未找到AI能100%通关的解决方案

制作展示视频并上架

以release 的report 作为文案基础，AI配音自动生成字幕吧

需要完成A*路径的平滑处理算法

需要使路径弯折数在不影响决策的前提下尽量降到最低以保证美观

(在遇到地图边界的情形下需格外注意，可能会导致产生新的单连通区域，此时可能要放弃美观而保护决策性能)

cover

蛇头跳跃BUG

当从 AI 模式 切换回手动模式后，故意走入死路再切换回auto mode，可能会导致进入 FindTailByHamilton 分支并且还返回了一个路径，然而这个路径与蛇头并不相连，导致下一步蛇头直接飞跃至路径中。。。

复现频率感觉跟刷新周期有关，看F1触发的 changemode 与 makedecision 哪个快了，有可能是F1没生效成功产生的脏数据被下一周期给错误利用了。然而即使用上周期的布局来推断也有不符合逻辑的结论，可能是 hamilton 算法对此类边界条件未处理好造成的BUG

需要多试几遍复现

所有C/C++项目注意防止内存泄露

malloc free

研究在vscode上实现Qt静态编译

在vscode上debug很方便，但release还是要转到vs2015上，但是sln工程可能还没包含在vscode上新建的类文件，手动调整可能会引入比较麻烦的问题