百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

教你用python实现游戏图像识别,让计算机全自动替你玩转“跳一跳”

cac55 2024-10-07 06:30 17 浏览 0 评论

昨天,我们用Excel完成了一个跳一跳的辅助工具,没错,就是那个制表格的家伙噢。。。

不过呢,还是需要一部分手动的,需要人工找出画面上的起跳点和落脚点,告诉了Excel之后,Excel才能控制小人跳跃。

今天,我们来尝试下,能不能用python完全自动化的解决这个问题呢?(完整代码下载方法及需要的修改说明在本文末尾)

一、算法

二、实际效果

上述流程图中,读取屏幕、计算距离、跳跃,都是稳定的技术手段,相信看看后面简单的介绍你肯定能搞定。

识别小人位置和着落点的算法才是难点,也是实现全自动跳跃的关键环节,并且如果游戏内容发生变化,识别算法还需要跟进做适应性修改。好吧,先看下本代码的实际识别效果

为了调试图片识别算法,我把手机屏幕读入计算机后,取了一个不重复的时间戳放在文件名中,这样每一步的截图都能顺序保留下来。其后执行图像分析识别时,再将识别过程标记在图片上,最后保存识别的结果。这么处理之后,如果算法有问题就很容易发现问题并加以调试了。

三、实现技术

1、实现对手机的控制,基于ADB 命令行实现。这是一个官方的android手机工具包,很小,下载后也无需安装,直接运行命令行就能完成截屏、传文件、点击等任务。

3、实现图片内容的识别

引入PIL(Python Imaging Library),它能提供基本图像操作,比如图像缩放、裁剪、旋转、颜色转换等,

可以用其中的Image.open 加载图片文件,getpixel读取指定点的颜色,putpixel修改指定点的颜色,save用于保存修改后的图片,show调用Windows照片查看器来显示图片,方便调试。

四、主要算法

1、【从手机读取当前游戏屏幕】

os.system("adb shell screencap -p 手机上的文件名")
os.system("adb pull 手机上的文件名 本地磁盘的文件名")

2、【识别出画面中小人位置和目的地中心点位置+计算出两点之间的距离点数】

专门用了一个distance函数,该函数输入的参数是(图片文件名,识别结果文件名),输出就是距离点数

其中图片文件名就是前一步骤的“本地磁盘的文件名”。识别的过程中,在原图片上做辅助线绘图,并把识别的效果保存在新文件中,这样如果有识别错误的场景,就可以对比识别前后的图片,进而调整distance的算法了。

distance函数的具体内容较长,简单讲下思路,具体实现请直接看源码。(完整代码全部免费奉送,请关注后私信发送“180117代码”字样,系统会自动回复本文测试代码以及ADB驱动软件的下载地址)

distance函数算法:拿到图片后,首先找小人,以脚部颜色为特征,搜索到后取均值。然后以屏幕上方空白处颜色为种子,逐行搜索到最顶部物件的顶点,由于屏幕背景色为渐变色,搜索时逐行替换新的背景色,避免偏差较大。找到物件顶点后,以其为出发点向下逐行判断物件宽度,找到最宽的一行,该行物件宽度中点即为目的地。

3、【需要按压屏幕的时间=距离X经验系数】

按压时间 = int(距离 * 系数)

4、【按照指定的时间模拟按压屏幕】

os.system("adb shell input swipe 10 20 15 {:d} {:d}".format(random.randint(20, 80), int(距离 * 系数))))

五、关于成绩的有效性

写这个代码主要乐趣在完成控制任务本身,而不在于分数能不能保留。所以没做太多掩饰。即便如此,实测现在的代码自动跳跃也是能产生有效成绩的,如果你的成绩无效,请注意检查下:1、分数太高超出人力极限的分数肯定不保留。2、正常分数幅度内的,系统也可分析你的操作是否规律来判断是不是外挂,譬如始终差不多的频率跳一下,每次都能命中中心点,每次模拟滑动都触摸同一个位置,那么也很容易分析出你是机器人操作。

所以,如果你分数丢失的话,请自行调整代码,加随机数让点击屏幕的位置不同,不要每次都命中中心,两次跳跃之间要加一点随机延时。

(我喜欢在成绩分数比较特殊的地方退出,实测,555、666分系统都接受了,且朋友圈互相可见)

六、实验代码下载

下载的代码执行时请注意修改这两处

运行界面

完整代码请关注后私信发送“180117代码”字样,系统会自动回复本文测试代码以及ADB驱动软件的下载地址。这么麻烦是因为头条号为了防止乱发广告链接,禁止了主动发链接地址,下载地址只有你先发私信后系统自动回复你的消息中才能不被屏蔽。

用简单的视频教程,让初学者玩转python,请及时关注头条号“有只狗狗叫多多”,不要错过哦。。。。

相关推荐

无力吐槽的自动续费(你被自动续费困扰过吗?)

今天因为工作需要,需要在百度文库上下载一篇文章。没办法,确实需要也有必要,只能老老实实的按要求买了个VIP。过去在百度文库上有过类似经历,当时为了写论文买了一个月的VIP,后面也没有太注意,直到第二个...

百度文库推出“文源计划”创作者可一键认领文档

11月7日,百度文库发布了旨在保护创作者权益的“文源计划”。所谓“文源计划”,即为每一篇文档找到源头,让创作者享受更多的权益。据百度文库总经理李小婉介绍,文源计划分为三部分,分别是版权认证、版权扶持和...

有开放大学学号的同学,百度文库高校版可以用了。

还在网上找百度文库的下载方式,只要从身边的朋友在读开放大学的,那他(她)的学号就可以登陆到国家开放大学图书馆,还使用百度文库高校版来下载。与百度文库稍有不同,但足够使用了。现转国图链接如下:htt...

搜索资源方法推荐(搜索资源的方法)

今天msgbox就要教大家如何又快又准的搜到各类资源,第一点,排除干扰百度搜索出来啊经常前排展示它的产品以及百度文库,如何去除呢?很简单,后面输入空格减号百度文库,比如你搜高等数学百度文库很多,只要后...

一行代码搞定百度文库VIP功能(2021百度文库vip账号密码共享)

百度文库作为大家常用查资料找文档的平台,大多数文档我们都可以直接在百度文库找到,然而百度文库也有让人头痛的时候。好不容易找到一篇合适的文档,当你准备复制的时候他却提示你需要开通VIP才能复制~~~下载...

百度文库文档批量上传工具用户说明书

百度文库文档批量上传工具用户说明书1、软件主要功能1、批量上传文档到百度文库,支持上传到收费、VIP专享、优享以及共享。2、支持自动分类和自动获取标签3、支持多用户切换,一个账户传满可以切换到...

百度文库现在都看不到文档是否上传成功,要凉了吗?

打开知识店铺,百度文库文档里显示都是下载这一按键,上传的文档也看不到是否成功?咋情况,要取消了吗?没通过审核的也不让你删除,是几个意思,想通吃吗?现在百度上传文档也很费劲,有时弄了半天的资料上传审核过...

微信推广引流108式:利用百度文库长期分享软文引流

百度文库相对于百度知道、百度百科来说,操作上没那么多条条框框,规则上也相对好把握些。做一条百度知道所花费的精力一般都会比做一条百度文库的要多些,老马个人操作下来觉得百度文库更好把握。但见仁见智吧,今天...

职场“避雷”指南 百度文库推出标准化劳动合同范本

轰轰烈烈的毕业季结束了,众多应届生在经过了“职场海选”后,已正式成为职场生力军的一员。这一阶段,除了熟悉业务,签订劳动合同、了解职场福利也迅速被提上日程。而随着国人法律意识的增强,百度文库内《劳动合同...

《百度文库》:素材精选宝库(百度文库官网首页)

《百度文库》:独特功能助力选择高质量素材在当今信息爆炸的时代,如何高效地获取并利用有价值的素材成为了许多人面临的挑战。而《百度文库》作为百度公司推出的一款在线文档分享平台,凭借其丰富的资源、强大的功能...

深度整合和开放AI能力 百度文库和网盘推出内容操作系统「沧舟OS」

【TechWeb】4月25日消息,Create2025百度AI开发者大会上,百度文库和百度网盘推出全球首个内容操作系统——沧舟OS。基于沧舟OS,百度文库APP全新上线「GenFlow超能搭子」...

女子发现大二作业被百度文库要求付费下载,律师:平台侵权,应赔偿

近日,28岁的黎女士在百度百科搜索家乡的小地名时,发现了自己在大二完成的课题作业。她继续搜索,发现多个平台收录了该文,比如豆丁网和文档之家等,有的还设置了付费或积分下载。2月15日,九派新闻记者以用户...

2016杀入百度文库的新捷径,只有少数人才知道的喔

百度的产品在SEO优化中的分量真不用多说,其实很多人都像我一样一直在找捷径。但是我经常发现很多人都是在用死方法。比如发贴吧发帖而不知道去申请一个吧主,知道自问自答而不知道去申请一个合作资格。口碑和贴吧...

百度文库付费文档搜索方法(百度文库付费文档搜索方法有哪些)

一直以来,百度文库中无论是个人中心还是个人主页,都没有像淘宝一样的店内搜索功能,连最近新开的知识店铺也没有设计店内搜索功能,这无论是对上传用户还是下载用户都不方便,上传用户想要搜索自己的文档无法办到...

供读者免费使用!泰达图书馆机构版百度文库新年上新啦

在泰达图书馆读者使用百度文库数字资源不需要VIP,免-费-用!惊不惊喜?快来了解一下吧……新年伊始,为满足区域企业、高校、科研院所以及居民群众在教学、科研及学习过程中,对各类文献资源的需求,泰达图书馆...

取消回复欢迎 发表评论: