「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)
admin
2023-04-02 18:42:02
0

上次已经把python文件挂载到虚拟机上了,这次主要设置下虚拟机通过docker容器的方式。

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

运行
  • python 代码运行
    >启动一个crt的会话

 docker run -it -v /root/docker:/root --name python zhugeaming/python3-appium

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

  • mitmdump的运行

启动一个crt的会话,可以通过重名名session的方式好区别

docker run --rm -it -v /root/docker:/root/ -p 8889:8889 --name mitmdump zhugeaming/python3-appium mitmdump -p 8889 -s /root/decode_data.py

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

  • appium的运行
    >启动一个crt的会话,可以通过重名名session的方式好区别,这里需要注意需要启动三个因为咱们监控3个app得代码。之前我演示的是不是启动了多个appium的客户端服务,这里是通过容器的方式就要启动3个容器。

docker run --privileged -d -p 4723:4723 --name appium_douyin appium/appium
docker run --privileged -d -p 4725:4723 --name appium_kuaishou appium/appium
docker run --privileged -d -p 4727:4723 --name appium_jrtt appium/appium

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

  • 夜神模拟器的设置
    1.设置网络桥接模式
    「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

2.需要安装容器内部的mitmdump的证书

证书的安装之前的介绍mitmproxy的时候介绍过。

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

3.设置好一个后,可以通过复制模拟器的功能
「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

4.设置好本地的adb devices,转成tcp的形式

adb connect 127.0.0.1:62001
adb connect 127.0.0.1:62025
adb connect 127.0.0.1:62026
adb devices
adb -s 127.0.0.1:62001 tcpip 5555
adb -s 127.0.0.1:62025 tcpip 5555
adb -s 127.0.0.1:62026 tcpip 5555

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

  • 容器的appium设置连接
    > 192.168.199.122是夜神模拟器的ip-抖音
    > 192.168.199.117是夜神模拟器的ip-快手
    > 192.168.199.173是夜神模拟器的ip-今日头条

docker exec -it appium_douyin adb connect 192.168.199.122:5555
docker exec -it appium_kuaishou adb connect 192.168.199.117:5555
docker exec -it appium_jrtt adb connect 192.168.199.173:5555

#如果ip写错了怎么办,挂载错了怎么办
#docker exec -it 容器名称 adb kill-server
````


![](https://upload-images.jianshu.io/upload_images/11223715-fb9572508a1eeafb.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)


* handle_appium_docker.py的python代码的修改
>直接本地修改,挂载代码也会随着被改。

![](https://upload-images.jianshu.io/upload_images/11223715-233b196366015f20.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

> docker的宿主机的ip也要在python代码里面修改,修改成连接的linux主机的ip

![](https://upload-images.jianshu.io/upload_images/11223715-985aa964f84cb4f7.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

>这里面的页面xpath 也需要手动的修改,根据实际的我这里直接写//android,通过uiautomatorviewer.jar

![](https://upload-images.jianshu.io/upload_images/11223715-b134b601f5607bdd.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)




*  handle_mongo.py的python代码的修改

![](https://upload-images.jianshu.io/upload_images/11223715-ff494634f717b607.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)


#### 这些设置好基本就可以进行抓取咱们的数据了
>在python 哪里直接执行代码 就可以了。
``` python
python handle_appium_docker.py

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

mongodb的数据

「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)

PS:电脑配置比较高i7的cpu,16g的内存,固态的硬盘,尽量还是用真机,如果是真机8g跑的也很666,企业里面还是用真实的手机来跑的。这里综合实战了,从appium的使用,移动端的使用,mitmdump的使用,都综合到了一起。遇到问题其实百度和谷歌都有类似的问题,文章很多部分都是参考:https://github.com/appium/appium-docker-android ,哈哈国内最大的男×××友网站很给力的。

>>原创文章,欢迎转载。转载请注明:转载自IT人故事会,谢谢!
>>原文链接地址:「docker实战篇」python的docker-打造多任务端app应用数据抓取系统(下)(35)


相关内容

热门资讯

特朗普下令不打了,美国的“余粮... 可以说戛然而止,快得让很多人都无法适应。前两周,每一天美国都要打击伊朗一通。就在7月24日白宫会议前...
穆杰塔巴最新表态:支持黎真主党 △伊朗最高领袖穆杰塔巴·哈梅内伊(资料图)当地时间7月26日晚,伊朗最高领袖穆杰塔巴·哈梅内伊对黎巴...
美军瘫痪一艘驶向伊朗的油轮,特... 美国总统特朗普虽下令暂停打击伊朗,但美军仍在执行对霍尔木兹海峡的封锁任务。针对美军瘫痪一艘驶向伊朗油...
“小牌大耍”的底气到底是哪里来... 澎湃首席评论员 李平这两天,“艺人李权哲乘高铁占座事件”在网上引发热议,该艺人参加的活动主办方曾发布...
越南籍船舶南海遇险沉没,中方已... 据凤凰卫视报道,一艘越南船舶7月24日夜间在越南庆和以东220海里附近遇险沉没,船上共62名越南籍人...
李权哲占座、蒙面、装死:娱乐圈... 你买了一张高铁一等座的票,找到自己的位置,18A。有人坐着。你拿出手机看了眼购票记录——没错,18A...
杭州景区咖啡店闯入1条幼蛇,仅... 夏天气温高、湿度大,蛇类活动进入高峰期,千万别被“小蛇无害”的刻板印象骗了!有些幼蛇看着迷你可爱,实...
AI开源公开信签署企业增至50... IT之家 7 月 26 日消息,英伟达、微软、IBM、Meta 等 25 家美国科技企业本周(7 月...
南阳快手短视频代运营企业的服务... 在短视频平台快速发展的背景下,企业通过快手等渠道进行内容运营已成为常见的市场动作。对于希望借助短视频...
普通人该如何跟上科技发展的步伐 这个被称作科技的词汇, 听起来既有宏大之感, 又颇为遥远, 好似仅仅归属于在实验室里专心致志钻研的科...