30行python代码爬取历年双色球
admin
2023-07-03 07:45:01
0

当年学爬虫的第一个想法就是想把双色球的数据爬下来,然后看能不能用什么牛叉的算法,或者数据分析把后面的双色球概率算出来;
知道现在才抽空写了这几行代码爬取了双色球的数据,我也真是够懒的;
也算是闲来无事,练手的爬虫吧;
好了,多余的就不说了,直接上代码吧,代码注释已经很清楚了;

import sys
import requests
from lxml import etree

def get_url(url):       #请求url的方法,返回html
    headers = {
        'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36',
    }
    response = requests.get(url,headers=headers)        #获取请求的返回数据
    response.encoding = 'utf-8'         #定义编码,不然中文输出会乱码;
    if response.status_code == 200:     #如果请求成功,则返回;
        return response.text
    return None

for q in range(1,125):      #for循环,一共124页;
    url = 'http://kaijiang.zhcw.com/zhcw/html/ssq/list_%s.html' % (q)   #定义请求的链接
    html = get_url(url)         #请求url获取返回代码
    xpath_html = etree.HTML(html)       #xpath初始化html代码

    dates = xpath_html.xpath('//table[@class="wqhgt"]//tr//td[1]//text()')      #获取开奖日期
    result = xpath_html.xpath('//table[@class="wqhgt"]//tr//em//text()')        #获取上色球号
    issues = xpath_html.xpath('//table[@class="wqhgt"]//tr//td[2]//text()')     #获取期号
    # print(result)       #输出所有双色球的列
    # print(len(result)//7)    #输出有几组双色球
    # print(dates)
    # print(issues)
    sta = 0
    end = 7
    for n in range(len(result)//7):     #双色球7个号一组,
        print("开奖日期:" + str(dates[n]) + " --- " + "期号:" + str(issues[n]) + " --- " + str(result[sta:end]))
        sta = sta + 7
        end = end + 7

python版本用的3.7,开发工具用的pycharm;
爬取的结果可以根据自己需求进行调整,后面怎么用这些数据就不说了哈;具体根据自己需求进行分析吧;
运行的结果:
30行python代码爬取历年双色球

相关内容

热门资讯

22年,一个免费软件的域名之战 奇怪的是,从 2004 年推出以来,Paint.NET一直托管在 getpaint.net网站上,无...
柬埔寨一名中国地产商人被残忍杀... 柬埔寨首都金边一名中国男子,疑遭人绑架、勒索并残忍杀害。其尸体于5月30日上午,在金边市朗哥区一处空...
2.5次元CNC加工厂家梳理 ... 导语:在精密制造领域,2.5次元CNC加工凭借其高精度检测与复杂零件加工能力,成为新能源汽车充电接口...
连云港灌南上演空中竞技,江苏省... 现代快报讯(通讯员 孙荪 刘青 记者 王晓宇)5月30日至31日,2026年江苏省城市无人机联赛暨灌...
火电厂装上“AI大脑” 来源:滚动播报 (来源:新华日报) □ 本报记者 倪 敏 5月26日下午3点,长江南岸,张家港。记者...
美防长夸赞中美关系却只字未提台... 【文/观察者网 熊超然】又是一年香格里拉对话会(简称“香会”),当地时间5月30日,在新加坡举行的第...
燃气灶打火有气怎么回事 燃气灶打火有气是指在打开燃气阀门的同时,打火器能够成功引燃燃气,但这种情况下还是需要进一步了解才能判...
清洗燃气灶灶头 首先倒一些洗洁精在台面上,然后用刷子刷洗台面。此举是将台面上大一点的污渍清洗干净。拆下灶头上的火架,...
燃气灶熄火保护装置怎么清洗 主要方法有,1、可以选择用小苏打水来进行清洗,用500毫升热水与30克小苏打混合,再用毛巾蘸水之后擦...
灶具自动熄火 1、一般的灶具都会有过压保护功能,所以说要查看是否是这个原因而引起。2、也有可能是和灶具点火针位置发...