• 企业400电话
  • 微网小程序
  • AI电话机器人
  • 电商代运营
  • 全 部 栏 目

    企业400电话 网络优化推广 AI电话机器人 呼叫中心 网站建设 商标✡知产 微网小程序 电商运营 彩铃•短信 增值拓展业务
    python爬取分析超级大乐透历史开奖数据第1/2页

    博主作为爬虫初学者,本次使用了requests和beautifulsoup库进行数据的爬取

    爬取网站:http://datachart.500.com/dlt/history/history.shtml —500彩票网
    (分析后发现网站源代码并非是通过页面跳转来查找不同的数据,故可通过F12查找network栏找到真正储存所有历史开奖结果的网页)

    如图:

    爬虫部分

    from bs4 import BeautifulSoup #引用BeautifulSoup库
    import requests     #引用requests
    import os      #os
    import pandas as pd
    import csv
    import codecs
    
    lst=[]
    url='http://datachart.500.com/dlt/history/newinc/history.php?start=07001end=21018'
    r = requests.get(url)      
    r.encoding='utf-8'
    text=r.text
    soup = BeautifulSoup(text, "html.parser")
    tbody=soup.find('tbody',id="tdata")
    tr=tbody.find_all('tr')
    td=tr[0].find_all('td')
    for page in range(0,14016):
     td=tr
                                
    12下一页阅读全文
    您可能感兴趣的文章:
    • Python爬虫实例——爬取美团美食数据
    • Python基于pandas爬取网页表格数据
    • python 爬取疫情数据的源码
    • 用python爬取历史天气数据的方法示例
    • 基于Python的Post请求数据爬取的方法详解
    • Python3实现的爬虫爬取数据并存入mysql数据库操作示例
    上一篇:matplotlib 范围选区(SpanSelector)的使用
    下一篇:python 统计list中各个元素出现的次数的几种方法
  • 相关文章
  • 

    © 2016-2020 巨人网络通讯 版权所有

    《增值电信业务经营许可证》 苏ICP备15040257号-8

    python爬取分析超级大乐透历史开奖数据第1/2页 python,爬取,分析,超级,大乐,