• 企业400电话
  • 微网小程序
  • AI电话机器人
  • 电商代运营
  • 全 部 栏 目

    企业400电话 网络优化推广 AI电话机器人 呼叫中心 网站建设 商标✡知产 微网小程序 电商运营 彩铃•短信 增值拓展业务
    python基于selenium爬取斗鱼弹幕

    针对弹幕的爬取我们如果只需要获取看到的网页里面的而数据,使用selenium就能实现,对于直播平台来说,往往有第三方平台api让你获取数据(可以获取发弹幕,发弹幕者的名字礼物等等,这需要客户端向弹幕服务器发送登录请求,心跳信息的发送等等)只获取弹幕信息储存到txt文件中,上代码,上图片

    代码如下:

    import time
    from selenium import webdriver
    
    chrome_options = webdriver.ChromeOptions()
    # 使用headless无界面浏览器模式
    # chrome_options.add_argument('--headless')
    # chrome_options.add_argument('--disable-gpu')
    prefs = {"profile.managed_default_content_settings.images": 2}
    chrome_options.add_experimental_option("prefs", prefs)
    browser = webdriver.Chrome(chrome_options=chrome_options)
    url = 'https://www.douyu.com/'
    
    
    def getDanmu(homeId):
      homeHref = url+str(homeId)
      browser.get(homeHref)
    
      while 1: 
        time.sleep(2)
        try:
          for i in browser.find_elements_by_xpath('.//div[@class=" danmu-6e95c1"]/div/div'):
            if len(i.text) > 0:
              try:
                print(i.text)
              except:
                pass
              saveDanmu(i.text)
            else:
              continue
        except:
          time.sleep(2)
          for i in browser.find_elements_by_xpath('.//div[@class=" danmu-6e95c1"]/div/div'):
            if len(i.text) > 0:
              try:
                print(i.text)
              except:
                pass
              saveDanmu(i.text)
            else:
              continue
    
    
    def saveDanmu(danmu):
      with open('danmu.txt', 'a+', encoding='utf-8')as f:
        f.write(danmu+'\n')
    
    if __name__ == '__main__':
      num = input('请输入需要查询的房间号:')
      getDanmu(num)

    以上就是python基于selenium爬取斗鱼弹幕的详细内容,更多关于python 爬取斗鱼弹幕的资料请关注脚本之家其它相关文章!

    您可能感兴趣的文章:
    • Python基于Tkinter开发一个爬取B站直播弹幕的工具
    • 使用python tkinter开发一个爬取B站直播弹幕工具的实现代码
    • Python爬虫自动化爬取b站实时弹幕实例方法
    • 详解python爬取弹幕与数据分析
    • Python爬虫爬取Bilibili弹幕过程解析
    • python3写爬取B站视频弹幕功能
    • Python绘制词云图之可视化神器pyecharts的方法
    • python中实现词云图的示例
    • Python实现Wordcloud生成词云图的示例
    • Python爬取英雄联盟MSI直播间弹幕并生成词云图
    上一篇:Python爬虫+Tkinter制作一个翻译软件的示例
    下一篇:Python中Qslider控件实操详解
  • 相关文章
  • 

    © 2016-2020 巨人网络通讯 版权所有

    《增值电信业务经营许可证》 苏ICP备15040257号-8

    python基于selenium爬取斗鱼弹幕 python,基于,selenium,爬取,