Python抓取美剧天堂bt
admin
2023-07-30 20:48:18
0

使用urllib,urllib2,beautifulsoup.

执行下面代码,输入要查找的美剧名即可:

查询到所有结果并遍历每一个结果中不同视频格式的所有下载链接

# coding: utf-8

import urllib

import urllib2

from bs4 import BeautifulSoup

import sys

reload(sys)

sys.setdefaultencoding(\’utf8\’)

host= \”http://www.meijutt.com\”

def getUrlRespHtml(url,data=None):

   heads = {\’Accept\’:\’text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8\’,

           \’Accept-Charset\’:\’GB2312,utf-8;q=0.7,*;q=0.7\’,

           \’Accept-Language\’:\’zh-CN,zh;q=0.8,en-US;q=0.5,en;q=0.3\’,

           \’Cache-Control\’:\’max-age=0\’,

           \’Host\’:host,

           \’Connection\’:\’keep-alive\’,

           \’Referer\’:url,

           \’User-Agent\’:\’Mozilla/5.0 (X11; U; Linux x86_64; zh-CN; rv:1.9.2.14) Gecko/20110221 Ubuntu/10.10 (maverick) Firefox/3.6.14\’}

   req = urllib2.Request(url)

   opener = urllib2.build_opener(urllib2.HTTPCookieProcessor())

   opener.addheaders = heads.items()

   if data:

       data = urllib.urlencode(data)

       respHtml = opener.open(req,data).read()

   else:

       respHtml = opener.open(req).read()

   return respHtml

def get_bt(url):

   html = getUrlRespHtml(url)

   bs_html = BeautifulSoup(html)

   download_list = bs_html.find_all(\’div\’,\’down_list\’)

   for index,down_list in enumerate(download_list):

       if len(download_list)>1:

           print \'<<<<<视频格式%s>>>>>\’%(index+1)

       for li in down_list.find_all(\’li\’):

           f_attrs = li.find(\’input\’,\’down_url\’).attrs

           print f_attrs.get(\’value\’)

def get_bts(searchword):

   data ={\’searchword\’:searchword}

   url = host+\’/search.asp\’

   html=getUrlRespHtml(url,data)

   bs = BeautifulSoup(html)

   cn_box2 = bs.find_all(\’div\’,\’cn_box2\’)

   print \’\\n搜索结果:%s\\n\’%len(cn_box2)

   for index,div in enumerate(cn_box2):

       print \’——搜索结果%s——\’%(index+1)

       attrs = div.a.attrs

       title = attrs.get(\’title\’)

       href = attrs.get(\’href\’)

       print title,(host+href)

       get_bt(host+href)

       print \’——end——–\\n\’

searchword=raw_input(\”请输入要搜索的美剧:\”)

get_bts(searchword.encode(\’gb2312\’))

相关内容

热门资讯

Mobi、epub格式电子书如... 在wps里全局设置里有一个文件关联,打开,勾选电子书文件选项就可以了。
500 行 Python 代码... 语法分析器描述了一个句子的语法结构,用来帮助其他的应用进行推理。自然语言引入了很多意外的歧义,以我们...
定时清理删除C:\Progra... C:\Program Files (x86)下面很多scoped_dir开头的文件夹 写个批处理 定...
scoped_dir32_70... 一台虚拟机C盘总是莫名奇妙的空间用完,导致很多软件没法再运行。经过仔细检查发现是C:\Program...
65536是2的几次方 计算2... 65536是2的16次方:65536=2⁶ 65536是256的2次方:65536=256 6553...
小程序支付时提示:appid和... [Q]小程序支付时提示:appid和mch_id不匹配 [A]小程序和微信支付没有进行关联,访问“小...
pycparser 是一个用... `pycparser` 是一个用 Python 编写的 C 语言解析器。它可以用来解析 C 代码并构...
微信小程序使用slider实现... 众所周知哈,微信小程序里面的音频播放是没有进度条的,但最近有个项目呢,客户要求音频要有进度条控制,所...
Apache Doris 2.... 亲爱的社区小伙伴们,我们很高兴地向大家宣布,Apache Doris 2.0.0 版本已于...
python清除字符串里非数字... 本文实例讲述了python清除字符串里非数字字符的方法。分享给大家供大家参考。具体如下: impor...