python下载电影代码(python 代码下载)
用python下载电影比下载器快吗
是的。
Python版视频下载神器，支持80+网站，比迅雷还快，运行程序后会自动复制并输出该电影的下载链接或其他的反馈信息，达到快速下载电影的效果。
Python是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。
怎样用python获取电影
实验室这段时间要采集电影的信息，给出了一个很大的数据集，数据集包含了4000多个电影名，需要我写一个爬虫来爬取电影名对应的电影信息。
其实在实际运作中，根本就不需要爬虫，只需要一点简单的Python基础就可以了。
前置需求：
Python3语法基础
HTTP网络基础
===================================
第一步，确定API的提供方。IMDb是最大的电影数据库，与其相对的，有一个OMDb的网站提供了API供使用。这家网站的API非常友好，易于使用。
第二步，确定网址的格式。
第三步，了解基本的Requests库的使用方法。
为什么我要使用Requests，不使用urllib.request呢？
因为Python的这个库容易出各种各样的奇葩问题，我已经受够了……
第四步，编写Python代码。
我想做的是，逐行读取文件，然后用该行的电影名去获取电影信息。因为源文件较大，readlines()不能完全读取所有电影名，所以我们逐行读取。
1 import requests 2 ?3 for line in open("movies.txt"): 4 ? ? s=line.split('%20\n') 5 ? ? urll='htdbapi.com/?t='+s[0] 7 ? ? result=requests.get(urll) 8 ? ? if result: 9 ? ? ? ? json=result.text10 ? ? ? ? print(json)11 ? ? ? ? p=open('result0.json','a')12 ?? ? ? ?p.write(json)13 ? ? ? ? p.write('\n')14 ? ? ? ? p.close()
我预先把电影名文件全部格式化了一遍，将所有的空格替换成了"%20"，便于使用API（否则会报错）。这个功能可以用Visual Studio Code完成。
注意，编码的时候选择GBK编码，不然会出现下面错误：
1 UnicodeDecodeError: 'gbk' codec can't decode byte 0xff in position 0: illegal multibyte sequence
第五步，做优化和异常处理。
主要做三件事，第一件事，控制API速度，防止被服务器屏蔽；
第二件事，获取API key（甚至使用多个key）
第三件事：异常处理。
1 import requests 3 ?4 key=[‘’] 5 ?6 for line in open("movies.txt"): 7 ? ? try: 8 ? ? ? ? #…… 9 ? ? except TimeoutError:10 ? ? ? ? continue11 ? ? except UnicodeEncodeError:12 ? ? ? ? continue13 ? ? except ConnectionError:14 ? ? ? ? continue
下面贴出完整代码：
1 # -*- coding: utf-8 -*- 2 ?3 import requests 4 import time 5 ?6 key=['xxxxx','yyyyy',zzzzz','aaaaa','bbbbb'] 7 i=0 8 ?9 for line in open("movies.txt"):10 ? ? try:11 ? ? ? ? i=(i+1)%512 ? ? ? ? s=line.split('%20\n')13 ? ? ? ? urll='dbapi.com/?t='+s[0]+'apikey='+key[i]14 ? ? ? ? result=requests.get(urll)15 ? ? ? ? if result:16 ? ? ? ? ? ? json=result.text17 ? ? ? ? ? ? print(json)18 ? ? ? ? ? ? p=open('result0.json','a')19 ?? ? ? ? ? ?p.write(json)20 ? ? ? ? ? ? p.write('\n')21 ?? ? ? ? ? ?p.close()22 ? ? ? ? ? ? time.sleep(1)23 ? ? except TimeoutError:24 ? ? ? ? continue25 ? ? except UnicodeEncodeError:26 ? ? ? ? continue27 ? ? except ConnectionError:28 ? ? ? ? continue
接下来喝杯茶，看看自己的程序跑得怎么样吧！
Python爬虫实战，Python多线程抓取5千多部最新电影下载链接
利用Python多线程爬了5000多部最新电影下载链接，废话不多说~
让我们愉快地开始吧~
Python版本： 3.6.4
相关模块：
requests模块；
re模块；
csv模块；
以及一些Python自带的模块。
安装Python并添加到环境变量，pip安装需要的相关模块即可。
拿到链接之后，接下来就是继续访问这些链接，然后拿到电影的下载链接
但是这里还是有很多的小细节，例如我们需要拿到电影的总页数，其次这么多的页面，一个线程不知道要跑到什么时候，所以我们首先先拿到总页码，然后用多线程来进行任务的分配
我们首先先拿到总页码，然后用多线程来进行任务的分配
总页数其实我们用re正则来获取
爬取的内容存取到csv，也可以写个函数来存取
开启4个进程来下载链接
您学废了吗？最后祝大家天天进步！！学习Python最重要的就是心态。我们在学习过程中必然会遇到很多难题，可能自己想破脑袋都无法解决。这都是正常的，千万别急着否定自己，怀疑自己。如果大家在刚开始学习中遇到困难，想找一个python学习交流环境，可以加入我们，领取学习资料，一起讨论，会节约很多时间，减少很多遇到的难题。