电影代码怎么用--怎样用python获取电影
今天合众百科就给我们广大朋友来聊聊电影代码怎么用,以下关于观点希望能帮助到您找到想要的答案。
- 1、怎样用python获取电影
本文目录导航：
怎样用python获取电影
答实验室这段时间要采集电影的信息，给出了一个很大的数据集，数据集包含了4000多个电影名，需要我写一个爬虫来爬取电影名对应的电影信息。
其实在实际运作中，根本就不需要爬虫，只需要一点简单的Python基础就可以了。
前置需求：
Python3语法基础
HTTP网络基础
===================================
第一步，确定API的提供方。IMDb是最大的电影数据库，与其相对的，有一个OMDb的网站提供了API供使用。这家网站的API非常友好，易于使用。
第二步，确定网址的格式。
第三步，了解基本的Requests库的使用方法。
为什么我要使用Requests，不使用urllib.request呢？
因为Python的这个库容易出各种各样的奇葩问题，我已经受够了……
第四步，编写Python代码。
我想做的是，逐行读取文件，然后用该行的电影名去获取电影信息。因为源文件较大，readlines()不能完全读取所有电影名，所以我们逐行读取。
1 import requests 2 3 for line in open("movies.txt"): 4 s=line.split('%20n') 5 urll='htdbapi.com/t='+s[0] 7 result=requests.get(urll) 8 if result: 9 json=result.text10 print(json)11 p=open('result0.json','a')12 p.write(json)13 p.write('n')14 p.close()
我预先把电影名文件全部格式化了一遍，将所有的空格替换成了"%20"，便于使用API（否则会报错）。这个功能可以用Visual Studio Code完成。
注意，编码的时候选择GBK编码，不然会出现下面错误：
1 UnicodeDecodeError: 'gbk' codec can't decode byte 0xff in position 0: illegal multibyte sequence
第五步，做优化和异常处理。
主要做三件事，第一件事，控制API，防止被服务器屏蔽；
第二件事，获取API key（甚至使用多个key）
第三件事：异常处理。
1 import requests 3 4 key=[‘’] 5 6 for line in open("movies.txt"): 7 try: 8 #…… 9 except TimeoutError:10 continue11 except UnicodeEncodeError:12 continue13 except ConnectionError:14 continue
下面贴出完整代码：
1 # -*- coding: utf-8 -*- 2 3 import requests 4 import time 5 6 key=['xxxxx','yyyyy',zzzzz','aaaaa','bbbbb'] 7 i=0 8 9 for line in open("movies.txt"):10 try:11 i=(i+1)%512 s=line.split('%20n')13 urll='dbapi.com/t='+s[0]+'&apikey='+key[i]14 result=requests.get(urll)15 if result:16 json=result.text17 print(json)18 p=open('result0.json','a')19 p.write(json)20 p.write('n')21 p.close()22 time.sleep(1)23 except TimeoutError:24 continue25 except UnicodeEncodeError:26 continue27 except ConnectionError:28 continue
接下来喝杯茶，看看自己的程序跑得怎么样吧！
从上文，大家可以得知关于电影代码怎么用的一些信息，相信看完本文的你，已经知道怎么做了，合众百科希望这篇文章对大家有帮助。
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息储存空间服务，不拥有所有权，不承担相关法律责任。如有发现本站涉嫌抄袭侵权/违法违规的内容，请发送邮件，一经查实，本站将立刻删除。
