爬虫程序 报错

小可爱哟

在网上看到了一个教学爬取猫眼top100的简单视频 而且很认真的做了笔记 想好好学习研究一下
昨天这个程序运行成功了
但是不知道今天为什么就不行了
而且报的错我看不懂  
代码我反复看了好几遍感觉上是没有问题的？

麻烦大佬们帮助一下可怜的萌新   
代码如下：

1. #导入模块
   
2. import requests
   
3. from lxml import etree
   
4. import json
   
5. from time import sleep
   
6. 
   
7. #定义一个类
   
8. class MaoYan(object):
   
9.     '''用于下载猫眼电影Top100'''
   
10. #初始化函数 构造函数(不需要调用就会自动执行)
    
11. #在init中定义的self.xx可以在同一个类中的任何一个方法中使用即跨区域在其他函数中使用
    
12.     def __init__(self):
    
13.         self.header = {
    
14.             'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36 SE 2.X MetaSr 1.0'}
    
15. 
    
16.     def getOnePage(self,url):
    
17.         #得到网页源代码
    
18.         html = requests.get(url,headers=self.header).text
    
19.         return html
    
20.    
    
21.     def  parseOnePage(self,text):
    
22.         #解析网页
    
23.         html = etree.HTML(text)
    
24.         #提取电影名称 （//从当前任意节点进入p标签 [限定词]下的文本）
    
25.         name = html.xpath('//p[@class="name"]//text()')
    
26.         #print(name)
    
27.         #提取主演
    
28.         star = html.xpath('//p[@class="star"]/text()')
    
29.         #print(star)
    
30. 
    
31.         #生成器（返回一个字典）
    
32.         for item in range(len(name)):
    
33. 
    
34.             yield{
    
35.                 'name':name[item],
    
36.                 'star':star[item].strip()
    
37.                 }
    
38.             
    
39.     @staticmethod   #静态方法   装饰器（必须了解闭包）  里面不可以引用其他方法但可以被其他方法引用（不推荐）
    
40.     def save_File(content):
    
41.                 with open('333.json', 'a', encoding='utf-8') as fp:
    
42.                     fp.write(json.dumps(content,ensure_ascii=False)+'\n')
    
43. 
    
44. #在本文件中name内置函数就等于main函数 如果被其他文件调用 则__name__函数以下的任何字段不执行
    
45. 
    
46.    
    
47. if __name__ == "__main__":
    
48. #实例对象
    
49.     maoyan = MaoYan()
    
50. 
    
51. #进行循环
    
52.     for offset in range(10):
    
53.         
    
54.         sleep(1)   #程序运行到这里时会暂停一秒
    
55. 
    
56.         urls = 'http://maoyan.com/board/4?offset={0}'.format(offset*10)
    
57. 
    
58. #调用
    
59.         html = maoyan.getOnePage(urls)
    
60.         text =  maoyan.parseOnePage(html)
    
61.         
    
62. #没有加括号 也不是调用对象
    
63. #静态方法可以用类名直接调用，但是实例方法不行
    
64. #字典高度兼容json文件
    
65.         
    
66.         for item in text:
    
67.             print(item)
    
68.             MaoYan.save_File(item)

复制代码

附上图片  跪求大佬解答：

小可爱哟

很难受  程序这么善变我就要从入门到放弃了

故梦L

1. import requests
   
2. from lxml import etree
   
3. import json
   
4. from time import sleep
   
5. 
   
6. #定义一个类
   
7. class MaoYan(object):
   
8.     '''用于下载猫眼电影Top100'''
   
9. #初始化函数 构造函数(不需要调用就会自动执行)
   
10. #在init中定义的self.xx可以在同一个类中的任何一个方法中使用即跨区域在其他函数中使用
    
11.     def __init__(self):
    
12.         self.header = {
    
13.             'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36 SE 2.X MetaSr 1.0'}
    
14. 
    
15.     def getOnePage(self,url):
    
16.         #得到网页源代码
    
17.         html = requests.get(url,headers=self.header).text
    
18.         return html
    
19.    
    
20.     def  parseOnePage(self,text):
    
21.         #解析网页
    
22.         html = etree.HTML(text)
    
23.         #提取电影名称 （//从当前任意节点进入p标签 [限定词]下的文本）
    
24.         name = html.xpath('//p[@class="name"]//text()')
    
25.         #print(name)
    
26.         #提取主演
    
27.         star = html.xpath('//p[@class="star"]/text()')
    
28.         #print(star)
    
29. 
    
30.         #生成器（返回一个字典）
    
31.         for item in range(len(name)):
    
32. 
    
33.             yield{
    
34.                 'name':name[item],
    
35.                 'star':star[item].strip()
    
36.                 }
    
37.             
    
38.     @staticmethod   #静态方法   装饰器（必须了解闭包）  里面不可以引用其他方法但可以被其他方法引用（不推荐）
    
39.     def save_File(content):
    
40.                 with open('333.json', 'a', encoding='utf-8') as fp:
    
41.                     fp.write(json.dumps(content,ensure_ascii=False)+'\n')
    
42. 
    
43. #在本文件中name内置函数就等于main函数 如果被其他文件调用 则__name__函数以下的任何字段不执行
    
44. 
    
45.    
    
46. if __name__ == "__main__":
    
47. #实例对象
    
48.     maoyan = MaoYan()
    
49. 
    
50. #进行循环
    
51.     for offset in range(10):
    
52.         
    
53.         sleep(1)   #程序运行到这里时会暂停一秒
    
54. 
    
55.         urls = 'http://maoyan.com/board/4?offset={0}'.format(offset*10)
    
56. 
    
57. #调用
    
58.         html = maoyan.getOnePage(urls)
    
59. 
    
60. #没有加括号 也不是调用对象
    
61. #静态方法可以用类名直接调用，但是实例方法不行
    
62. #字典高度兼容json文件
    
63.         
    
64.         for item in maoyan.parseOnePage(html):
    
65.             print(item)
    
66.             MaoYan.save_File(item)

复制代码

小可爱哟

故梦L 发表于 2018-7-26 18:53

还是不行。。会不会是我的扩展包坏了？

小可爱哟

故梦L 发表于 2018-7-26 18:53

Traceback (most recent call last):
  File "C:\Users\admin\Desktop\123.py", line 58, in <module>
    html = maoyan.getOnePage(urls)
  File "C:\Users\admin\Desktop\123.py", line 17, in getOnePage
    html = requests.get(url,headers=self.header).text
  File "C:\Users\admin\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\api.py", line 72, in get
    return request('get', url, params=params, **kwargs)
  File "C:\Users\admin\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\api.py", line 58, in request
    return session.request(method=method, url=url, **kwargs)
  File "C:\Users\admin\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\sessions.py", line 512, in request
    resp = self.send(prep, **send_kwargs)
  File "C:\Users\admin\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\sessions.py", line 622, in send
    r = adapter.send(request, **kwargs)
  File "C:\Users\admin\AppData\Local\Programs\Python\Python36-32\lib\site-packages\requests\adapters.py", line 445, in send
    timeout=timeout
TypeError: urlopen() missing 1 required positional argument: 'request_method'

小可爱哟

帖子别沉啊。。