鱼C论坛

 找回密码
 立即注册
查看: 869|回复: 5

如何定义 这个 Urllist,

[复制链接]
发表于 2018-5-16 18:04:29 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
我的代码是这样的:
def urllist():
    for date in datelist('20161021', '20161023'):  
        url = 'http://www.baidu.com/'+ date + '.html'
    return url

if __name__ == '__main__':  
    print(urllist)
我想定义 一个urllist函数,通过这个函数能批量获取到这个网页列表
上面这样写 程序报错。。。。



我的代码单独 写 成 这样,就能正确 批量得到网页地址列表。
for date in datelist('20161021', '20161023'):  
        url = 'http://www.baidu.com/'+ date + '.html'
        print(url)


想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2018-5-16 18:12:44 | 显示全部楼层
>>> def urilist():
        datelyst = ('20161021', '20161023')
        for date in datelyst:
                url = 'http://www.baidu.com/'+date+'.html'
                print(url)
>>> urilist()
http://www.baidu.com/20161021.html
http://www.baidu.com/20161023.html

这个意思吗?但是这样的话,可扩展性真的很差。

改掉:

>>> def urllyst(datelyst):
        lyst = []
        for date in datelyst:
                url = 'http://xxx.xx.com'+date+'.html'
                lyst.append(url)
        return lyst
话说回来,这样也不好,毕竟后面不一定都是date的格式。具体问题还是要具体对待。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-5-16 22:20:54 | 显示全部楼层
  1. '''
  2. 二楼基本上给出了参考答案
  3. 部分问题上,我和二楼的观点一致。
  4. 一时兴起,写了下面的代码。
  5. FunList可以按顺序添加多个返回值为字符串或者None的无参函数
  6. 其每次执行do方法,都可以得到一个字符串,其拼接规则为:
  7.     将之前添加的函数依次执行
  8.     如果结果中存在None,则返回None
  9.     如果结果中全为字符串,则拼接返回
  10. 其每次执行doAll方法,都可以得到一系列do方法返回的拼接字符串,默认最多1000条
  11.     规则是, 依次执行do方法
  12.     如果结果不是None, 将结果存入集合
  13.     如果结果是None, 则到此为止, 将集合返回

  14. 其中的dateRange与你的dataList应该大同小异, 在网上扒的
  15. '''
  16. import datetime

  17. '''
  18. 作者:知乎用户
  19. 链接:https://www.zhihu.com/question/35455996/answer/113490733
  20. 来源:知乎
  21. 著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。
  22. '''
  23. def dateRange(start, end, step=1, format="%Y-%m-%d"):
  24.     strptime, strftime = datetime.datetime.strptime, datetime.datetime.strftime
  25.     days = (strptime(end, format) - strptime(start, format)).days
  26.     return [strftime(strptime(start, format) + datetime.timedelta(i), format) for i in range(0, days, step)]

  27. def shiftOnece( data ):
  28.     i = 0
  29.     def _f():
  30.         nonlocal i
  31.         if i >= len(data):
  32.             return None
  33.         t = data[i]
  34.         i+=1
  35.         return t
  36.     return _f

  37. class FunList:
  38.     def __init__(self):
  39.         self.nodes = []
  40.    
  41.     def add(self, * funs):
  42.         if funs == None:
  43.             return 0
  44.         for fun in funs:
  45.             self.nodes.append( fun )
  46.             
  47.     def do(self):
  48.         res = ''
  49.         for f in self.nodes:
  50.             t = f()
  51.             if t == None:
  52.                 res = None
  53.                 break
  54.             res += t
  55.         return res

  56.     def doAll(self, limit=1000):
  57.         res = []
  58.         while limit==None or limit>0:
  59.             t = self.do()
  60.             if t == None:
  61.                 break
  62.             res.append( t )
  63.             if limit!=None:
  64.                 limit -= 1
  65.         return res

  66. if __name__ == '__main__':
  67.     fs = FunList()
  68.     fs.add(lambda:'http://www.baidu.com/')
  69.     fs.add(shiftOnece(dateRange('20161021','20161023',format='%Y%m%d')))
  70.     fs.add(lambda:'.html')
  71.    
  72.     res = fs.doAll()
  73.     print(res)
  74.     # ['http://www.baidu.com/20161021.html', 'http://www.baidu.com/20161022.html']
复制代码
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-5-16 23:23:59 | 显示全部楼层
感谢两位老师的回答。。

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2018-5-16 23:32:06 | 显示全部楼层
本帖最后由 要学习 于 2018-5-16 23:36 编辑
ABC23 发表于 2018-5-16 18:12
>>> def urilist():
        datelyst = ('20161021', '20161023')
        for date in datelyst:


老师好

是这样改吗?
def urllyst(datelyst):
        datelyst = ('20161021', '20161023')
        lyst = []
        for date in datelyst:
                url = 'http://www.baidu.com/'+ date +'.html'
                lyst.append(url)
        return lyst


if __name__ == '__main__':
    print(urllyst)


vscode里执行代码,,提示。。。


<function urllyst at 0x000000000C31A730>

我type(urllyst)

显示是复数。。。。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2018-5-17 08:44:54 | 显示全部楼层
要学习 发表于 2018-5-16 23:32
老师好

是这样改吗?

元组、列表,取一个就好了。用列表,因为元组是不可变的。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-4-25 06:56

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表