[已解决]新手爬虫用正则表达式得不到结果

March2615

目标是获得网易云音乐某一歌单的所有歌曲ID

这是我的实现代码

import re
import urllib.request as r

music_url = 'https://music.163.com/#/playlist?id=330634870&_hash=songlist-1342496757'
headers = {
            'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) '
                          'AppleWebKit/537.36 (KHTML, like Gecko) '
                          'Chrome/80.0.3987.122 Safari/537.36'
        }


def url_open(url):
    req = r.Request(url, headers=headers)
    res = r.urlopen(req)
    html = res.read().decode('utf-8')
    return html


def get_musicID(url):
    html = url_open(url)
    p = re.compile('<span class="txt"><a href=".*?id=(.*?)"')
    result = re.findall(p, html)
    print(result)


if __name__ == '__main__':
    get_musicID(music_url)

求问哪里出错了，为什么得不到想要的ID列表

最佳答案

月排行榜 / 总排行榜

wp231957

2020-3-10 10:24:51

March2615 发表于 2020-3-10 10:14
不是啊，用print只是想看得到的结果，如果用return不就看不到了吗
而且是因为得到的结果像截图里那样， ...

网易云啊，你看到的东西都是js渲染的，所以你用静态定位的方式都定位不到的：

参看：https://fishc.com.cn/thread-159468-1-1.html

跳转到最佳答案楼层

qiuyouzhi

23行，用 return result

March2615

qiuyouzhi 发表于 2020-3-10 10:11
23行，用 return result

不是啊，用print只是想看得到的结果，如果用return不就看不到了吗
而且是因为得到的结果像截图里那样，不是id，不明白哪出问题

wp231957

March2615 发表于 2020-3-10 10:14
不是啊，用print只是想看得到的结果，如果用return不就看不到了吗
而且是因为得到的结果像截图里那样， ...

网易云啊，你看到的东西都是js渲染的，所以你用静态定位的方式都定位不到的：

参看：https://fishc.com.cn/thread-159468-1-1.html