鱼C论坛

 找回密码
 立即注册
查看: 1326|回复: 2

[已解决]pandas分割字符串

[复制链接]
发表于 2021-8-8 21:16:24 | 显示全部楼层 |阅读模式
20鱼币
requtes爬取天气后获取如下图dataframe,要求将【b】列中数据分割成【天气,最高温度,最低温度】三列。
import bs4
import requests
import numpy as np
import pandas as pd

url = 'http://m.apporid.com/xian/1yue.html'
headers = {'user-agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, '
                         'like Gecko) Chrome/91.0.4472.164 Mobile Safari/537.36',
           'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,'
                     '*/*;q=0.8,application/signed-exchange;v=b3;q=0.9 ',
           }
res = requests.get(url, headers=headers)
temperature = []

soup = bs4.BeautifulSoup(res.text, "html.parser")
targets = soup.find("ul", class_="tqullist tqicon28x20")
targets = targets.find_all('li')
for each in targets:
    temperature.append(each.text.split())

t1 = np.array(temperature).reshape(len(temperature), 2)
df = pd.DataFrame(t1, columns=["日期", "b"])
print(df)
图片
01.png
不要按下标索引分组方法。
最佳答案
2021-8-8 21:16:25
df.b.str.split('/', expand=True)  #通常可以。 可你这前面中文天气和低温连在了一起咋分都不方便。。看看有没有正则高手,可以帮你掰开,哈哈

话说,你直接爬取的时候,分好3列,不好些吗,比如
import bs4, requests, re 
import numpy as np
import pandas as pd

url = 'http://m.apporid.com/xian/1yue.html'
res = requests.get(url,)
temperature = []
soup = bs4.BeautifulSoup(res.text, "html.parser")
targets = soup.find("ul", class_="tqullist tqicon28x20")
dt = targets.find_all('b')
tq = targets.find_all('div')
temp = targets.find_all('span')
for d, i, j in zip(dt, tq, temp):
    temperature.append([d.text, i.text.strip(), j.text])
    # print([d.text, i.text.strip(), j.text])

t1 = np.array(temperature).reshape(len(temperature), 3)
df = pd.DataFrame(t1, columns=["日期", "天气", "温度"])
print(df)

最佳答案

查看完整内容

df.b.str.split('/', expand=True) #通常可以。 可你这前面中文天气和低温连在了一起咋分都不方便。。看看有没有正则高手,可以帮你掰开,哈哈 话说,你直接爬取的时候,分好3列,不好些吗,比如
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2021-8-8 21:16:25 | 显示全部楼层    本楼为最佳答案   
df.b.str.split('/', expand=True)  #通常可以。 可你这前面中文天气和低温连在了一起咋分都不方便。。看看有没有正则高手,可以帮你掰开,哈哈

话说,你直接爬取的时候,分好3列,不好些吗,比如
import bs4, requests, re 
import numpy as np
import pandas as pd

url = 'http://m.apporid.com/xian/1yue.html'
res = requests.get(url,)
temperature = []
soup = bs4.BeautifulSoup(res.text, "html.parser")
targets = soup.find("ul", class_="tqullist tqicon28x20")
dt = targets.find_all('b')
tq = targets.find_all('div')
temp = targets.find_all('span')
for d, i, j in zip(dt, tq, temp):
    temperature.append([d.text, i.text.strip(), j.text])
    # print([d.text, i.text.strip(), j.text])

t1 = np.array(temperature).reshape(len(temperature), 3)
df = pd.DataFrame(t1, columns=["日期", "天气", "温度"])
print(df)
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2021-8-9 07:46:05 From FishC Mobile | 显示全部楼层
用正则吧
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-1-13 15:44

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表