设为首页收藏本站
切换到窄版

鱼C论坛

 找回密码
 立即注册
鱼C论坛»论坛 › 编程语言专区 › Python交流 › 怎么获取到网页里js发起请求后返回的内容？
返回列表 发新帖
查看: 1229|回复: 2

怎么获取到网页里js发起请求后返回的内容？

[复制链接]
chakyam
发表于 2018-3-28 22:05:20 | 显示全部楼层 |阅读模式

马上注册，结交更多好友，享用更多功能^_^

您需要 登录 才可以下载或查看，没有账号？立即注册

x
本帖最后由 chakyam 于 2018-3-28 22:21 编辑

网址：http://gz.17zwd.com/item?GID=106127728&spm=0.42.137.502442.106127728.0&action=0

  2. <form action="http://vip.17zwd.com/Manifest/Add" method="post" target="_blank" id="J_goodsForm">
  3.                 <input type="hidden" id="zdid" name="Zdid" value="42">
  4.                 <input type="hidden" id="mid" name="Mid" value="868">
  5.                 <input type="hidden" id="sid" name="Sid" value="502442">
  6.                 <input type="hidden" id="gid" name="Gid" value="106127728">
  7.                 <input type="hidden" id="gno" name="Gno" value="8012">
  8.                 <input type="hidden" id="size" name="Size" value="">
  9.                 <input type="hidden" id="color" name="Color" value="">
  10.                 <input type="hidden" id="count" name="Count" value="">
  11.                 <input type="hidden" id="id" name="Id" value="">
  12.                 <input type="hidden" id="purchaseOrderName" name="purchaseOrderName" value="">
  13.                 <div class="goods-page-show-title">
  14.                     2018春季新款缎面刺绣棒球服 法斗狗头刺绣夹克男女情侣款短外套                </div>
  15.                 <div class="goods-page-function-btn-container">
  16.                     <div class="clone-btn-ohter-container">
  17.                         <a  target="_blank">找同款</a>
  18.                     </div>
  19.                     <div class="clone-btn-container">
  20.                         <a href="/tong.htm?id=106127728" class="itemTitle">搜标题</a>
  21.                     </div>
  22.                     <div class="price-correct">
  23.                         <span class="icon-zwd"></span>
  24.                         <span>
  25.                             <a  class="link-service" target="_blank">
  26.                                 价格纠错/实拍投诉
  27.                             </a>
  28.                         </span>
  29.                     </div>
  30.                 </div>
  31.                                 <div class="goods-parameter-outside-container" style="display: block;">
  32.                     <div class="goods-hint-img-container" style="display: block;"><a  target="blank"><img src="http://static17.17zwd.com/assets/2017/img/df/df_42.jpg"></a></div><div class="goods-page-server-container">
  33.                         <div class="goods-browse-container">
  34.                             <div class="goods-browse-flet">
  35.                                 <span class="taobao-wholesale">淘宝价</span>
  36.                                 <span class="goods-taobao-price">
  37.                                     <del>￥
  38.                                         <span id="goods-taobao-price">150.00</span>
  39.                                     </del>
  40.                                 </span>
  41.                             </div>
  42.                             <span class="goods-price-right">
  43.                                 <a class="link-taobao"  rel="nofollow" target="_blank">去淘宝购买</a>
  44.                             </span>
  45.                         </div>
  46.                         <div class="goods-price-container">
  47.                             <div class="goods-price-left">
  48.                                 <span class="goods-wholesale">拿货价</span>
  49.                                 <span class="goods-price">
  50.                                     ￥
  51.                                     <i class="dollar">
  52.                                         <span id="goods-pifa-price">75.00</span>
  53.                                     </i>
  54.                                 </span>
  55.                             </div>
  56.                             <div class="mark-container">
  57.                                 <span class="tail-contianer"></span>
  58.                                 <span class="take-goods-half">拿货优惠价</span>
  59.                             </div>
  60.                             <div class="goods-price-right ">
  61.                                 <span class="goods-browser">
  62.                                 浏览：
  63.                                 <span class="red-browse">668</span> 次
  64.                                 </span>
  65.                             </div>
  66.                         </div>
  67.                     </div>
  68.                     <div class="goods-all-parameter-container">
  69.                         <div class="parameter-item">
  70.                             <div class="parameter-left">
  71.                                 货<span class="letter-space">空</span>号
  72.                             </div>
  73.                             <div class="parameter-right">
  74.                                 <a href="###" class="parameter-item-show">
  75.                                     8012                                </a>
  76.                             </div>
  77.                         </div>
  78.                         <div class="parameter-item line">
  79.                             <div class="parameter-left">
  80.                                 上<span class="letter-space">空</span>新
  81.                             </div>
  82.                             <div class="parameter-right">
  83.                                 <a href="###" class="parameter-item-show">
  84.                                     2018-03-27 21:28:42                                </a>
  85.                             </div>
  86.                         </div>

  88.                         <div class="parameter-item parameter-item-sku" id="parameter-item-sku">
  89.                         <div class="sku-selector"><div class="selector-item"><div class="selector-item-name">颜<span class="letter-space">空</span>色</div><div class="selector-item-content color-selector-wrapper" id="sku-color-selector"><span class="color-selector active" data-color="玫红色">玫红色<span class="icon-zwd icon-selected"></span></span><span class="color-selector" data-color="紫色">紫色<span class="icon-zwd icon-selected"></span></span></div></div><div class="selector-item"><div class="selector-item-name">尺<span class="letter-space">空</span>码</div><div class="selector-item-content size-selector" id="sku-size-selector"><ul class="size-selectors"><li class="sku-item"><div class="sku-item-info">M</div><div class="sku-item-info price">￥75</div><div class="sku-item-info sku">16888件可售</div><div class="sku-item-info last-item"><div class="number-input"><button type="button" class="input-operation operation-minus" disabled="disabled"><i class="icon-zwd"></i></button><input type="text" data-size="M" data-min="0" data-max="16888" value="0"><button type="button" class="input-operation operation-add"><i class="icon-zwd"></i></button></div></div></li><li class="sku-item"><div class="sku-item-info">L</div><div class="sku-item-info price">￥75</div><div class="sku-item-info sku">16888件可售</div><div class="sku-item-info last-item"><div class="number-input"><button type="button" class="input-operation operation-minus" disabled="disabled"><i class="icon-zwd"></i></button><input type="text" data-size="L" data-min="0" data-max="16888" value="0"><button type="button" class="input-operation operation-add"><i class="icon-zwd"></i></button></div></div></li><li class="sku-item"><div class="sku-item-info">XL</div><div class="sku-item-info price">￥75</div><div class="sku-item-info sku">16888件可售</div><div class="sku-item-info last-item"><div class="number-input"><button type="button" class="input-operation operation-minus" disabled="disabled"><i class="icon-zwd"></i></button><input type="text" data-size="XL" data-min="0" data-max="16888" value="0"><button type="button" class="input-operation operation-add"><i class="icon-zwd"></i></button></div></div></li></ul></div></div><div class="sku-selector-summary-wrapper" id="sku-selector-summary-wrapper"><div class="sku-selector-summary"><div class="info-part"><span class="info-item"><span class="number">0</span> 件</span><span class="info-item"><span class="number">0.00</span> 元</span></div><a href="javascript: void(0)" id="chosen-list-toggler" class="chosen-list-toggler">已选清单 <i class="icon-zwd icon-down"></i><i class="icon-zwd icon-up"></i></a><div class="chosen-list-wrapper"></div></div></div></div></div>
  90.                     </div>
  91.                     <div class="goods-all-parameter-btn-container">

  93.                         <a href="javascript:;" class="caigoudan-car" id="gotDF">加入代发车</a>

  95.                         <a href="###" class="caigoudan-car" id="J_CG">
  96.                             加入拿货单
  97.                         </a>
  98.                                                 <span class="item-action-flag" data-tbid="566487328004" data-params="566487328004|%E5%B9%BF%E5%B7%9E_%E5%9B%BD%E6%8A%95245-C_%E8%AF%97%E5%B0%BC%E6%9B%BC%E5%A5%B3%E8%A3%85_P75|75|502442|106127728|9e781c03e64a3a0056d38cc73ea55d5a">
  99.                             <a href="###" class="gototb-car key-upload" id="upLoadMan" data-tb="566487328004" data-uq="9e781c03e64a3a0056d38cc73ea55d5a" title="一键上传多平台">一键上传</a>
  100.                         </span>
  101.                     </div>
  102.                 </div>
  103.                             </form>
复制代码


上面这段代码我猜测是js弄出来的，怎么样才可以获取到里面的颜色和尺码这两条信息？
chrome_2018-03-28_22-04-47.png

用selenium的版本我已经做出来了，但是比较慢，所以想用requests和bs来实现
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

wongyusing
发表于 2018-3-28 22:40:49 | 显示全部楼层
xpath啊，re都行
下面的是xpath的
  1. //*[@id="sku-color-selector"]/span #这是可以关于两个颜色的地点，
  2. #你只要在后面加上[1]或者[2]就能获取颜色的信息，如下
  3. //*[@id="sku-color-selector"]/span[1]     # 红色


  6. //*[@id="sku-size-selector"]/ul #这是关于尺寸的所有尺寸都在里面了
  7. #取其一的话
  8. //*[@id="sku-size-selector"]/ul/li[2]/div[1]
  9.                                   #↑修改上面li[2]中的2就好了
复制代码

小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

chakyam
 楼主| 发表于 2018-3-28 22:47:38 | 显示全部楼层
wongyusing 发表于 2018-3-28 22:40
xpath啊，re都行
下面的是xpath的

requests请求返回的内容没有一楼我贴出来的代码的
或者requests有会返回带有一楼我贴出来的代码的方法？
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-12-28 22:20

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表