设为首页收藏本站
切换到窄版

鱼C论坛

 找回密码
 立即注册
鱼C论坛»论坛 › 技术交流 › Python交流 › 爬的数据怎么不对？？？？？？
返回列表 发新帖
查看: 1379|回复: 6

[已解决]爬的数据怎么不对？？？？？？

[复制链接]
TCY
发表于 2018-11-26 16:11:12 | 显示全部楼层 |阅读模式

马上注册，结交更多好友，享用更多功能^_^

您需要 登录 才可以下载或查看，没有账号？立即注册

x
按小甲鱼写的代码：
  1. import requests
  2. import re
  3. import json

  5. def open_url(keyword):
  6.     keyword = "零基础入门学习Python"
  7.     url = "https://s.taobao.com/search?q={}&sort=sale-desc".format(keyword)
  8.     headers = {"user-agent":"Mozilla/5.0 (Windows NT 10; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.90 Safari/537.36"}
  9.     res = requests.get(url, headers = headers)
  10.     return res

  12. def main():
  13.     keyword = input("请输入要查询的商品：")
  14.     res = open_url(keyword)
  15.     with open("items.txt", "w", encoding = "utf-8") as f:
  16.         f.write(res.text)

  18. if __name__ == "__main__":
  19.     main()
复制代码

得到的文件：

  2. <!DOCTYPE html>
  3. <html>
  4. <head>
  5. <meta name="data-spm" content="a2107" />
  6. <title>
  7.         淘宝网 - 淘！我喜欢
  8. </title>
  9. <meta charset="gbk" />
  10. <meta http-equiv="X-UA-Compatible" content="IE=edge" />
  11. <meta name="viewport"
  12.         content="width=device-width, initial-scale=1, maximum-scale=1" />
  13. <meta name="description"
  14.         content="淘宝网(Taobao.com)作为专业的购物网站拥有全球时尚前沿的消费者购物集市,100%认证网上商城及超值二手商品区，同时购物安全，产品丰富，应有尽有,任你选购,让你尽享网上在线购物乐趣！" />
  15. <meta name="keywords"
  16.         content="淘宝,掏宝,网上购物,C2C,在线交易,交易市场,网上交易,交易市场,网上买,网上卖，购物网站,团购,网上贸易,安全购物,电子商务,放心买,供应,买卖信息,网店,一口价,拍卖,网上开店,网络购物,打折,免费开店,网购,频道,店铺" />
  17. <script>
  18.         window._lgst_ = new Date().getTime();
  19. </script>
  20. <script>
  21.         //全登陆不允许iframe嵌入
  22.         if (window.top !== window.self) {
  23.                 window.top.location = window.location;
  24.         }
  25. </script>
  26. <link rel="shortcut icon" href="//img.alicdn.com/favicon.ico" type="image/x-icon" />       
  27.                 <link type="text/css" href="//g.alicdn.com/sd/ncpc/nc.css?t=2018112615" rel="stylesheet" />
  28. <link rel="stylesheet"
  29.          />
  30. <link rel="stylesheet"
  31.          />
  32. <script src="https://g.alicdn.com/kissy/k/1.4.4/seed-min.js"></script>
  33. </head>
  34. <body class="chl-reg" data-spm="1"><script>
  35. with(document)with(body)with(insertBefore(createElement("script"),firstChild))setAttribute("exparams","category=&userid=&aplus&yunid=&&trid=0b1569e515432189800218480e1daa&asid=AQAAAAAkp/tbgX0jagAAAAAmt954U4Ge8g==",id="tb-beacon-aplus",src=(location>"https"?"//g":"//g")+".alicdn.com/alilog/mlog/aplus_v2.js")
  36. </script>
  37.         <div id="page" class="">
  38.                 <div id="header" class="clearfix" data-spm="1000340">
  39. <div class="logo">
  40.     <h1><a href="//www.taobao.com" title="淘宝网"><i class="iconfont tb-logo-cn">&#xe60d;</i><i
  41.             class="iconfont tb-logo-url">&#xe624;</i></a></h1>
  42.     <div class="login-msg error" style="text-align: center;width: 880px; margin: 0 auto;">
  43.         <p class="error" style="float: none;width: auto;">
  44.             为确保您账户的安全及正常使用，依《网络安全法》相关要求，6月1日起会员账户需绑定手机。如您还未绑定，请尽快完成，感谢您的理解及支持！
  45.         </p>
  46.     </div>
  47.     <a  class="link">
  48.         <i class="iconfont">&#xe61c;</i> "登录页面"改进建议
  49.     </a>
  50. </div>
  51.                 </div>
  52.                 <div id="content"
  53.     <div class="login-newbg"  style="background-image: url(https://gtms04.alicdn.com/tps/i4/TB1VeAIrkzoK1RjSZFlSuui4VXa.jpg);height:600px;">
  54.         <input type="hidden" id="J_adUrl" name="adUrl" value="">
  55.         <input type="hidden" id="J_adImage" name="adImage" value="">
  56.         <input type="hidden" id="J_adText" name="adText" value="">
  57.         <input type="hidden" id="J_viewFd4PC"  name="viewFd4PC" value="">
  58.         <input type="hidden" id="J_viewFd4Mobile" name="viewFd4Mobile" value="">  
  59.     </div>
  60.     <div class="login-adlink">
  61.         <a href="https:&#x2F;&#x2F;pages.tmall.com&#x2F;wow&#x2F;act&#x2F;20716&#x2F;ppkc?wh_biz=tm&amp;wh_weex=true" target="_blank" onclick="javascript:goldlog.record('/member.11.2','','','H46777405')"></a>
  62.     </div>
  63.                     <div class="content-layout">
  64.                         <div class="login-box-warp">
  65.                                 <div class="login-box no-longlogin "
  66.                                         id="J_LoginBox">
  67.                                         <script type="text/javascript">
  68.                                                 (function(x) {
  69.                                                         x && (x.className += " loading")
  70.                                                 })(document.getElementById("J_LoginBox"))
  71.                                         </script>
  72.                                         <!--login box begin-->

  74.                                        










  85.         <div class="hd">

  87.        

  89.          <div class="login-switch" onselectstart="return false;">

  91.                         <i class="iconfont quick" id="J_Static2Quick" onclick="javascript:goldlog.record('/member.13.1','','','H46777383')">&#xe628;</i>

  93.                         <i class="iconfont static" id="J_Quick2Static">&#xe626;</i>

  95.     </div>

  97.     <div class="login-tip">

  99.         <div class="poptip">

  101.             <div class="poptip-arrow">

  103.                 <em></em>

  105.                 <span></span>

  107.             </div>

  109.             <div class="poptip-content">

  111.                 <i class="iconfont">&#xe625;</i>扫码登录更安全

  113.             </div>

  115.         </div>

  117.     </div>                                 

  119.        

  121.         </div>

  123. <div class="bd">

  125.                 <!--登录的错误信息结束-->

  127.                

  129.                  <div id="J_QuickLogin" class="ww-login hidden">

  131.                         <form action="" class="ww-form">

  133.                                 <div class="login-title">

  135.                                         选择其中一个已登录的账户

  137.                                 </div>



  141.                                 <div class="ww-userlist">



  145.                                 </div>

  147.                                 <div class="trigger">



  151.                                 </div>

  153.                                 <div class="submit">

  155.                                         <button type="submit" class="J_Submit"  id="J_SubmitQuick">登 录</button>

  157.                                 </div>

  159.                                 <div class="other-login">

  161.                                         <a href=""  class="light-link" id="J_Sso2Static">使用其他账户登录</a>

  163.                                 </div>

  165.                         </form>

  167.         </div>

  169.         <div id="J_MiserLogin" class="ww-login hidden">

  171.                         <form action="" class="ww-form">

  173.                             <input type="hidden" id="x_token" value="">

  175.                             <div class="login-title">

  177.                                 选择其中一个已登录的账户

  179.                             </div>



  183.                             <div class="ww-userlist">



  187.                             </div>

  189.                             <div class="trigger">



  193.                             </div>

  195.                             <div class="submit">

  197.                                 <p><input type="checkbox" id="J_Mdelete"> 不再记住密码</p>

  199.                                 <button type="submit"  tabindex="5"

  201.                                         id="J_SubmitMiser">登 录</button>

  203.                             </div>

  205.                             <div class="other-login">

  207.                                 <a href="" title="使用其他账户登录" class="light-link" id="J_Miser2Static">使用其他账户登录</a>

  209.                             </div>

  211.                         </form>

  213.           </div>

  215.                

  217.                 <!--标准登录框-->

  219.                 <div class="static-form " id="J_StaticForm">

  221.                         <div class="login-title">

  223.                        

  225.                                

  227.                                 密码登录

  229.                        

  231.                         </div>

  233.                

  235.                         <form action="/member/login.jhtml?redirectURL=http%3A%2F%2Fs.taobao.com%2Fsearch%3Fq%3D%E9%9B%B6%E5%9F%BA%E7%A1%3F%E5%85%A5%E9%97%A8%E5%AD%A6%E4%B9%A0Python"  method="post" id="J_Form">

  237.                     <div id="J_Message"

  239.                                 style="display:none;"

  241.                                 class="login-msg error">

  243.                                 <i class="iconfont">&#xe604;</i>

  245.                                

  247.                         <p class="error"></p>

  249.                        

  251.                      </div>

  253.                                 <!-- 手机号登录 -->

  255.                                





  261.                                 <div class="field ph-hide username-field ">

  263.                                         <label for="TPL_username_1"> <i class="iconfont" title="会员名">&#xe601;</i></label>

  265.                                         <span class="ph-label">会员名/邮箱/手机号</span> <input type="text"

  267.                                                                                                                                                          name="TPL_username" id="TPL_username_1"

  269.                                                 class="login-text J_UserName"

  271.                                                                                                                                                          value=""

  273.                                                                                                                                                          maxlength="32" tabindex="1" aria-label="会员名/邮箱/手机号"/>

  275.                                 </div>



  279.                         <div class="field pwd-field">

  281.                                 <label id="password-label" for="TPL_password_1"><i

  283.                                         class="icon iconfont" title="登录密码">&#xe600;</i></label>

  285.                                 <span id="J_StandardPwd">

  287.                                    <input type="password" name="TPL_password"

  289.                                         id="TPL_password_1" class="login-text" maxlength="40" tabindex="2"

  291.                                         autocomplete="off" aria-label="登录密码"/>

  293.                                 </span>

  295.                         </div>

  297.                        

  299.                         <!-- use new slide checkcode -->

  301.                         <div id="nocaptcha" class="nc-container tb-login"></div>

  303.                        



  307.                        

  309.                         <div class="submit">

  311.                                

  313.                                 <input id="J_NcoSig" name="ncoSig" type="hidden" />

  315.                                 <input id="J_NcoSessionid" name="ncoSessionid" type="hidden" />

  317.                                 <input id="J_NcoToken" type="hidden" name="ncoToken"

  319.                                         value="673728b297214cbdff38da0432e905228c05650c" />

  321.                                 <input id="J_NcoShow" type="hidden" name="slideCodeShow" value="false" />

  323.                                



  327.                                 <input type="hidden" name="useMobile" value="false"/>

  329.                                 <input type="hidden" id="J_lang" name="lang" value="zh_CN"/>

  331.                                 <input type="hidden" name="loginsite" value="0"

  333.                                         id="J_loginsite" /> <input type="hidden" name="newlogin" value="" />

  335.                                

  337.                                 <input type="hidden" id="J_TPL_redirect_url" name="TPL_redirect_url"

  339.                                         value="http://s.taobao.com/search?q=闆跺熀纭?鍏ラ棬瀛︿範Python" />

  341.                                 <input type="hidden" id="J_From" name="from"

  343.                                         value="tb" />

  345.                                 <input type="hidden" name="fc"

  347.                                         value="default" />

  349.                                 <input type="hidden" id="J_CssStyle" name="style"

  351.                                         value="default" />

  353.                                 <input type="hidden" id="J_CssStyle2" name="css_style"

  355.                                         value="" />

  357.                                 <input type="hidden" name="keyLogin" value="false" />

  359.                                 <input type="hidden" name="qrLogin" value="true" />

  361.                                 <input type="hidden" name="newMini" value="false" />

  363.                                 <input type="hidden" name="newMini2" value="false" />

  365.                                

  367.                                 <input type="hidden" name="tid" />

  369.                                 <input type="hidden" name="loginType" value="3" />

  371.                                 <input type="hidden" name="minititle"

  373.                                         value="" />

  375.                                 <input type="hidden" name="minipara"

  377.                                         value="" />

  379.                                 <input type="hidden" name="pstrong" value="" />

  381.                                

  383.                                 <input type="hidden" id="J_sign" name="sign"

  385.                                         value="" />

  387.                                 <input type="hidden" id="J_need_sign" name="need_sign"

  389.                                         value="" />

  391.                                

  393.                                 <input type="hidden" id="J_isIgnore" name="isIgnore"

  395.                                         value="" />

  397.                                 <input type="hidden" id="J_full_redirect" name="full_redirect"

  399.                                         value="" />

  401.                                         <!-- 子账号跳转方式 -->

  403.                                 <input type="hidden" name="sub_jump"

  405.                                         value="" />

  407.                                

  409.                                 <input type="hidden" name="popid"

  411.                                         value="" />

  413.                                 <input type="hidden" name="callback" value="" />

  415.                                

  417.                                 <input type="hidden" id="J_guf" name="guf"

  419.                                         value="" />

  421.                                 <input type="hidden" id="J_not_duplite_str" name="not_duplite_str"

  423.                                         value="" />

  425.                                 <input type="hidden" name="need_user_id"

  427.                                         value="" />

  429.                                

  431.                                 <input type="hidden" name="poy" />

  433.                                

  435.                                 <input type="hidden" id="gvfdc" name="gvfdcname" value="" />

  437.                                 <input type="hidden" name="gvfdcre"

  439.                                         value="" />

  441.                                

  443.                                 <input type="hidden" id="J_from_encoding" name="from_encoding"

  445.                                         value="" />

  447.                                

  449.                                 <input type="hidden" id="J_sub" name="sub"

  451.                                         value="" />

  453.                                

  455.                                 <input type="hidden" name="TPL_password_2" id="TPL_password_2" />

  457.                                 <input type="hidden" id="J_PBK" value="9a39c3fefeadf3d194850ef3a1d707dfa7bec0609a60bfcc7fe4ce2c615908b9599c8911e800aff684f804413324dc6d9f982f437e95ad60327d221a00a2575324263477e4f6a15e3b56a315e0434266e092b2dd5a496d109cb15875256c73a2f0237c5332de28388693c643c8764f137e28e8220437f05b7659f58c4df94685" />

  459.                                 <input type="hidden" name="loginASR" value="1" />

  461.                                 <input type="hidden" name="loginASRSuc" value="0" />

  463.                                

  465.                                 <input type="hidden" id="J_allp" name="allp"

  467.                                         value="" />

  469.                                 <input type="hidden" name="oslanguage" />

  471.                                 <input type="hidden" name="sr" />

  473.                             <input type="hidden" name="osVer" />

  475.                                 <input type="hidden" name="naviVer" />

  477.                                 <input type="hidden" name="osACN" />

  479.                                 <input type="hidden" name="osAV" />

  481.                                 <input type="hidden" name="osPF" />

  483.                                 <input type="hidden" name="miserHardInfo" id="M_hard_info"/>

  485.                                 <input type="hidden" id="J_Appkey" name="appkey" value="00000000" />

  487.                                 <input type="hidden" name="nickLoginLink" value="" />

  489.                                 <input type="hidden" name="mobileLoginLink" value="https://login.taobao.com/member/login.jhtml?redirectURL=http://s.taobao.com/search?q=零基础入门学习Python&amp;sort=sale-desc&amp;useMobile=true" />

  491.                                 <input type="hidden" name="showAssistantLink" value="" />



  495.                        

  497.                                 <input id="J_UnitClose " value="true" type="hidden" />

  499.                                 <button type="submit" class="J_Submit" tabindex="3" id="J_SubmitStatic" data-ing="正在登录...">登 录</button>

  501.                         </div>

  503.                        

  505.                         <ul class="entries">

  507.                                 <li id="J_OtherLogin" class="other-login">

  509.                                          

  511.                                                  

  513.                                                                 <a  tabindex="4" class="weibo-login"><i class="iconfont">&#xe603;</i>微博登录</a>

  515.                                                          

  517.                                                                 <a  tabindex="5" class="alipay-login"><i class="iconfont">&#xe618;</i>支付宝登录</a>

  519.                                                  

  521.                                        

  523.                                 </li>

  525.                         </ul>

  527.                        

  529.                        

  531.                         <div class="login-links">

  533.                                



  537.                                

  539.                                 <a  tabindex="6" class="forget-pwd" target="_blank">

  541.                                         忘记密码</a>

  543.                                        

  545.                                         <a  target="_blank">忘记会员名</a>

  547.                                        

  549.                                 <a  class="register"

  551.                                         target="_blank" tabindex="7">免费注册</a>

  553.                                

  555.                         </div>

  557.                 </form>

  559.         </div>

  561.             









  571. <!--快速登录开始-->

  573. <div class="quick-form">

  575.   <!--扫码登录开始-->

  577.   <div class="qrcode-login" id="J_QRCodeLogin">

  579.           <div class="login-tip" style="display:block;">

  581.         <div class="poptip">

  583.             <div class="poptip-arrow">

  585.                 <em></em>

  587.                 <span></span>

  589.             </div>

  591.             <div class="poptip-content">

  593.                 <i class="iconfont">&#xe625;</i>密码登录在这里</div>

  595.         </div>

  597.     </div>

  599.    <div class="login-title">手机扫码，安全登录</div>

  601.      

  603.      <div class="qrcode-mod">

  605.         <div class="qrcode-main">

  607.             <div class="qrcode-img" id="J_QRCodeImg" style="opacity: 1;"></div>

  609.                     <div class="qrcode-help"></div>

  611.                     <div class="msg-err">

  613.                                 <h6>二维码已失效</h6>

  615.                                 <a href="javascript:;" class="refresh J_QRCodeRefresh">请点击刷新</a>

  617.                     </div>

  619.         </div>

  621.                 <div class="qrcode-desc" data-spm="25847036">

  623.             <i class="iconfont">&#xe619;</i>

  625.                          

  627.              <p><font class="ft-gray">打开 </font><a  target=_blank class="light-link">手机淘宝</a> | <a  target=_blank class="light-link">手机天猫</a>

  629.               <span class="ft-gray">扫一扫登录</span></p>

  631.             

  633.         </div>

  635.         

  637.       </div>

  639.       <div class="qrcode-msg">

  641.                 <div class="msg-ok">

  643.                                 <div class="msg-icon">

  645.                                         <i class="iconfont icon-ok">&#xe60e;</i>

  647.                                         <i class="iconfont icon-phone">&#xe611;</i>

  649.                                 </div>

  651.                                 <h6>扫描成功！</h6>

  653.                                 <p>请在手机上确认登录</p>

  655.                                 <div class="link"><a href="#" class="light-link J_QRCodeRefresh">返回二维码登录</a></div>

  657.                 </div>

  659.         </div>

  661.         <div class="login-links">

  663.         <a href="" class="forget-pwd J_Quick2Static" target="_blank">密码登录</a>

  665.         <a  class="register" target="_blank" >免费注册</a>

  667.    </div>

  669. </div>

  671. <!--扫码登录结束-->

  673. <!--一键登录开始-->



  677.       <!--一键登录结束-->

  679.    </div>

  681.    <!--快速登录结束-->

  683.         </div>

  685.         </div>

  687.         <!--标准登录框结束-->

  689. </div>

  691. </div>

  693. </div>

  695. <!--登录脚本-->



  699. <script>

  701.     window.loginConfig = {

  703.         //验证码

  705.         codeURL: "",

  707.         codeHandle: "#J_StandardCode",

  709.         codeImg: "#J_StandardCode_m",

  711.         enableQRCode: true,   // 是否允许二维码登录

  713.         shownQRCode: true, // 是否自动显示二维码登录

  715.         getQRCodeURL: "https://qrlogin.taobao.com/qrcodelogin/generateQRCode4Login.do",

  717.         checkQRCodeURL: "https://qrlogin.taobao.com/qrcodelogin/qrcodeLoginCheck.do",

  719.         intervalQRCode: 2000,

  721.         enableLoginByKey:false,

  723.         startLoginByKeyURL:"https://qrlogin.taobao.com/qrcodelogin/startLoginByKey.do",

  725.         checkLoginByKeyURL:"https://qrlogin.taobao.com/qrcodelogin/loginByKey.do",

  727.         enableMiserLogin:false,

  729.         audioCodeURL: "",

  731.         checkUserNameURL:"/member/request_nick_check.do?_input_charset=utf-8",       

  733.         disableQuickLogin:false,               

  735.         defaultView: "static"

  737.     };

  739. </script>



  743.                                         <!--login box end-->

  745.                                 </div>

  747.                                 <!-- .login-box END -->                               

  749.                        

  751.                         </div>

  753.                        

  755.                         <div class="footer" data-spm="1997523009">

  757.                                

  759.                                















  775.   <div class="footer-hd">

  777.     <p>

  779.     <a >阿里巴巴集团</a>

  781.     <b>|</b>

  783.     <a >阿里巴巴国际站</a>

  785.     <b>|</b>

  787.     <a >阿里巴巴中国站</a>

  789.     <b>|</b>

  791.     <a >全球速卖通</a>

  793.     <b>|</b>

  795.     <a >淘宝网</a>

  797.     <b>|</b>

  799.     <a >天猫</a>

  801.     <b>|</b>

  803.     <a >聚划算</a>

  805.     <b>|</b>

  807.     <a >一淘</a>

  809.     <b>|</b>

  811.     <a >阿里妈妈</a>

  813.     <b>|</b>

  815.     <a >飞猪</a>

  817.     <b>|</b>

  819.     <a >虾米</a>

  821.     <b>|</b>

  823.     <a >阿里云计算</a>

  825.     <b>|</b>

  827.     <a >云OS</a>

  829.     <b>|</b>

  831.     <a >万网</a>

  833.     <b>|</b>

  835.     <a >支付宝</a>

  837.     <b>|</b>

  839.     <a >来往</a>

  841.     </p>

  843.   </div>

  845.   <div class="footer-bd">

  847.     <p>

  849.     <a >关于淘宝</a>

  851.     <a >合作伙伴</a>

  853.     <a >营销中心</a>

  855.     <a href="mailto:lianzheng@taobao.com" title="lianzheng@taobao.com" target="_self">廉正举报</a>

  857.     <a >联系客服</a>

  859.     <a >开放平台</a>

  861.     <a >诚征英才</a>

  863.     <a >联系我们</a>

  865.     <a >网站地图</a>

  867.     <a >法律声明</a>

  869.     <a >隐私权政策</a>

  871.     <em>&copy; 2018 Taobao.com 版权所有</em>

  873.     </p>

  875.     <p>

  877.     <span>网络文化经营许可证：浙网文[2016]0132-032号</span>

  879.     <b>|</b>

  881.     <span>增值电信业务经营许可证：浙B2-20080224-1</span>

  883.     <b>|</b>

  885.     <span>信息网络传播视听节目许可证：1109364号</span>

  887.     </p>

  889.   </div>

  891.   <div class="footer-ft">

  893.     <a >

  895.             <img width="36" height="36" src="https://assets.alicdn.com/apps/login/static/css/images/wj.gif">

  897.     </a>

  899.     <a  class="mod mod-a"></a>

  901.     <a  class="mod mod-b"></a>

  903.     <a  class="mod mod-c"></a>

  905.     <a  class="mod mod-d"></a>

  907.     <a  class="mod mod-e"></a>

  909.   </div>

  911. <!-- #footer END -->

  913. <div id="server-num">login011021081124.center.na62</div>

  915.                                

  917.                         </div>

  919.                        

  921.                 </div>

  923.                 </div>

  925.         </div>

  927.        





  933. <script type="text/javascript">
  934. TRLang = {
  935.         ERROR_NICK_BLANK : '请填写账户名',
  936.         ERROR_PASSWORD_BLANK :  '请输入密码',
  937.         ERROR_NICK_PASSWORD_BLANK : '请输入账户名和密码',
  938.         ERROR_CHECKCODE_BLANK : '请输入验证码',
  939.         TIPS_REMEMBER_PASSWORD : '记住密码',
  940.         TIPS_NOT_REMEMBER_PSW_ON_PUBLIC : '不要在公共计算机记住密码，防止账户被盗'
  941.     };
  942. </script>

  944.        













  958. <script type="text/javascript" charset="utf-8" src="//g.alicdn.com/sd/ncpc/nc.js?t=2018112615"></script>





  964. <script>





  970.   var UA_Opt = {};

  972.   UA_Opt.ExTarget = ['TPL_password_1','TPL_password_2','J_Pwd1','J_PwdV'];

  974.   UA_Opt.FormId = "J_Form";

  976.   

  978.   function initNC() {

  980.                 var nc = new noCaptcha();

  982.                         var opt = {

  984.                                 renderTo : "nocaptcha",

  986.                                 appkey : "CF_APP_TBLogin_PC",

  988.                                 token : "673728b297214cbdff38da0432e905228c05650c",

  990.                                 elementID : [ "TPL_username_1" ],

  992.                                 trans : {"behaviorTraceId": "null"},

  994.                                 is_Opt : 1,

  996.                                 language : "zh_CN",

  998.                                 isEnabled : true,

  1000.                                

  1002.                                 customWidth: 'J_StaticForm',

  1004.                                 customFloatHeight: 420,

  1006.                                

  1008.                                 times : 3,

  1010.                                 callback: function (data) {

  1012.                                         var S = KISSY;

  1014.                                         S.one("#J_NcoSig").val( data.sig);

  1016.                                         S.one("#J_NcoSessionid").val(data.csessionid);

  1018.                                 },

  1020.                                 error: function (s) {

  1022.                                         window.console && console.log("error");

  1024.                                         window.console && console.log(s);

  1026.                                 },

  1028.                                 is_tbLogin : true

  1030.                         };

  1032.                         nc.init(opt);               

  1034.         }



  1038.         initNC();

  1040.        

  1042.        

  1044.   

  1046.   

  1048. </script>







  1056. <script>

  1058. (function(S){



  1062.                        

  1064.                         S.getScript("https://g.alicdn.com/vip/login/0.5.65/js/??client.js,atp.js?t=20130528");

  1066.                







  1074.         S.use("event, node", function(){

  1076.                 S.one(window).on("load", function(){

  1078.                         eval(function(p,a,c,k,e,d){e=function(c){return c};if(!''.replace(/^/,String)){while(c--){d[c]=k[c]||c}k=[function(e){return d[e]}];e=function(){return'\\w+'};c=1};while(c--){if(k[c]){p=p.replace(new RegExp('\\b'+e(c)+'\\b','g'),k[c])}}return p}('0 1=5;0 2=4;0 3=1&2;6.9("8").7=3;',10,10,'var|a|b|c|110|10|document|value|gvfdc|getElementById'.split('|'),0,{}))

  1080.                 });

  1082.         });

  1084. })(KISSY);

  1086. </script>









  1096. <div id="_umfp"
  1097.         style="display: inline; width: 1px; height: 1px; overflow: hidden">
  1098. </div>
  1099. <script>
  1100. (function (w, d, t) {
  1101.     var s = d.createElement(t), m = d.getElementsByTagName(t)[0];
  1102.     s.async = 1;
  1103.     s.src = "https://g.alicdn.com/sd/pointman/js/pt2.js?_=" + Math.floor((new Date()).getTime() / 36e5);
  1104.     m.parentNode.insertBefore(s, m);

  1106.     w._pointman_q = w._pointman_q || [];
  1107.     _pointman_q.push(["um", function (umx) {
  1108.         var container = document.getElementById("_umfp");
  1109.         umx.init({
  1110.             timeout: 3000,
  1111.             serviceLocation: 'cn',
  1112.             appName: 'taobao_login',
  1113.             formId: 'J_Form',
  1114.             containers:{flash:container ,dcp:container}
  1115.         });
  1116.     }]);
  1117. })(window, document, "script");
  1118. </script>
  1119.         <script src="https://g.alicdn.com/vip/login/0.5.65/js/login/nlogin.js?t=20151220"></script>
  1120. </body>
  1121. </html>
复制代码
最佳答案
月排行榜 / 总排行榜
wongyusing
2018-11-26 20:27:34
这份代码10月10日那天就不行了。   
需要把登录后的曲奇和会话，写到header中才行
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复

使用道具 举报

塔利班
发表于 2018-11-26 16:25:52 | 显示全部楼层
淘宝需要登录
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

TCY
 楼主| 发表于 2018-11-26 18:02:21 | 显示全部楼层
那怎么跳过登录啊？改了user-agent也一样
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

幽梦三影
发表于 2018-11-26 18:48:12 From FishC Mobile | 显示全部楼层
多加一些headers参数进去
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

wongyusing
发表于 2018-11-26 20:27:34 | 显示全部楼层    本楼为最佳答案   
这份代码10月10日那天就不行了。   
需要把登录后的曲奇和会话，写到header中才行
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

TCY
 楼主| 发表于 2018-11-27 06:50:27 | 显示全部楼层
参考headers
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

TCY
 楼主| 发表于 2018-11-27 13:31:17 | 显示全部楼层
OK啦，代码：
  1. import requests
  2. import re
  3. import json

  5. def open_url(keyword):
  6.     keyword = "零基础入门学习Python"
  7.     url = "https://s.taobao.com/search?q={}&sort=sale-desc".format(keyword)
  8.     headers = {"user-agent":"Mozilla/5.0 (Windows NT 10; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.90 Safari/537.36"}
  9.     cookie = "miid=690527322662134086; thw=cn; UM_distinctid=1659eebc48e99-00e0b2b034ef5a-62381459-1fa400-1659eebc4902bf; l=AoGB-NWrd3CEx0CI6qw241RwEcebJvWg; cna=zB4ZE5L/q20CAbfr/zVbsY5J; hng=CN%7Czh-CN%7CCNY%7C156; t=85f066376cd3704954202a09357ed24e; uc3=vt3=F8dByR6qJyiNQbhgu%2Fs%3D&id2=UUjZelQJ%2FHgrhw%3D%3D&nk2=oggiitQFuUg%3D&lg2=V32FPkk%2Fw0dUvg%3D%3D; tracknick=%5Cu9F99%5Cu7FBD%5Cu5728%5Cu7EBF; lgc=%5Cu9F99%5Cu7FBD%5Cu5728%5Cu7EBF; _cc_=W5iHLLyFfA%3D%3D; tg=0; mt=ci=74_1&np=; enc=C6HRarQIhzItaDsqCtcXB8U3FXkxG8v2xp0JJQADDfaffT8yvfanzKAEkCa5p6rEa2eeyjwNiqldnXNGba0LaA%3D%3D; _m_h5_tk=59bfb65378d094565372a91915643c0d_1543200189078; _m_h5_tk_enc=c52360670f3df78c7eb74d43c00809e6; cookie2=3907225cefe201a676647a86b9fa9273; v=0; _tb_token_=e36785a1e6f77; uc1=cookie14=UoTYNclMAZv3JQ%3D%3D; JSESSIONID=19767F474C1C21839157F6489BDAEBE7; isg=BODgWEcbr9_DIhP8CBuoKddipu5yQcXWr6GhnVrzEvuOVYJ_DvqFQ8Ez6b3wZXyL"
  10.     cookies = {}
  11.     for each in cookie.split("; "):
  12.         name, value = each.strip().split("=", 1)
  13.         cookies[name] = value
  14.     res = requests.get(url, headers = headers, cookies = cookies)
  15.     return res

  17. def main():
  18.     keyword = input("请输入要查询的商品：")
  19.     res = open_url(keyword)
  20.     with open("items.txt", "w", encoding = "utf-8") as f:
  21.         f.write(res.text)
  22.                

  24. if __name__ == "__main__":
  25.     main()
复制代码
想知道小甲鱼最近在做啥？请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-5-17 10:11

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表