博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
url下载网页的三种方法
阅读量:6240 次
发布时间:2019-06-22

本文共 558 字,大约阅读时间需要 1 分钟。

# -*- coding: utf-8 -*-import cookielibimport urllib2url = "http://www.baidu.com"print "第一种方法"response1 = urllib2.urlopen(url)print response1.getcode()print len(response1.read())print "第二种方法"res = urllib2.Request(url)res.add_header("user-agent","Mozilla-5.0")response2 = urllib2.urlopen(res)print response2.getcode()print len(response2.read())print "第三种方法"cj = cookielib.CookieJar()opener = urllib2.build_opener(urllib2.HTTPCookieProcessor)urllib2.install_opener(opener)response3 = urllib2.urlopen(url)print response3.getcode()print cj#print response3.read()

 

转载地址:http://lgbia.baihongyu.com/

你可能感兴趣的文章
南京大学周志华教授当选欧洲科学院外籍院士
查看>>
计算机网络与Internet应用
查看>>
oracle在线迁移同步数据,数据库报错
查看>>
linux性能剖析工具
查看>>
flutter中的异步
查看>>
计算机高手也不能编出俄罗斯方块——计算机达人成长之路(16)
查看>>
# 2017-2018-1 20155224 《信息安全系统设计基础》第七周学习总结
查看>>
scikit-learn预处理实例之一:使用FunctionTransformer选择列
查看>>
邮件客户端导入邮件通讯录地址薄
查看>>
Linux系统安装
查看>>
Cassandra监控 - OpsCenter手册
查看>>
一些关于写Java代码的建议
查看>>
网络社交如何保护个人隐私?做好这4步
查看>>
SQL*Plus中的Echo
查看>>
SEO基础知识8大精华文章之第一篇(连载)
查看>>
面向sql编程
查看>>
对前面的自定义的toast制作拖拽效果,以及双击居中效果
查看>>
如何规划构建一套大型的Citrix桌面虚拟化架构 - 后记
查看>>
animationFromTop
查看>>
SEM如何做数据分析?
查看>>