Coin163

  • http - python requests post 大文件和获取进度条

    准备用HTTP 在局域网内 上传一些文件,文件一般都在1G左右 r = requests.post('****', data={'path':'2016/07/08/5ASD5SDFASDFASDF/cad.zip'}, files={'file': open(filename, 'rb')} ) 这样上传小文件可以, 但是上传大文件时候会py会报 memeryError的内存错误。如何解决此问题呢?

    日期:1970年01月01日
  • python - 小白提问:爬虫抓取并保存的图片无法打开

    1.我写了个爬虫去爬取页面,成功的拿到了所有图片的网络地址2.下载保存到本地后,我去打开图片,发现一只在转圈无法打开]2]

    日期:1970年01月01日
  • scrapy - python 爬虫?

    想爬去健康界这个网页一直,没有返回值 coding:utf-8 '''健康界新闻爬去'''from scrapy.selector import HtmlXPathSelectorfrom scrapy.contrib.linkextractors.sgml import SgmlLinkExtractor as slefrom scrapy.linkextractors import LinkExtractorfrom scrapy.contrib.spiders import CrawlSpider, Rulefrom scrapy.http import FormRequest, Re

    日期:1970年01月01日
  • python爬虫 - Python 爬虫 提取网页信息

    爬取网址是:http://www.xici.net.co/nn/1以上是HTML网页内容,需获取IP地址,端口号,地方,是否高匿,两个时间 一下是我写的Python,但只能实现部分,请各位大神指点下谢谢。。。。 import re import urllib

    日期:1970年01月01日
  • Python写网页爬虫的问题?

    Python写网页爬虫时,要提交的数据中有一个数是动态变化的,每次提交都不一样,该如何处理?

    日期:1970年01月01日
  • python - django 文件上传与转发

    有这样一个需求,需要以http方式上传一张图片,先上传到一个中间服务器,然后再将这张图片上传到另一个服务器(目标服务器)上。中间可以根据实际需要存储图片。使用django框架和python 怎么实现? 我的目前的方式是这样的(部分代码): def

    日期:1970年01月01日
  • python网页爬虫的多线程

    python3.4用threading模块做多线程并发式的爬虫,开始启动十个线程都是好的,爬到最后的时候只剩下主线程存活。也就是爬到后面的时候只有一个线程活动。中间会有异常存在,捕获了并且抛出了异常,这些异常是否会导致子线程锁死?如果会,怎么解决线程在锁死

    日期:1970年01月01日
  • php - python requests模块提交中文数据

    我的环境:windows平台命令行编码GBK,python2.7.6。需要用python提交一个中文验证码,目标地址的网页编码为utf-8,目前自己模拟了服务端。http请求使用python的requests模块,但是返回的结果往往不正常,代码

    日期:1970年01月01日
  • Python如何 POST “request payload”到目标URL?

    想用Python实现自动填表,将本地txt文件里对应的内容填到网页/然后POST到指定URL: 用Chrome的F12查看了下,点击“保存”之后,对应的POST数据包是这样: (浅红色框内是填写到网页里的txt内容,大红色框是问题所在:“request

    日期:1970年01月01日
  • 网页爬虫 - python网络爬虫中文乱码问题

    学习python网络爬虫,爬豆瓣网(网页编码我看了,是utf-8)的时候,出现爬下来的是十六进制 对python内部的编码感觉有点凌乱啊... 我之后发现了问题的所在: 当我创建一个s=["逢坂大河","新垣结衣"] print s 得到的是ascii

    日期:1970年01月01日