#!/usr/bin/env python
#coding:utf-8
import os,sys
import time
import pycurl
import StringIO
URL="http://www.baidu.com" #探测目标url
c = pycurl.Curl()
c.setopt(pycurl.URL,URL) #定义请求URL

# 获取内容
L1 = pycurl.Curl()
L1buf = StringIO.StringIO()
L1.setopt(pycurl.WRITEFUNCTION, L1buf.write)
L1.perform()
L1txt = L1buf.getvalue()

和多线程结合使用需要设置,可能还有其他问题
L1.setopt(pycurl.NOSIGNAL, 1)

c.setopt(pycurl.CUSTOMREQUEST,"DELETE")  设置封装方法，有put，post，get，delete等多种方法，不支持HEAD
c.setopt(pycurl.NOBODY, True)               不要内容，相当于HEAD请求 
c.setopt(pycurl.HTTPHEADER, ["range: bytes=0-2048"])  range请求  curl -H "range: bytes=0-10"

c.getinfo(pycurl.CONTENT_LENGTH_DOWNLOAD)  内容长度

c.setopt(pycurl.CONNECTTIMEOUT,5) #定义请求连接的等待时间
c.setopt(pycurl.MAXREDIRS, 5) #设置最大重定向次数
c.setopt(pycurl.USERAGENT, "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)") #模拟浏览器
c.perform() #服务器端返回的信息
c.getinfo(pycurl.HTTP_CODE) #查看HTTP的状态 类似urllib中status属性
c.setopt(pycurl.TIMEOUT,5) #超时时间
c.setopt(pycurl.FORBID_REUSE,1) #交互后断开连接，不重用
c.setopt(pycurl.MAXREDIRS,1) #HTTP重定向最大为1
c.setopt(pycurl.DNS_CACHE_TIMEOUT,30) #保存dns信息为30秒
#创建一个文件对象, 以”wb”方式打开, 用来存储返回的http头部及页面内容in
indexfile = open(os.path.dirname(os.path.realpath(__file__))+"/content.txt", "wb")
c.setopt(pycurl.WRITEHEADER, indexfile)    #将返回的HTTP HEADER定向到indexfile文件对象
c.setopt(pycurl.WRITEDATA, indexfile)    #将返回的HTML内容定向到indexfile文件对象
try:
    c.perform()    #提交请求
except Exception, e:
    print "connecion error:"+str (e)
    indexfile.close()
    c.close()
    sys.exit()
NAMELOOKUP_TIME =  c.getinfo(c.NAMELOOKUP_TIME)    #获取DNS解析时间
CONNECT_TIME =  c.getinfo(c.CONNECT_TIME)    #获取建立连接时间
PRETRANSFER_TIME =  c.getinfo(c.PRETRANSFER_TIME)    #获取从建立连接到准备传输所消耗的时间
STARTTRANSFER_TIME = c.getinfo(c.STARTTRANSFER_TIME)    #获取从建立连接到传输开始消耗的时间
TOTAL_TIME = c.getinfo(c.TOTAL_TIME)    #获取传输的总时间
HTTP_CODE =  c.getinfo(c.HTTP_CODE)    #获取HTTP状态码
SIZE_DOWNLOAD =  c.getinfo(c.SIZE_DOWNLOAD)    #获取下载数据包大小
HEADER_SIZE = c.getinfo(c.HEADER_SIZE)    #获取HTTP头部大小
SPEED_DOWNLOAD=c.getinfo(c.SPEED_DOWNLOAD)    #获取平均下载速度#打印输出相关数据
#打印输出相关数据
print "HTTP状态码:%s" % (HTTP_CODE)
print "DNS解析时间:%.2f ms"% (NAMELOOKUP_TIME*1000)
print "建立连接时间:%.2f ms" % (CONNECT_TIME*1000)
print "准备传输时间:%.2f ms" % (PRETRANSFER_TIME*1000)
print "传输开始时间:%.2f ms" % (STARTTRANSFER_TIME*1000)
print "传输结束总时间:%.2f ms" % (TOTAL_TIME*1000)
print "下载数据包大小:%d bytes/s" % (SIZE_DOWNLOAD)
print "HTTP头部大小:%d byte" % (HEADER_SIZE)
print "平均下载速度:%d bytes/s" % (SPEED_DOWNLOAD)
#关闭文件及Curl对象
indexfile.close()
c.close()