from my wp blog
OOP老师有个网站,用于发布课件和布置提交作业,截止后作业都放在网上供学生下载
我浙大牛不少,把程序抓出来研究一下源码
引入几个库,伪造表单数据
import urllib
import urllib2
import cookielib
auth_url = 'http://fm.zju.edu.cn/login.php'
data = {
'user' : setting.user,
'passwd' : setting.passwd,
}
postData = urllib.urlencode(data) #把数据编码为url格式
cookie管理
cookieJar = cookielib.CookieJar()
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookieJar))
伪造请求头
headers = {
'Host' : setting.host,
'Referer' : setting.referer,
}
req = urllib2.Request(auth_url, postData, headers)
req.add_header('User-Agent', setting.user_agent) #ua加入更健康
result = opener.open(req) #响应头和内容
查看result数据,发现已经登陆
先访问一个页面,然后在这个页面中下载代码文件
assign_url = 'http://fm.zju.edu.cn/showProblem.php?cid=**&pid=**'
result = opener.open(assign_url)
file_url = 'http://fm.zju.edu.cn/dls.php?cid=**&id='
for id in range(0, 150):
result = opener.open(file_url+str(id))
这个时候代码文件已经下载,所需要做的是给一个文件名
在响应头里面可以找到一些东西,用正则可以抓出文件名,然后文件写入保存
import re
filenameRe = re.compile(r'^.*filename=(.+)$')
...
...
filename = '100/' + str(id) + '_'+ filename
outfile = open(filename, 'wb')
outfile.write(result.read())
outfile.close()
2024 - 快车库 - 我的知识库 重庆启连科技有限公司 渝ICP备16002641号-10
企客连连 表单助手 企服开发 榜单123