Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
looyolo
scrapy
提交
7ffcc587
S
scrapy
项目概览
looyolo
/
scrapy
与 Fork 源项目一致
从无法访问的项目Fork
通知
2
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
S
scrapy
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
7ffcc587
编写于
1月 18, 2016
作者:
K
Konstantin Lopuhin
浏览文件
操作
浏览文件
下载
差异文件
Merge branch 'py3-http-downloaders' into py3-downloader-middleware
上级
324f2c1a
7fdd3225
变更
2
隐藏空白更改
内联
并排
Showing
2 changed file
with
6 addition
and
6 deletion
+6
-6
scrapy/http/response/__init__.py
scrapy/http/response/__init__.py
+1
-1
tests/test_downloader_handlers.py
tests/test_downloader_handlers.py
+5
-5
未找到文件。
scrapy/http/response/__init__.py
浏览文件 @
7ffcc587
...
...
@@ -35,7 +35,7 @@ class Response(object_ref):
return
self
.
_url
def
_set_url
(
self
,
url
):
if
isinstance
(
url
,
s
ix
.
string_types
):
if
isinstance
(
url
,
s
tr
):
self
.
_url
=
url
else
:
raise
TypeError
(
'%s url must be str, got %s:'
%
(
type
(
self
).
__name__
,
...
...
tests/test_downloader_handlers.py
浏览文件 @
7ffcc587
...
...
@@ -322,18 +322,18 @@ class Http11MockServerTestCase(unittest.TestCase):
# download_maxsize < 100, hence the CancelledError
self
.
assertIsInstance
(
failure
.
value
,
defer
.
CancelledError
)
request
.
headers
.
setdefault
(
b
'Accept-Encoding'
,
b
'gzip,deflate'
)
request
=
request
.
replace
(
url
=
'http://localhost:8998/xpayload'
)
yield
crawler
.
crawl
(
seed
=
request
)
if
six
.
PY2
:
request
.
headers
.
setdefault
(
b
'Accept-Encoding'
,
b
'gzip,deflate'
)
request
=
request
.
replace
(
url
=
'http://localhost:8998/xpayload'
)
yield
crawler
.
crawl
(
seed
=
request
)
# download_maxsize = 50 is enough for the gzipped response
# See issue https://twistedmatrix.com/trac/ticket/8175
raise
unittest
.
SkipTest
(
"xpayload only enabled for PY2"
)
failure
=
crawler
.
spider
.
meta
.
get
(
'failure'
)
self
.
assertTrue
(
failure
==
None
)
reason
=
crawler
.
spider
.
meta
[
'close_reason'
]
self
.
assertTrue
(
reason
,
'finished'
)
else
:
raise
unittest
.
SkipTest
(
"xpayload only enabled for PY2"
)
else
:
raise
unittest
.
SkipTest
(
"xpayload and payload endpoint only enabled for twisted > 12.3.0"
)
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录