WebMagic-0.7.3
版本发布时间: 2017-07-30 15:43:36
code4craft/webmagic最新发布版本:WebMagic-1.0.1(2024-10-26 01:46:00)
本次更新增加了Downloader模块的一些功能。
#609 修复HttpRequestBody没有默认构造函数导致无法反序列化的bug。
#631 HttpRequestBody的静态构造函数不再抛出UnsupportedEncodingException
受检异常。
#571 Page对象增加bytes属性,用于获取二进制数据。下载纯二进制页面时,请设置request.setBinarayContent(true)
,这样对于二进制内容不会尝试转换为String,减小开销。
#629 在HttpUriRequestConverter中会自动对一些导致URI异常的字符进行转移或过滤。
#610 自动识别编码时,可以识别Content-Type中charset为大写的情况。 #627 支持为Request单独设置页面编码,兼容同一站点多种编码方式的情况。 #613 Page对象增加charset属性,其值为request/site中设置的charset,或者为自动检测的charset(未定义时)。
#606 升级jsonpath到2.4.0 #608 升级jsoup到1.10.3
1、 webmagic-0.7.3-all.tar.gz 5.07MB