本次更新增加了Downloader模块的一些功能。爱游戏官网
#609修复HttpRequestBody没有默认构造函数导致无法反序列化的bug。
#631HttpRequestBody的静态构造函数不再抛出UnsupportedEncodingException受检异常。
#571Page对象增加bytes属性，用于获取二进制数据。下载纯二进制页面时，请设置request.setBinarayContent(true)，这样对于二进制内容不会尝试转换为String，减小开销。
#629在HttpUriRequestConverter中会自动对一些导致URI异常的字符进行转移或过滤。
#610自动识别编码时，可以识别Content-Type中charset为大写的情况。
#627支持为Request单独设置页面编码，兼容同一站点多种编码方式的情况。
#613Page对象增加charset属性，其值为request/site中设置的charset，或者为自动检测的charset(未定义时)。
#606升级jsonpath到2.4.0
#608升级jsoup到1.10.3
WebMagic是一个简单灵活的Java爬虫框架。基于WebMagic，你可以快速开发出一个高效、易维护的爬虫。webmagic采用完全模块化的设计，功能覆盖整个爬虫的生命周期(链接提取、页面下载、内容抽取、持久化)，支持多线程抓取，分布式抓取，并支持自动重试、自定义UA/cookie等功能。
（1）由于我这个爬虫的抓取有分页，而且它的分页通过js跳转的，抽取出来感觉有点麻烦，我想直接得到所有的信息，发现可以通过输入url地址请求得到所有的信息（这是网站的一个小问题，它没有设置每页数据记录条数的范围），但是需要登录才可以进行url地址的访问，就要使用cookie模拟登录。
（2）下面分析有关登录信息的cookie，我使用的是chrome，点击如图位置，会看到此网站的cookie，（如果已经访问了一段时间了，可以清除所有cookie然后重新登录再访问，否则可能会有很多的cookie，分析起来不方便），由于只有5个cookie，直接加上就可以访问了
WebMagic是java上面经常的需要的一款爬虫类型的工具了，现在就可以试试最新的0.7.3版本，功能以及使用上面都是完全的免费的，欢迎大家试试！
展开内容
8.2/1,572.0M
美剧巴士app破解版是一款非常不错的可以追美剧的软件，非常受欢迎而且热门的一个软件，里面的美剧资源非常的丰富，而且更新很快，最主要的是没有广告不需要花钱开vip...
9.1/1,782.2M
菌窝子是一款以大型真菌为对象建立的集知识、交流、商业与一体的服务性软件。通过AR识别、3D对比等技术手段，使广大用户可以通过简单的辨别方式，在种类繁多、形态各异...
8.6/1,702.8M
PhpStorm是JetBrains公司开发的一款商业的PHP集成开发工具，拥有非常强大的项目管理和代码编辑功能，可以大大提升php开发工作者的工作效率！Php...
8.1/1,930.7M
三国急攻防九游版是一款三国策略手游，人物角色立体精致，场景画面精细唯美。游戏融合了多种全新玩法，四大职业体系，独创无限回廊、付费副本、国战等多种养成主线、数十位...
7.7/990.6M
傲斗遮天V3.3元宵版是一款十分具有挑战性的防守魔兽地图，最新版地图修复了一个老家零血不死BUG，加强了英雄杀怪召唤的神龙时间和属性。新的地图玩家更加刺激，赶紧...
9.1/1,261.2M
第一效果MP3剪切器是一款功能完善的mp3剪切软件。非常实用，界面整洁、易操作。有需要的额可以来东坡下载使用！第一效果MP3剪切器说明第一效果mp3剪切器是款简...
7.8/1,044.9M
配合长虹随身WiFi产品一起来使用，长虹随身wifiapp连接设备后，就可以查看电量、使用、网速等参数，方便大家更好的使用产品。功能介绍可通过APP一键管理设备...
8.5/1,897.0M
仙剑传说是一款仙剑类型游戏，很多玩家都在玩，画面精致，情节紧凑，想要称霸一方就赶紧和小伙伴一起加入仙剑传说的世界吧。仙剑传说简介精致细腻的游戏画面，华丽炫酷的技...
9.9/1,344.5M
logo是商标的展示，让品牌能够被人记住，设计一个好的logo是非常重要的，logo站标在线制作工具免费设置logo，操作简单，几分钟就可以设计出大量的图标让大...
8.2/675.2M
有趣会让人上瘾的实时战略游戏，全面战争领主之战以火材人为角色，有不同的游戏模式，控制战士开始进行战斗，将对手摧毁。全面战争领主之战手游特点1.控制你的军队形成编...
9.8/1,529.2M
免费的区块链软件，专门为各个企业设定，不仅包含了超多安全信息，而且使用也是更加的安全，多个不同的应用集信息，线上线下可以轻松了解，全透明信息，让大家了解更加轻松...
7.5/1,105.5M
工友慧app是一个专业的建筑工人找工作软件，这里拥有丰富的工作岗位，用户可以随时通过app查找合适的岗位，快速找到满意的工作，欢迎来下载使用！工友慧app介绍工...
9.9/1,664.1M
很多新创业的小公司，因为资金的缺乏，想要寻找合适的办公地点非常的困难，通过公司办公租房软件能够便捷的找到各种廉价实惠的办公场地。为广大企业消费者提供真实有效的写...
7.6/1,231.5M
ImDiskVirtualDiskDriver虚拟磁盘驱动器可以从虚拟内存中或通过i/o重定向磁盘文件映像模拟硬盘分区、软盘驱动器、cd/dvd-rom.这是一...
7.5/1,080.0M
英语学习好帮手----E英语宝。E英语宝”是湖南中泰智本网络科技有限公司推出的一款配套小学英语教材的移动APP。软件介绍“E英语宝”满足了互联网时代下学生、教师...
7.9/1,092.5M
mysql安卓版是一款可以应用于手机端的数据库管理软件，各位中小企业的老板可以试试这款软件哦，可以自定义端口，自定义数据库内容，使用起来相当的方便，很好的提高工...
8.5/666.8M
财乎app是一个专业的财经知识学习平台，这里拥有丰富的专栏课程，超多视频公开课，用户可以随时在这里学习，还可以和网友一起沟通分享！软件介绍财乎致力于知识分享，以...
8.4/1,345.6M
张家港市民网页app,是一款为港城市名个性定制化服务的融合平台，为市名提供多种类型的服务，有兴趣的朋友可以来东坡下载！张家港市民网页app应用介绍张家港市民网页...
10.0/436.1M
《北京的春节》文章以时间为经线，以人们的活动为纬线结构全文。文中列举了大量的老北京过春节的习俗，情趣盎然，学生喜闻乐见。全文内容安排有序，脉络清晰，衔接紧密，详...
8.3/482.3M
酷小呵短剧库是一款专门用来看短剧的app，在这里用户可以免费看到网上所有的短剧资源，无需充值，观看短剧完整内容，每一部短剧都为用户们提供了对应的链接，大家点击链...
8.3/1,566.8M
亿品惠客户端是一款非常好用的在线软件，各种好玩的有趣的内容等你来发现，还有暴多的优惠活动享不停，需要的朋友们赶紧下载吧。亿品惠客户端说明：亿品惠是一款综合线下线...
8.6/1,357.0M
会不火自己写诗词了？不会？想把自己需要的文字或者是姓名放到一首新的诗词里面去吗？那么现在就可以试试东坡下载下面的这款星哥藏头诗自动生成器！星哥藏头诗自动生成器官...
9.0/595.2M
一款手机投屏到电脑的软件，FastConnect投屏电脑端软件，可以将手机中的内容投屏到电脑屏幕上面展示，投屏的效果很流畅。FastConnect投屏电脑端安装...
10.0/511.5M
八兜文档app针对文职工作的平台，对各类的文档进行高效的在线管理，可以针对不同的文档进行有序的分类让你的文档安全度进一步的提升。八兜文档app功能文件集中管理根...
9.9/1,674.4M
争战天下魔兽地图经历了20个测试版本，今天终于发布了正式版本，小编带你带来了争战天下1.0正式版本的地图文件，防守玩法，非常不错的地图，欢迎来下载！争战天下地图...
