我的WebMagic已经和Spring Boot整合在一起了,那么我如果要开启异步,就会变得非常简单。 首先,在WebMagic开启爬虫的那个类加上@Asyns注解,声明这是一个异步执行的方法,再在调用类上加入@EnableAsyns注解, […]

前几天使用了一下WebMagic,所以今天就拿自己的博客试试手。这只是一个单纯的JavaSE的测试,以后我想把他与Spring Boot结合使用,并且可以……你懂得~ 我先大概说一下我用到的内容,首先是PageProcessor,这是一个定 […]

这个问题困扰了我一个多月了,我之前装的是WPS2019,出现这个问题;然后我卸载了,装了一个WPS2016专业版,结果还是有这个问题;最后我装了一个MS office 2010专业版,这个问题还是没得到结果。 细思恐极,难道是我的电脑中病毒 […]

最近想用Java写个爬虫,来满足我的不可描述的需求,选了半天,我打算用WebMagic框架,但是万万没想到啊,有一种开始叫做结束。 我按照官网的步骤,部署好了Maven,复制了他的示例代码,运行直接报错;报错的原因是因为 WebMagic默 […]

奇葩年年有,今年特别多 我在start.spring.io网站初始化了一个SpringBoot项目,我加入了……我忘记了,反正就是加入了一下其他的依赖,当我导入到Eclipse的时候,在pom.xml文件的第一行,报错 Descriptio […]

记得之前有个也有一个下载B站视频的方法,就是在域名前面加个i,然后跳转到另一个网站,解析下载视频;今天介绍的是另一个网站,它不仅可以在网页下载,也有自己的客户端,我推荐使用它的客户端下载,不过有一点我比较好奇,为什么火绒在安装这个软件的时候 […]

距离我上一次发布文章已经过去一个多月了,那么我这一个多月干了什么呢? 我的上一篇文章是在江西南昌更新的,而这一篇文章是在广东广州写的。没错,我来到了广州。 我是上个月4月13号来的广州,当时和一个同学,我记得那个时候南昌一直在下雨,但是刚好 […]

第一步,首先分析拖慢网页的因素,打开审查元素,选择 Network ,然后把Disable Cache勾上,最后重新刷新网站 从上面图片可以看出,加载完成总共需要快 20s 的时间 哇(王者之哇)!这TM是我的博客。 不能忍了,开始动手,首 […]