java怎么写爬虫
HttpClient是java下面比较常用的一款网络工具包，如果效果不理想，可能是使用的方法不对，这里简单讲讲java爬虫的开发和使用流程。
1、下载
选择并使用网络工具包(例如HttpClient)下载指定url的网页源代码；
2、提交请求
使用get/post的方式提交请求，设置请求的headers参数、请求的cokies参数、请求的querl/formData参数
3、使用代理IP
对目标要求的各种必要参数源进行分析。
可以使用模拟浏览器下载分析和解决开销过大的请求(建议使用phantomjs+selenium)。
java中SPI是什么意思：1、概念JDK内置的服务提供发现机制。SPI是一种动态替换和发现的机制。比如有一个界面。如果你想在运行时动态添加，你只需要添加一个实现。我们经常遇到java.sql.Driver界面，其他不同的厂商可以对同一个界 ...