Java爬虫常用依赖

不解春风意

1. 
   
2.         <!-- https://mvnrepository.com/artifact/org.apache.httpcomponents/httpclient -->
   
3.         <dependency>
   
4.             <groupId>org.apache.httpcomponents</groupId>
   
5.             <artifactId>httpclient</artifactId>
   
6.             <version>4.5.2</version>
   
7.         </dependency>
   
8. 
   
9.         <!-- parse DOM -->
   
10.         <dependency>
    
11.             <groupId>org.jsoup</groupId>
    
12.             <artifactId>jsoup</artifactId>
    
13.             <version>1.11.3</version>
    
14.         </dependency>
    
15. 
    
16.         <dependency>
    
17.             <groupId>org.apache.httpcomponents</groupId>
    
18.             <artifactId>httpclient</artifactId>
    
19.             <version>4.5.7</version>
    
20.         </dependency>
    
21. 
    
22.         <dependency>
    
23.             <groupId>commons-io</groupId>
    
24.             <artifactId>commons-io</artifactId>
    
25.             <version>2.5</version>
    
26.         </dependency>
    
27. 
    
28.         <!-- https://mvnrepository.com/artifact/org.slf4j/slf4j-log4j12 -->
    
29.         <dependency>
    
30.             <groupId>org.slf4j</groupId>
    
31.             <artifactId>slf4j-log4j12</artifactId>
    
32.             <version>1.7.25</version>
    
33.         <!--<scope>test</scope>-->
    
34.         </dependency>

复制代码