Jsoup 工具

tiancaisq

程序员都是比较懒的，不喜欢人工无奈的复制粘贴，所以Jsoup 工具是不可少的，这意味着要自己写工具去解决自己实际工作中需要解决的问题。

通过JSOUP 解析目标网站

1. package jsoup.as.catchs;
   
2. 
   
3. import java.io.IOException;
   
4. import java.util.HashSet;
   
5. import java.util.Set;
   
6. 
   
7. import org.jsoup.Jsoup;
   
8. import org.jsoup.nodes.Document;
   
9. import org.jsoup.nodes.Element;
   
10. import org.jsoup.select.Elements;
    
11. 
    
12. public class CatchASData {
    
13.         
    
14.         private static final String SESSION_VALUE = "eyJpdiI6IklrMDRxNnlcL25aSGoyOFVoQ3VGcVVBPT0iLCJ2YWx1ZSI6IjB5aGlTS2lUc20wbjU2OWJMT0F0OENaSytZd3hpdDRFZVVsMk5lVFU5RVhYNUFrSnhYKzRYdHpZUmYzR2g0ajNFR041OHd6cVBUQmFKenJTc0FPMVNBPT0iLCJtYWMiOiIxM2M4MjZlNTNhNDFjYmEwNWI0ZTg4MGMzOWMzMzgxMWIzZjJkZjBlNGIyNDA3OTJlODcxZGYwNGVlNmIwYjQzIn0%3D";
    
15.         private static final String URL = "https://drive-easy.cn/axaChina/provider-dashboard/1/1?fromDate=01-02-2017&toDate=&Status=&serviceType=&driverList=&searchDashboard=&autoSelectVal=&page=";
    
16.         private static final String SESSION_KEY = "myapp_session";
    
17.         
    
18.         private static Set<String> typeSet = new HashSet<>();
    
19.         
    
20.         public static void main(String[] args) throws IOException {
    
21.                 System.setProperty("javax.net.ssl.trustStore", "jssecacerts");
    
22.                
    
23.                 for(int i=1; i<=17; i++) {
    
24.                         extracted(i);
    
25.                 }
    
26.                
    
27.                 System.out.println(typeSet);
    
28.         }
    
29. 
    
30.         private static void extracted(int i) throws IOException {
    
31.                 Document document = Jsoup.connect(URL + i).cookie(SESSION_KEY, SESSION_VALUE).get();
    
32.                
    
33.                 Elements select = document.select(".kctr td:eq(6)");
    
34.                 for (Element element : select) {
    
35.                         typeSet.add(element.html());
    
36.                 }
    
37.         }
    
38. }
    

复制代码