捕捉Facebook Like的数据

领导的要求向来稀奇古怪，这里让我爬Facebook 的Like数据了，页面看了半天，没找到好的方法，毕竟是一段JS，而selenium总是抓不住JS的内容，于是想到了一个很折中的方法。

import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.File;
import java.io.FileReader;
import java.io.FileWriter;
import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.firefox.FirefoxDriver;

public class facebook {
    public static void main(String args[]){
        File f1 = new File("C:/new9.txt");
        File f2 = new File("C:/facebook.txt");
        String line="";
        String value="0";
        WebDriver dr = new FirefoxDriver();    
         try {
             
               FileReader reader = new FileReader(f1);
               FileWriter writer = new FileWriter(f2,true);
               BufferedReader br = new BufferedReader(reader);
               BufferedWriter bw = new BufferedWriter(writer);
               while((line=br.readLine())!=null){
                   //文字处理根据自己的需求来处理
                   if(line.indexOf(".com//")!=-1){
                       line=line.replaceAll(".com//", ".com/");
                       line=line.replaceAll(":","%3A");
                       line=line.replaceAll("/","%2F");
                       //获取站点上的facebook JS内容
                       dr.get("https://www.facebook.com/plugins/like.php?api_key=&locale=en_US&sdk=joey&channel_url=http%3A%2F%2Fstatic.ak.facebook.com%2Fconnect%2Fxd_arbiter.php%3Fversion%3D18%23cb%3Df27c66007%26origin%3Dhttp%253A%252F%252Fwww.idealhomegarden.com%252Ff313e3c198%26domain%3Dwww.idealhomegarden.com%26relation%3Dparent.parent&href="+line+"&node_type=link&width=100&font=arial&layout=button_count&colorscheme=light&show_faces=false&send=false&extended_social_context=false");
                       try{
//                           等待时间，如有需要可以添加，有时候网速太好，会报错
//                           dr.manage().timeouts().implicitlyWait(10000, TimeUnit.SECONDS);
                           WebElement element = dr.findElement(By.xpath("//span[@class='pluginCountTextDisconnected']"));
                           value=element.getText();
                           System.out.println(value);
                           bw.write(value);
                           bw.newLine();
                           bw.flush();
                       }catch(Exception e){
                           System.out.print("未找到网站");
                       }      
                   }
                   else{
                       value="0";
                       bw.write(value);
                       bw.newLine();
                       bw.flush();
                   }
               }
               dr.close();
               reader.close();
               writer.close();
          }catch (Exception e){
              System.out.print("系统错误");
          }
    }
}

 有些人会问，为什么用selenium，这个性能比较慢，而且多占内存，这个主要考虑衍生性了，这个还能抓google的，google的URL是HTTPS的，防止爬虫获取数据，当然写个多线程会更好。另外，这样的方式能抓各式各样的LIKE，在这个需求如扯淡的时代，需要的就是万能。。。。