zoukankan      html  css  js  c++  java
  • 废弃的java 爬虫代码

        protected static String getVersion(String filepath)
        {
            Properties system;
            String version="";
            try {
                system = PropertiesLoaderUtils.loadProperties(new ClassPathResource(filepath));
                version=StringUtils.toString(system.getProperty("crawlNode.version"));
            } catch (IOException e) {
                // TODO Auto-generated catch block
                e.printStackTrace();
                logger.debug(e.toString());
            }
            return version;
        }
        protected static String buildCrawlParams() {
            // TODO Auto-generated method stub
            String result="";
            LinkedHashMap<String, String> params=new LinkedHashMap<String, String>();
            InetAddress inet;
            try {
                inet = InetAddress.getLocalHost();
                String ip=StringUtils.toString(inet.getHostAddress());
                params.put("ip", ip);
               
                String hostname=inet.getHostName();
                params.put("hostname", hostname);
               
                logger.debug("ip:{}",ip);
                logger.debug("hostname:{}",hostname);
                logger.debug("version:{}",getVersion("conf/system.properties"));
                ObjectMapper mapper=new ObjectMapper();
                result=mapper.writeValueAsString(params);
            } catch (Exception e) {
                // TODO Auto-generated catch block
                logger.warn("获取抓取机环境参数出现错误");
            }
            logger.info("final crawlParams:{}",result);
            return result;

        }

  • 相关阅读:
    JS来推断文本框内容改变事件
    LINQ To SQL 语法及实例大全
    linux-多线程
    BackTrack5 (BT5)无线password破解教程之WPA/WPA2-PSK型无线password破解
    用Jfree实现条形柱状图表,java代码实现
    OpenGL中glPushMatrix和glPopMatrix的原理
    C# 之 抽象类与接口
    Android漫游记(1)---内存映射镜像(memory maps)
    Web页面布局方式小结
    STL中主要的算法(一)
  • 原文地址:https://www.cnblogs.com/lexus/p/2407323.html
Copyright © 2011-2022 走看看