zoukankan      html  css  js  c++  java
  • 关于HttpClient模拟浏览器请求的參数乱码问题解决方式

    转载请注明出处:http://blog.csdn.net/xiaojimanman/article/details/44407297

    http://www.llwjy.com/blogdetail/9383e88e4bc7378b8318e15b0ac33559.html

    个人博客站已经上线了,网址:www.llwjy.com,欢迎大家吐槽~

    --------------------------------------------------------------------------------------------------------------------------

          在之前的博客中介绍了一些关于怎样利用HttpClient去模拟浏览器请求,从而获取网页源码,得到自己想要的内容。近期自己在做一些项目測试的时候,发下例如以下问题:


    问题描写叙述

    1.使用HttpClient模拟post/get请求时,当參数中有中文,在server端解析出的參数值中的中文都是“?”。英文数字等能够正常解析。

    2.当模拟的url參数中有中文时,解析出的參数值中的中文也是“?”,例:http://hostname/test.do?name=您好


    问题原因

          在查阅众多相关资料。最终找到当中的原因,眼下市面上多数的浏览器中url中的中文採用的都是utf-8的编码方式。而HttpClient默认的编码方式是gbk,因此在模拟浏览器请求的过程中,就会由于编码方式不正确造成乱码的问题。


    解决方式

    对于该问题,从下面两个方面去解决:

    第一步:指定HttpClient请求的编码方式,指定编码方式能够有下面几种方法:

    method.getParams().setContentCharset("utf-8");
    method.getParams().setParameter(HttpMethodParams.HTTP_CONTENT_CHARSET,"utf-8");
    method.addRequestHeader("Content-Type", "text/html; charset=UTF-8");
    httpClient.getParams().setContentCharset("utf-8");
    经过第一步的处理,对POST中的參数中有中文的问题已经能够攻克了。可是url中的中文还是没有办法解决,这就须要第二步了。

    第二步:对URL中的中文进行转码处理,能够通过以下的方法对URL做一次预处理,这样再去模拟浏览器的行为时,就不会出现乱码了。

    public static String encodeUrlCh (String url) throws UnsupportedEncodingException {
    	String ChRegex = "([u4e00-u9fa5]+)";
    	while (true) {
    		String s = getFirstString(url, ChRegex, 1);
    		if ("".equals(s)){
    			return url;
    		}
    		url = url.replaceAll(s, URLEncoder.encode(s, "utf-8"));
    	}
    }
          通过上面两步,全然能够完美的解决模拟浏览器行为中出现的乱码问题。


  • 相关阅读:
    数据库
    java语法
    《Lucene实战(第2版)》 配书代码在IDEA下的编译方法
    lucene学习
    社交关系调研(费)
    微博开发平台java SDK demo学习之examples(demo)
    微博开发平台java SDK demo学习之friendships
    F. Classical? (数论 + 思维 + 推理 + 容斥)
    石子合并问题,经典区间DP
    luoguP2048 [NOI2010]超级钢琴
  • 原文地址:https://www.cnblogs.com/gavanwanggw/p/7041099.html
Copyright © 2011-2022 走看看