zoukankan      html  css  js  c++  java
  • 记录golang colly爬虫编码问题

    用框架colly 爬虫爬取数据,会出现 乱码问题,有时明明已经做了解码处理仍然乱码

    • 原因:
      • 初始化colly的时候设置了如下参数
    DetectCharset=true
    
    • DetectCharset 的作用为检查编码,但是设置这个为true后,抓取gbk编码的数据竟然解码不了,令人十分痛苦,最后发现之前DetectCharset 的问题,将其改为false 就可以了

    • 解决

    colly.DetectCharset = false 或者 不设置 DetectCharset
    
  • 相关阅读:
    PHP小技巧
    PHP Ajax跨域解决
    单点登录
    Linux 常用命令
    php面向对象--继承
    vueDemo
    vueSource
    vuex
    Vue.js
    关于前后端分离
  • 原文地址:https://www.cnblogs.com/Frange/p/15186876.html
Copyright © 2011-2022 走看看