zoukankan      html  css  js  c++  java
  • scrapy 的post请求


    # 发起post请求:
    # 1,将Request方法中的method参数赋值成post
    # yield scrapy.Request(url=url, callback=self.parse, method='post')
    # 2,FormRequest()可以发起post请求(推荐)
    # -*- coding: utf-8 -*-
    import scrapy
    
    # 要求:百度翻译中指定词条对应的翻译结果进行获取
    class PostdemoSpider(scrapy.Spider):
        name = 'postDemo'
        start_urls = ["https://fanyi.baidu.com/sug"]
        # start_request该方法是父类中的一个方法:该方法可以对start_urls列表中的元素进行get请求的发送,
        # 发起post请求:
        #     1,将Request方法中的method参数赋值成post
                # yield scrapy.Request(url=url, callback=self.parse, method='post')
        #     2,FormRequest()可以发起post请求(推荐)
        def start_requests(self):
            print('是打发')
            # post请求的参数
            data = {
                'kw': '你好',
                }
            for url in self.start_urls:
                # 不指定method='post',Request默认是get方法
                # yield scrapy.Request(url=url,callback=self.parse,method='post') # 方式一
                yield scrapy.FormRequest(url=url,formdata=data, callback=self.parse)
    
        def parse(self,response):
            print('你真漂亮啊',response.text,'你真漂亮啊')
    View Code
    写入自己的博客中才能记得长久
  • 相关阅读:
    磁盘及分区管理
    用户和文件权限管理
    分割文件命令split
    去除重复命令uniq
    数据连接命令join
    数据剪切命令cut和数据粘贴命令pastte
    排序命令sort
    koa-router
    koa入门
    require.ensure的用法;异步加载-代码分割;
  • 原文地址:https://www.cnblogs.com/heris/p/12257275.html
Copyright © 2011-2022 走看看