zoukankan      html  css  js  c++  java
  • scrapy(三):post请求

    -- coding: utf-8 --

    '''
    QiuBai.py 爬虫文件
    '''

    -- coding: utf-8 --

    import scrapy

    class PostSpider(scrapy.Spider):
    name = 'post'
    allowed_domains = ['cn.bing.com']
    # start_urls = ['http://cn.bing.com/']

    # 爬虫一启动,就是直接运行start_requests这个函数,这个函数发送的是get请求,如果现在你想直接发送post请求,所以你应该重写这个方法
    # def start_requests(self):
    #   for url in start_urls:
    #       yield scrapy.Request(url=url, callback=self.parse)
    
    def start_requests(self):
        post_url = 'https://cn.bing.com/ttranslationlookup?&IG=043A7C9FF4554AF19C3E9A576C1044CE&IID=translator.5036.3'
        data = {
            'from': 'zh-CHS',
            'to': 'en',
            'text': '高原',
        }
        yield scrapy.FormRequest(url=post_url, formdata=data, callback=self.parse)
    
    def parse(self, response):
        print('*' * 100)
        print(response.text)
        print('*' * 100)
  • 相关阅读:
    POJ3666 Making the Grade[动态规划]
    vector内部的实现1
    win32概述
    stl概述
    C++概要简介
    类的常量成员
    模板
    c11标准
    异常处理
    pak文件的打包和解包
  • 原文地址:https://www.cnblogs.com/lpdeboke/p/12964930.html
Copyright © 2011-2022 走看看