zoukankan      html  css  js  c++  java
  • 新浪新闻采集程序

    <?php
        //error_reporting(0);
        $date=date("Ymd");
        //echo $date;
        $url="http://top.finance.sina.com.cn/ws/GetTopDataList.php?top_type=day&top_cat=all&top_time=".$date."&top_show_num=20&top_order=ASC";
        $doc=file_get_contents($url);
        header("Content-Type:text/html;charset=gb2312");//UNICODE转GB2312
        //echo $doc;
        preg_match_all('/"url":".*l/U',$doc,$article);//获取文章列表
        $article=current($article);//二维数组转一维数组
        //print_r($article);
        $rule="/"url":(.*)""/";
        function OnlyUrl($string){
           $string=stripslashes($string);
           $string=str_replace('"url":"',"",$string);
           return $string; 
        }
         
        function GetTitle($url){  //获取文章标题
          $doc=file_get_contents($url);
          $rule="/<h1 (.*)</h1>/";
          preg_match($rule,$doc,$result);
          echo $result;
        }
        foreach($article as &$value){
            $value=OnlyUrl($value);
        }//提取了URL 
    ?>
    <?php
      function GetTitle($url){  //获取文章标题
        $rule="/<h1 (.*)</h1>/";
        preg_match_all($rule,$doc,$result);
        $rule="/>(.*)</";//截掉<h1></h1>
        preg_match($rule,$result[0][1],$title);
        return $title[1];
      }
      function GetContent($url){
        $doc=file_get_contents($url);//打开网页
      // echo $doc; 
        $rule="/publish_helper(.*)publish_helper_end/xs";
        preg_match($rule,$doc,$result);//取出正文部分
        //echo $result[0];
        $rule="/publish_helper(.*)</blockquote>/xs";
        preg_match($rule,$result[0],$out);//取出链接部分
        //print_r($out);
        $content=str_replace($out[0],"",$result[0]);//提取纯文字段的内容
        echo $content;
      }
    ?>
  • 相关阅读:
    重装window7系统(使用U盘)
    冒泡排序
    使用jad进行反编译.class文件生成.java
    java代码编写1+2+3+....+100之和
    springboot多模块项目不同模块组件不能@autowired问题
    django CBV和FBV写法总结
    django cookie与session组件
    djjango cookie和session 的几种常用需求使用方法
    django 一个关于分组查询的问题分析
    Django book manage system
  • 原文地址:https://www.cnblogs.com/shanyansheng/p/5474257.html
Copyright © 2011-2022 走看看