zoukankan      html  css  js  c++  java
  • 网络爬虫之古筝名曲爬取

    学习完理论知识之后信誓旦旦的开始了爬虫之旅,但是一路遭遇挫折。

    很喜欢毛不易的《像我这样的人》,一开始打算爬取网易云里这首歌的评论,但是查看了源代码,一直找不到评论的文字,搜了百度才知道对于用户数据会有加密,需要经过一系列非常复杂的操作才能爬取到评论,由于本人水平实在有限,便放弃了。

    又想尝试爬取《知否知否应是绿肥红瘦》的分集剧情,但是百度百科的内容过于繁杂,对于标签的处理还没有到达那个水平,也只能不了了之。

    心情不是很好,网易云又正好播放到了一首《渔舟唱晚》,博主不才,学过近十年的古筝,于是便想到了不如做个十大古筝名曲的爬虫,主要原因是页面比较简单便于分析爬取…【咳咳

    这样输出的结果是空字符串,博主便在网上进行了搜索,发现了一个.get_text()函数可以返回标签对应的文字部分,一尝试,果然可以

    效果是这样的:

    但是存在的缺陷就是 “第六首 《汉宫秋月》”出现了两次,尝试了一下把所有文本变为一个大的字符串,然后对其中内容进行修改,发现效果不好,这样做的话就会编程这样:

    本人水平实在有限,没法做进一步的处理,希望老师同学们能帮忙给点建议,支支招,谢谢~

  • 相关阅读:
    验证email的正则表达式
    时间管理的小技巧
    如何在项目中进行畅快的沟通
    为什么你总成为不了架构师?
    我的时间管理Color My Time
    《重来》值得你多看几遍
    程序员如何成为一位出色的项目经理?
    大学毕业后拉开差距的真正原因
    [精华] FreeBSD-FAQ集锦(一)
    awk 常用信息
  • 原文地址:https://www.cnblogs.com/yycboy/p/12820180.html
Copyright © 2011-2022 走看看