爬虫就业冲刺20180818

一、教学内容

1、使用scrapy实现之前的音乐爬虫

教学内容:

  • 复习之前的音乐爬虫项目
  • scrapy使用进阶
  • 使用scrapy实现之前的音乐爬虫

2、面试交流

教学内容:
面试经验分享

python爬虫面试1
python爬虫面试2
python爬虫面试3
python爬虫面试4

二、课堂笔记


image.png

抓取思路:

S1 : 抓取专辑列表页,将专辑任务存在album_task表
S2:从album_task表获取album url,把歌曲url存在 song_task
S3: 从song_task表取出url,把歌曲信息放在song_info

scrapy 爬虫

pip3 install scrapy
scrapy startproject music_scrapy
cd music_scrapy
scrapy genspider qq_album_list y.qq.com

https://www.jianshu.com/p/baa2ddbaf766

「点点赞赏,手留余香」

    还没有人赞赏,快来当第一个赞赏的人吧!
0 条回复 A 作者 M 管理员
    所有的伟大,都源于一个勇敢的开始!
欢迎您,新朋友,感谢参与互动!欢迎您 {{author}},您在本站有{{commentsCount}}条评论