Python爬虫----某购物网站商品信息(超详细)

下来是教程,首先是软件配置:
1.python3.8
2.pycharm
不会的复制这个链接照抄一遍即可
https://appycyfaqcq1951.pc.xiaoe-tech.com/p/t_pc/course_pc_detail/video/v_64391e2de4b0cf39e6bbbd4e?product_id=p_6434c005e4b0cf39e6b9aa85&channel_id=1119256&type=6
然后是库的选取:
pandas去这里下载:
selenium看这个教程:
安装selenium(超级详细)_selenium安装
datetime和time都是python自带的,不用下载
接下来开始写代码:
1.先新建一个软件包,以后要用的话直接调用,取英文名
2.导入必要的库以及声明utf-8编码
3.设置四个参数,分别是你要搜索的东西,账号,密码,和要检索多少页, 然后再做反爬虫处理,这里直接套皮
4.使用selenium访问浏览器,selenium实际上就是模仿我们正常上网时的操作,包括点鼠标,滑动滚轮之类的
第一行声明使用的是Microsoft Edge浏览器 第二行输入我们想进去的网站链接
5.点击“登陆”
目标位置怎么找呢?
目标界面右击,点“检查” 把它点蓝,对准“请登录” 就能找到目标位置了 把“目标位置”换成style-red就好
6.模拟输入密码
来到登陆界面 还是右键检查,然后点蓝对准这两个输入框
根据这些信息选择合适的搜索方法
这边还是选class 然后模拟输入然后登录就好
然后寻找登录框,还是上面“检查”那一套,输入想要搜索的东西,点击确认就好
这里输入“手机”进去看看
商品的名字,价格,销量,生产商就是我们想要的信息
还是上面那一套方法,蓝标对准想要知道的信息,点击查找位置信息,依次添加
然后保存为excel就好了
更多推荐
所有评论(0)