爬虫如何找准url

在爬取网站时,许多人会弄错url。url分为两类,一类是静态的(get),一类是动态的(post)。

那么如何区分动静态呢?方法很简单,在爬取的页面查看网页源代码,用ctrl+f随便查找一个要爬取的数据,如果源代码里面有该数据,那么该网站就是你要找的静态url,如果没有那么该网站就是动态的url。动态url需要按fn+f12,然后如图所示找到即可。

 watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA6YKT6YKT5rKh6IKJ5ZCD,size_20,color_FFFFFF,t_70,g_se,x_16

 


版权声明:本文为weixin_67182546原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。