山东大学暑期项目实训 第一周 3

目录

一周总结

代码改变

一周总结

经过一周的开发，在28主要进行网站模板的观察和数据抽取方法，29号对抽取方法进行了实现，累计爬取数据为4137条数据。

代码改变

            try:
                #driver.find_element_by_css_selector('input[name="ctrl-bcc-price-instances-single-select"]').click()
                driver.find_element_by_xpath('//*[@id="ctrl-bcc-price-instances-single-select{}"]'.format(tr_num)).click()
                #time.sleep(1)
            except:
                time.sleep(3)
                try:
                    driver.find_element_by_xpath('/html/body/esui-dialog/div[3]/div/div').click()
                except:
                    js = "var q=document.documentElement.scrollTop=200"
                    driver.execute_script(js)
                    continue
                stopServiceType.append(tr.find_elements_by_tag_name('td')[1].text)
                continue

该部分优化了之前弹窗问题，使得爬取速度加快