用selenium自动获得页面爬取 (1)用webdriver库,模拟人工进入网页。
(2)依次点击正常登陆时需要素击的对话框。 (3)elenium是在模仿人工点击页面,因此人工正常浏览网站时,该有些步骤都不可以少,不然就会卡住在这步,从而致使程序异常暂停。
(4)这里通过用webdrive库的find＿element＿by＿xpath和find＿element＿by＿css＿selector两个使用方法,找到每一个点击框的地方并用click()点击。 (5)登陆账号 因为网站需要登录才能进行详细情况的查询,因此先要进行登录操作,再进行后续的检索。同样是先用find＿element＿by＿css＿selector使用方法找到登录框和输入账号密码的地方,在用send＿keys使用方法分别输入账号和密码,最后在点击登录框中的登录。
