python selenium爬虫定位超链接问题

Tina329 2019-09-21 11:26:19

请教各位大神，用selenium在爬虫一个网站，弄了一晚上，到这一步了，无法点击进去了。怎么样定位到这里呢，用find_element_by_partial_link_text 输入'考试考前押题班'，一直定位不到这里，真心感谢！

...全文

474 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

hx366 2019-09-23

打赏
举报

回复

看具体定位到哪里去了。find_element_by_partial_link_text 是部分链接文字，说不定前面'考试考前押题班'有重复的文字。可以换成 find_element_by_link_text("保荐代表人考试考前押题班")试下。这是完整链接文字。如果链接文字还有冲突不行，只有换成 css选择器了

梦泽红 2019-09-22

打赏
举报

回复

换种方法，用xpath定位

Python 爬虫之超链接 url中含有中文出错及解决办法 python3.5 爬虫错误： UnicodeEncodeError: 'ascii' codec can't encode characters 这个错误是由于超链接中含有中文引起的，超链接默认是用ascii编码的，所以不能直接出现中文，若要出现中文，解决方法如下： import urllib from urllib.request import urlopen link="http://list.jd.com/list.html?cat=9987,653,655&ev=exbrand_9420&trans=1&JL=3_

相关介绍 Python是一种跨平台的计算机程序设计语言。是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。最初被设计用于编写自动化脚本(shell)，随着版本的不断更新和语言新功能的添加，越多被用于独立的、大型项目的开发。 Requests是一个很实用的Python HTTP客户端库。 Lxml是XML和HTML的解析器，其主要功能是解析和提取XML和HTML中的数据；lxml和正则一样，也是用C语言实现的，是一款高性能的python HTML、XML解析器，也可以利用XPath语法，来定位特定的元素及节点信息。 XPath 是一门在 XML 文档中查找信息的语言， XSLT 中的主要元素，XQuery 和 XPointer 均构建于 XPath 表达式之上。 Selenium 是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，GoogleChrome，Opera，Edge等。

里面集成了大量的python 爬虫相关的代码，想自学爬虫的同学可以下载学习。

从python的百度百科中抓取其中的超链接，打印输出

Python批量爬虫下载PDF文件代码实现

37,744

社区成员

34,213

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

试试用AI创作助手写篇文章吧

+ 用AI写文章