精华内容
下载资源
问答
我要提问
  • python读取html文件内容
    千次阅读
    2020-11-11 14:06:37

    import sys

    import os

    import os.path

    from html.parser import HTMLParser

    #定义HTMLParser的子类,用以复写HTMLParser中的方法

    class MyHTMLParser(HTMLParser):

    #构造方法,定义data数组用来存储html中的数据

    def __init__(self):

    HTMLParser.__init__(self)

    self.data = ""

    self.flag = False

    #self.index = 0

    #覆盖starttag方法,可以进行一些打印操作

    def handle_starttag(self, tag, attrs):

    #pass

    #print("遇到起始标签:{} 开始处理:{}".format(tag, tag))

    #if tag == "tr":

    # self.index = 0

    if tag == "div":

    for k,v in attrs:#遍历div的所有属性以及其值

    if k == "class" and v == "cell":#确定进入了

    #self.index = self.index + 1

    self.flag = True

    self.data = self.data + """

    return

    #覆盖endtag方法

    def handle_endtag(self, tag):

    #pass

    #print("遇到结束标签:{} 开始处理:{}".format(tag, tag))

    if self.flag == True:

    self.data = self.data + "","

    self.flag = False

    return

    #遇到tr结束,增加一个回车

    if tag == "tr":

    self.data = self.data + " "

    #覆盖handle_data方法,用来处理获取的html数据,这里保存在data数组

    def handle_data(self, data):

    #pass

    #print("遇到数据:{} 开始处理:{}".format(data, data))

    if(self.flag == True):

    data = data.replace(" ","")#替换字段中的回车

    data = data.replace(" ","")#替换字段中的连续两个空格

    self.data = self.data + data

    def read_file(filename):

    fp = open(filename,"r",encoding="utf-8")

    content = fp.read()

    fp.close()

    return content

    def write_file(filename,content):

    fp = open(filename,"a+",encoding="utf-8")

    fp.write(content)

    fp.close()

    def main():

    csv_file = "1.csv"

    #会员信息

    #write_file(csv_file,""序号","账号","账号状态","登录IP","最近登录时间","登录次数","上级账号","交易次数","交易流水","账号余额","姓名" ")

    #资金账户信息

    write_file(csv_file,""序号","卡号/账户","开户行/平台","余额","流水","所在地","姓名","用户名","手机号","qq","邮箱","注册IP","注册时间" ")

    parser = MyHTMLParser()

    for i in range(1,3):

    html_file = "%d.html"%i

    print(html_file)

    if os.path.exists(html_file) == False:

    print(html_file + "文件不存在!")

    return

    content = read_file(html_file)

    #print(content)

    parser.feed(content)

    #对解析后的数据进行相应操作

    #print(parser.data)

    write_file(csv_file,parser.data)

    parser.close()

    main()

    更多相关内容

  • Python读取本地html文件，获取其中表格内容

     千次阅读 2020-07-16 12:15:14
    python读取本地html文件并进行简单的处理来获取文字

    以个人成绩网页页面为例：
    在这里插入图片描述
    右键查看源代码：
    在这里插入图片描述
    右键另存为单独的html文件，然后代码读取并处理

    import re

f = open("GP.html","r",encoding='utf-8')
html = f.read()

table = re.findall(r'<table(.*?)</table>', html, re.S)#查找html中table之间的内容
nowtable = table[0]#前两个表格为成绩信息
nowtable = nowtable.replace('\t','')#将空格换行等去除
nowtable = nowtable.replace('\n','')
nowtable = nowtable.replace(' ','')
nowtable = nowtable.replace('&nbsp','')
td0 = re.findall(r'<tdclass="center">(.*?)</td>', nowtable, re.S)#成绩想关的信息都在tdclass="center"td之间
print("主修课程信息为:\n",td0)
nowtable = table[1]
nowtable = nowtable.replace('\t','')
nowtable = nowtable.replace('\n','')
nowtable = nowtable.replace(' ','')
nowtable = nowtable.replace('&nbsp','')
td1 = re.findall(r'<tdclass="center">(.*?)</td>', nowtable, re.S)
print("选修课信息为：\n",td1)
print("选修课信息第一个值为：\n",td1[0])

    结果：
    在这里插入图片描述
    如果想要计算GPA，字符转换为对应的数值进行计算就行了

    收起
    展开全文
    python html 正则表达式

  • python批量获取html内body内容的实例

     2020-09-19 18:38:40
    今天小编就为大家分享一篇python批量获取html内body内容的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    收起

  • Python读取html文件转化成csv

     2017-07-20 16:28:47
    通过python中BeautifulSoup库解析html文件并输出到csv文件中
    收起

  • python读取HTML文本文件

     千次阅读 2020-06-29 10:13:23
    遇到像下面的数据，里面是获取到的一些新闻资讯，但是不是以文本保存的，而是HTML。 想要直接读取HTML import os file_path = './data' file_names = os.listdir(file_path) i = 1 with open(os.path.join(file...

    遇到像下面的数据，里面是获取到的一些新闻资讯，但是不是以文本保存的，而是HTML。

    想要直接读取HTML

    import os
file_path = './data'
file_names = os.listdir(file_path)
i = 1
with open(os.path.join(file_path, file_names[i]), 'r', encoding='utf-8') as f:
    txt = f.read()

    得到结果如下：

    '\ufeff<html><head><meta http-equiv="Content-Type" content="text/html; charset=UTF-8"><title>地址识别试题</title></head><body><div><h1>深度｜翼装飞行是玩命？拒绝冒险，专业比赛都要“看天吃饭”</h1><h3>翼装飞行其实最早是从高空跳伞运动中产生的，一些爱好者希望实现人类自由飞翔而开始穿着翼装，然后才逐渐出现低空翼装飞行这样更加刺激的飞行形式。”根据方泽体育的介绍，翼装飞行之所以危险性高，主要源于两个原因：一是飞行速度快；二是起跳方式和飞行环境的特殊。</h3><h2>极限运动，反而最不能冒风险</h2><h3>值得一提的是，对于高空翼装跳伞，全球有相关的培训中心和机构认证，经过培训合格的人才可以拿到证书。而低空翼装飞行没有被大范围推广，并不存在相关的资格认证，那么作为赛事方，如何来评定参赛者的准入资格呢？相关人员告诉记者，低空翼装飞行这样的超极限运动非常小众，全球人数也不过600人左右，国内更是只有寥寥数人，有鉴于此，世界翼装飞行联盟会举办一个预选赛来决定参赛人选。“预选赛每年6月份在挪威举行，是从海边悬崖上定点起跳，但整体难度略低，相对安全。裁判都是翼装飞行领域最具权威的飞行员，通过比赛对于选手的飞行速度、技术能力和飞行过程中的姿态控制有一个全面直观的判断，优胜者才有资格参加世锦赛。”</h3><h3>作为业内人，因掌握的具体信息有限，李良东无法对女飞行员遇难细节多加评价，他就自己更加了解的低空翼装飞行进行了分析。此间，他回忆了2011年底一次事故，事故地位于广州越秀区中山四路228-自编113号,当时就是由于微风吹偏了定位的气球导致飞行太过贴近悬崖，飞行员的腿打在了岩石上，但这位经验老到的选手还是在千钧一发之际下意识完成了开伞，保住了性命。</h3><h4 style="float:right">广州晚报实习生：李四报道</h4></div></body></html>'

    除了正文还包含HTML代码格式，故需要进一步处理（使用第三方库html2text）

    from html2text import html2text

html2text(txt)

    处理后结果如下：

    '\ufeff\n\n# 深度｜翼装飞行是玩命？拒绝冒险，专业比赛都要“看天吃饭”\n\n###\n翼装飞行其实最早是从高空跳伞运动中产生的，一些爱好者希望实现人类自由飞翔而开始穿着翼装，然后才逐渐出现低空翼装飞行这样更加刺激的飞行形式。”根据方泽体育的介绍，翼装飞行之所以危险性高，主要源于两个原因：一是飞行速度快；二是起跳方式和飞行环境的特殊。\n\n## 极限运动，反而最不能冒风险\n\n###\n值得一提的是，对于高空翼装跳伞，全球有相关的培训中心和机构认证，经过培训合格的人才可以拿到证书。而低空翼装飞行没有被大范围推广，并不存在相关的资格认证，那么作为赛事方，如何来评定参赛者的准入资格呢？相关人员告诉记者，低空翼装飞行这样的超极限运动非常小众，全球人数也不过600人左右，国内更是只有寥寥数人，有鉴于此，世界翼装飞行联盟会举办一个预选赛来决定参赛人选。“预选赛每年6月份在挪威举行，是从海边悬崖上定点起跳，但整体难度略低，相对安全。裁判都是翼装飞行领域最具权威的飞行员，通过比赛对于选手的飞行速度、技术能力和飞行过程中的姿态控制有一个全面直观的判断，优胜者才有资格参加世锦赛。”\n\n###\n作为业内人，因掌握的具体信息有限，李良东无法对女飞行员遇难细节多加评价，他就自己更加了解的低空翼装飞行进行了分析。此间，他回忆了2011年底一次事故，事故地位于广州越秀区中山四路228-自编113号,当时就是由于微风吹偏了定位的气球导致飞行太过贴近悬崖，飞行员的腿打在了岩石上，但这位经验老到的选手还是在千钧一发之际下意识完成了开伞，保住了性命。\n\n#### 广州晚报实习生：李四报道\n\n'

    接下来就可以按照文本进行分析了。

    收起
    展开全文
    python html

  • python读取html中指定元素生成excle文件示例

     2020-12-25 04:27:05
    Python2.7编写的读取html中指定元素，并生成excle文件 复制代码 代码如下:#coding=gbkimport stringimport codecsimport os,timeimport xlwtimport xlrdfrom bs4 import BeautifulSoup from xlrd import open_...
    收起

  • 使用python提取html文件中的特定数据的实现代码

     千次阅读 2020-12-02 21:45:00
    例如 具有如下结构的html文件感兴趣内容1感兴趣内容2……感兴趣内容n内容1内容2……内容n我们尝试获得'感兴趣内容'对于文本内容,我们保存到IDList中。可是如何标记我们遇到的文本是感兴趣的内容呢，也就是，处于这里...

    例如 具有如下结构的html文件

    感兴趣内容1

    感兴趣内容2

    ……

    感兴趣内容n

    内容1

    内容2

    ……

    内容n

    我们尝试获得'感兴趣内容'

    对于文本内容,我们保存到IDList中。

    可是如何标记我们遇到的文本是感兴趣的内容呢，也就是，处于

    这里的内容

    还有这里

    ……

    以及这里的内容

    思路如下

    遇到

    设置标记flag = True

    遇到

    后 设置标记flag = False

    当flag 为True时遇到

    设置标记getdata = True

    遇到

    且getdata = True,设置getdata = False

    python为我们提供了SGMLParser类，SGMLParser 将 HTML 分析成 8 类数据[1]，然后对每一类调用单独的方法:使用时只需继承SGMLParser 类，并编写页面信息的处理函数。

    可用的处理函数如下：

    开始标记 (Start tag)

    是一个开始一个块的 HTML 标记，象 ，

    ， 或 
     等，或是一个独一的标记，象 
     或  等。当它找到一个开始标记 tagname，SGMLParser 将查找名为 start_tagname 或 do_tagname 的方法。例如，当它找到一个 
     标记，它将查找一个 start_pre 或 do_pre 的方法。如果找到了，SGMLParser 会使用这个标记的属性列表来调用这个方法；否则，它用这个标记的名字和属性列表来调用 unknown_starttag 方法。

    结束标记 (End tag)

    是结束一个块的 HTML 标记，象 ，， 或

    等。当找到一个结束标记时，SGMLParser 将查找名为end_tagname 的方法。如果找到，SGMLParser 调用这个方法，否则它使用标记的名字来调用 unknown_endtag 。

    字符引用 (Character reference)

    用字符的十进制或等同的十六进制来表示的转义字符，象  。当找到，SGMLParser 使用十进制或等同的十六进制字符文本来调用handle_charref 。

    实体引用 (Entity reference)

    HTML 实体，象 ©。当找到，SGMLParser 使用 HTML 实体的名字来调用 handle_entityref。

    注释 (Comment)

    HTML 注释, 包括在 之间。当找到，SGMLParser 用注释内容来调用 handle_comment。

    处理指令 (Processing instruction)

    HTML 处理指令，包括在 ... > 之间。当找到，SGMLParser 用处理指令内容来调用 handle_pi。

    声明 (Declaration)

    HTML 声明，如 DOCTYPE，包括在 之间。当找到，SGMLParser 用声明内容来调用 handle_decl。

    文本数据 (Text data)

    文本块。不满足其它 7 种类别的任何东西。当找到，SGMLParser 用文本来调用 handle_data。

    综上，的到如下代码

    from sgmllib import SGMLParser

    class GetIdList(SGMLParser):

    def reset(self):

    self.IDlist = []

    self.flag = False

    self.getdata = False

    SGMLParser.reset(self)

    def start_div(self, attrs):

    for k,v in attrs:#遍历div的所有属性以及其值

    if k == 'class' and v == 'entry-content':#确定进入了

    self.flag = True

    return

    def end_div(self):#遇到

    self.flag = False

    def start_p(self, attrs):

    if self.flag == False:

    return

    self.getdata = True

    def end_p(self):#遇到

    if self.getdata:

    self.getdata = False

    def handle_data(self, text):#处理文本

    if self.getdata:

    self.IDlist.append(text)

    def printID(self):

    for i in self.IDlist:

    print i

    上面的思路存在一个bug

    遇到

    后 设置标记flag = False
    收起
    展开全文

  • python解析本地HTML文件

     2020-11-24 09:54:33
    Python使用爬虫技术时，每...一、将网页源代码存在本地1、打开需要爬取的网页，鼠标右键查看源代码2、复制源代码，将代码保存至本地项目文件目录下，文件后缀改为.html二、在Python中打开本地html文件打开并读取本...
    收起

  • python3爬虫获取html内容及各属性值的方法

     2020-09-19 20:18:26
    今天小编就为大家分享一篇python3爬虫获取html内容及各属性值的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    收起

  • python文件怎么读取

     2021-06-26 03:47:41
    Python如何从文件读取数据1.1 读取整个文件 要读取文件，需要一个包含几行文本的文件(文件PI_DESC.txt与file_reader.py在同一目录下) PI_DESC.txt 3.1415926535897932384626433832795028841971 file_reader.py with ...
    收起

  • python读取csv文件并转为list的每步结果图.html

     2020-02-02 18:22:44
    python读取csv文件并转为list的结果图，是python读取csv文件并转为list的详细每步的结果。
    收起

  • Python怎么把文件内容读取出来，怎么把内容写入文件中

     千次阅读 2020-11-20 21:31:19
    Python open() 方法用于打开一个文件，并返回文件对象，在对文件进行处理过程都需要使用到这个函数，如果该文件无法被打开，会抛出 OSError的错误。完整的语法格式为：open(file, mode='r', buffering=None, ...
    收起

  • Python强悍读取excel文件.rar

     2019-07-10 10:53:41
    python读取excel文件例子，看上去功能挺强悍。Excel 商户号添加小工具使用说明：该工具只支持Excel文件格式，Execl文件后缀为xls或者xlsx文件。如果文件为csv，请使用时Excel另存为功能将它转换问xls或者xlsx文件。 ...
    收起

  • python提取html当中的信息

     2020-12-06 14:20:25
    使用一个 变量 is_h4 做标记判定 html 文件中的 h4 标签， 如果遇到 h4 标签， 则将标签内的内容加 入到 List 变量 name 中。解释一下 start_h4() 和 end_h4() 函数，他们原型是 SGMLParser 中的 start_ tagname ...
    收起

  • python3.7解析eml文件

     2020-07-01 09:13:42
    通过对eml文件的解析获得其中的from、to、date、subject、body、atta 该文件可以实现基本功能，未经过严格测试，可能存在一定缺陷和BUG
    收起

  • Python读取XML文件内容

     千次阅读 2020-12-11 12:46:05
    XML 指的是可扩展标记语言(eXtensible Markup Language)，和json类似也是用于存储和传输数据，还可以用作配置文件。类似于HTML超文本标记语言，但是HTML所有的标签都是预定义的，而xml的标签可以随便定义。XML元素指...
    收起

  • html（二）：python打开html文件并读取内容，发送至浏览器，浏览器展示结果

     万次阅读 2019-03-03 13:42:12
    在python:html简介中，读取html文件，下面就写一个服务器，实现：简单的读取并发送; 首先，先一个html文件： <!DOCTYPE html> <html lang="en"> <head> <meta char...
    收起

  • Python 读取WAV音频文件 画频谱的实例

     2020-12-20 12:24:21
    Python 读取WAV文件 import wave import struct from scipy import * from pylab import * #读取wav文件，我这儿读了个自己用python写的音阶的wav filename = '1.wav' wavefile = wave.open(filename, 'r') # open ...
    收起

  • [python] - 读取文件内容，并输出

     2020-11-20 20:43:32
    读取文件，并逐行输出内容，代码如下： # coding=gbk import os path = 'E:\python_practice' os.chdir(path) fname = raw_input('Enter filename: ') print try: fobj = ope...相关推荐2012-03-14 13:32 −代码来源...
    收起

  • Python读写zip压缩文件的方法

     2020-09-20 03:38:15
    Python自带模块zipfile可以完成zip压缩文件的读写，而且使用非常方便，下面我们就来演示一下Python读写zip文件的实例代码，需要的朋友参考下吧
    收起

  • python 读取远程服务器文件

     千次阅读 2020-12-03 01:59:14
    "https://help.aliyun.com/document_detail/25422.html"},{"txt":"ECS云服务器选型推荐","link":"https://help.aliyun.com/document_detail/58291.html"}],"countinfo":{"search":{"length_pc":0,"length":0},"card...
    收起

  • python读取本地文件-python解析本地HTML文件

     千次阅读 2020-11-01 12:52:21
    Python使用爬虫技术时，每...一、将网页源代码存在本地1、打开需要爬取的网页，鼠标右键查看源代码2、复制源代码，将代码保存至本地项目文件目录下，文件后缀改为.html二、在Python中打开本地html文件打开并读取本...
    收起

  • Python 读取 yaml 配置文件内容

     千次阅读 2022-04-11 18:57:49
    Python 读取 Yaml 文件示例 : # -*- coding: utf-8 -*- # @Time : 2022/4/11 18:49 # @Author : 王天赐 # @Email : 15565946702@163.com # @File : config.py # @Software: PyCharm import yaml # 参考 : ...
    收起
    Yaml

  • python 读取 网络 文件

     千次阅读 2020-12-20 12:07:37
    输入与输出大致可分为三类:0.1 读取文本文件和其他更好效的磁盘存储格式2.2 使用数据库中的数据0.3 利用Web API操作网络资源1. 读取文本文件和其他更好效的磁盘存储格式pandas提供了一些用于将表格型数据读取为D......
    收起

  • python 将print输出的内容保存到txt文件中

     2020-09-20 06:18:48
    本文通过代码给大家介绍了python 将print输出的内容保存到txt文件中,代码很简短，需要的朋友可以参考下
    收起

  • python读取文件内容到列表-python之从文件读取数据到list的实例讲解

     2020-11-11 14:16:46
    背景：文件内容每一行是由N个单一数字组成的，每个数字之间由制表符区分，比如：0 4 3 1 22 1 0 31 2 0……现在需要将每一行数据存为一个list，然后所有行组成一个大的list工具：1.strip()：用于移除字符串头尾指定...
    收起

  • python获取邮件内容（邮件内容为html）

     千次阅读 2020-11-29 21:34:31
    用python获取邮件内容比较简单，直接用现成的imap和pop3包即可，但是有时候邮件的内容不是plainText而是html甚至是一个url链接，原本的操作流程是点击url获取内容（比如csv等等）。我这边的需求是从html里的众多url...
    收起

  • python读取文本文件-python读取文本文件数据

     万次阅读 2020-11-01 13:21:26
    本文要点刚要：（一）读文本文件格式的数据函数：read_csv,read_table1.读不同分隔符的文本文件，用参数sep2.读无字段名（表头）的文本...（二）将数据写成文本文件格式函数：to_csv范例如下：（一）读取文本文件格...
    收起

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 334,695
精华内容 133,878
热门标签
关键字：

python读取html文件内容

友情链接： 文字转语音.rar