当前位置:小鱼儿玄机二站 > 编程应用 > python爬取并下载麦子学院所有视频教程,python模

python爬取并下载麦子学院所有视频教程,python模

文章作者:编程应用 上传时间:2019-09-03

python爬取并下载大豆大学全部录制教程,python稻谷

一、重要思路

二、文件注解

图片 1 图片 2

 

三、结果

根源为知笔记(Wiz)

一、主要思路 二、文件表达 三、结果 来自为知笔记(Wiz)...

此作品是对上节小说模块的补给

一,xml模块

xml是兑现差别语言或程序之间开展数据沟通的合同,可扩张标识语言,正式通用标识语言的子集,是一种用于标识电子公文使其持有结构性的标记语言。xml的格式如下,就是经过<>节点来分别数据结构的:

 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
<?xml version="1.0"?>
<data>
    <country name="Liechtenstein">
        <rank updated="yes">2</rank>
        <year>2008</year>
        <gdppc>141100</gdppc>
        <neighbor name="Austria" direction="E"/>
        <neighbor name="Switzerland" direction="W"/>
    </country>
    <country name="Singapore">
        <rank updated="yes">5</rank>
        <year>2011</year>
        <gdppc>59900</gdppc>
        <neighbor name="Malaysia" direction="N"/>
    </country>
    <country name="Panama">
        <rank updated="yes">69</rank>
        <year>2011</year>
        <gdppc>13600</gdppc>
        <neighbor name="Costa Rica" direction="W"/>
        <neighbor name="Colombia" direction="E"/>
    </country>
</data>

python模块解析xml

 

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
导入模块 别名ET
import xml.etree.ElementTree as ET
  tree = ET.parse("test.xml")
root = tree.getroot()
#显示父节点
print(root.tag)
    
#遍历xml文档
for child in root:
    print(child.tag, child.attrib)
    for i in child:
        print(i.tag,i.text)
    
#只遍历year 节点
for node in root.iter('year'):
    print(node.tag,node.text)

选拔模块创立xml文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
import xml.etree.ElementTree as ET
  
new_xml = ET.Element("namelist")
name = ET.SubElement(new_xml,"name",attrib={"enrolled":"yes"})
age = ET.SubElement(name,"age",attrib={"checked":"no"})
sex = ET.SubElement(name,"sex")
sex.text = '33'
name2 = ET.SubElement(new_xml,"name",attrib={"enrolled":"no"})
age = ET.SubElement(name2,"age")
age.text = '19'
  
et = ET.ElementTree(new_xml) #生成文档对象
et.write("test.xml", encoding="utf-8",xml_declaration=True)
  
ET.dump(new_xml) #打印生成的格式

修改大概去除

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
import xml.etree.ElementTree as ET
  
tree = ET.parse("xmltest.xml")
root = tree.getroot()
  
#修改
for node in root.iter('year'):
    new_year = int(node.text) + 1
    node.text = str(new_year)
    node.set("updated","yes")
  
tree.write("xmltest.xml")
  
  
#删除node
for country in root.findall('country'):
   rank = int(country.find('rank').text)
   if rank > 50:
     root.remove(country)
  
tree.write('output.xml')

二、shutil

尖端的 文件、文件夹、压缩包 管理模块

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
import shutil
#将文件内容拷贝到另一个文件中,可以部分内容
with open('log.log','r') as file1,open('test_con','w') as file2:
    shutil.copyfileobj('file1','file2')
#拷贝文件
shutil.copyfile('log.log','log')
#拷贝文件权限
shutil.copymode('log.log','log')
shutil.copystat(src, dst)
#拷贝状态的信息,包括:mode bits, atime, mtime, flags
 
shutil.copy(src, dst)
#拷贝文件和权限
shutil.copy2(src, dst)
#拷贝文件和状态信息
1
2
3
4
5
6
7
8
9
#将 /opt/test 下的文件打包放置当前程序目录
  
import shutil
ret = shutil.make_archive("wwwwwwwwww", 'gztar', root_dir='/opt/test')
  
  
#将 /opt/test 下的文件打包放置 /root/目录
import shutil
ret = shutil.make_archive("/root", 'gztar', root_dir='/opt/test')

shutil 对压缩包的管理是调用 ZipFile 和 TarFile 八个模块来进展的,详细:

 

1
2
3
4
5
6
7
8
9
10
11
12
import zipfile
 
# 压缩
z = zipfile.ZipFile('laxi.zip', 'w')
z.write('a.log')
z.write('data.data')
z.close()
 
# 解压
z = zipfile.ZipFile('laxi.zip', 'r')
z.extractall()
z.close()

 

1
2
3
4
5
6
7
8
9
10
11
12
13
import tarfile
 
# 压缩
tar = tarfile.open('your.tar','w')
tar.add('/Users/wupeiqi/PycharmProjects/bbs2.zip', arcname='bbs2.zip')
tar.add('/Users/wupeiqi/PycharmProjects/cmdb.zip', arcname='cmdb.zip')
tar.close()
 
# 解压
tar = tarfile.open('your.tar','r')
tar.extractall()  # 可设置解压地址
tar.close()
复制代码

 

 

 

 

源点为知笔记(Wiz)

本文由小鱼儿玄机二站发布于编程应用,转载请注明出处:python爬取并下载麦子学院所有视频教程,python模

关键词: