Python提取网站源码的方法

 时间:2024-10-13 13:27:53

1、首先安装requests模块,按键盘上的ctrl+R打开运行窗口-输入cmd,打开命令提示符。

Python提取网站源码的方法
Python提取网站源码的方法

2、在命令提示符上面输入命令pip install requests,回车后会自动安装好模块

Python提取网站源码的方法

3、打开Python开发工具,用import代码引入模块:import requests

Python提取网站源码的方法

4、用def 建立一个函数,名称为get_content,参数为url,在函数功能部分用requests模块中的get方法提取指定url的页面源码。def get_content (url): resp = requests.get(url) resp.encoding="utf-8" return resp.text这里提取出来的编码为utf-8

Python提取网站源码的方法

5、接下来我们建立一个变量url,里面写上一个网址。代码如下:url = "https://video.sina.cn"这里的网址可以自己规定

Python提取网站源码的方法

6、接下来我们调用函数get_content,并且打印出部分内容,具体代码如下:content = get_content(url)print(content[0:100])

Python提取网站源码的方法
Python提取网站源码的方法

7、我们孀晏弁钾也可以用文件操作方法,把提取到的内容保存到我们创建的一个文件当中,具体代码如下:f = open("info-1",mode="w",encodin爿讥旌护g="utf-8")f.write(content)f.flush()f.close()这里我们把提取到的源码保存到了info-1 这个文档当中

Python提取网站源码的方法

8、整体代码总窑钕仇焱结:import requestsdef get_content (url): resp = requests.get(ur造婷用痃l) resp.encoding="utf-8" return resp.texturl = "https://video.sina.cn"content = get_content(url)print(content[0:100])f = open("info-1",mode="w",encoding="utf-8")f.write(content)f.flush()f.close()

  • 百家号怎么参加优选计划活动
  • 抖音如何申请成为大众评审员?
  • 咚漫如何搜索想看的漫画?
  • S11厄斐琉斯如何出装厉害
  • 明日之后狙击炮台玩法介绍
  • 热门搜索
    疫情手抄报内容 地球日手抄报 扶贫手抄报 文明校园手抄报图片 抗美援朝手抄报 关于消防的手抄报 森林草原防火手抄报 节约粮食手抄报简单又漂亮 预防病毒手抄报 小学生端午节手抄报