Python爬虫抓包工具使用

Python爬虫抓包工具使用

一. 常用的工具

  1. python
  2. pycharm
  3. 浏览器
  4. chrome
  5. 火狐
  6. fiddler
  7. 2 fiddler的使用

二. 操作界面

image

三.界面含义

1. 请求 (Request) 部分详解

在这里插入图片描述

2. 响应 (Response) 部分详解

在这里插入图片描述

四. 设置

1. 如何打开

启动Fiddler，打开菜单栏中的 Tools >Options，打开“Fiddler Options”对话框

image

2. 设置

image

  • Capture HTTPS CONNECTs 捕捉HTTPS连接
  • Decrypt HTTPS traffic 解密HTTPS通信
  • Ignore server certificate errors 忽略服务器证书错误
  • all processes 所有进程
  • browsers onlye 仅浏览器
  • nono- browsers only 仅非浏览器
  • remote clients only 仅远程链接
    image
  • Trust Root Certificate(受信任的根证书) 配置Windows信任这个根证书解决安全警告
    在这里插入图片描述
  • Allow remote computers to connect 允许远程连接
  • Act as system proxy on startup 作为系统启动代理
  • resuse client connections 重用客户端链接

五. 捕获链接(抓包)

1. 安装SwitchyOmega 代理管理 Chrome 浏览器插件

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
选择下载后解压的文件夹
在这里插入图片描述

2. 设置代理

在这里插入图片描述
image

3.抓包实现

1.打开fiddler，在打开谷歌浏览器，并切换成设置好的模式
2.随便点开一个网址，已经实现
在这里插入图片描述
3.点击检查器可以查看抓包需要的信息

在这里插入图片描述