python对页面的接口发送post请求，用了什么网络爬虫技术

Python发送POST请求使用的是HTTP协议，网络爬虫技术包括：

1. xpath和beautifulsoup解析HTML，提取页面中需要的内容；
2. requests库模拟发送请求和获取响应；
3. 正则表达式提取页面中需要的内容；
4. json库解析json格式数据；
5. scrapy框架批量化或自动化抓取URL；
6. 多线程/多进程加快抓取数据的效率；
7. 随机User-Agent伪装成浏览器请求，反反爬虫技术；

等等。

Python发送POST请求获取数据的过程大致如下：

1. 导入requests库等必要的库；
2. 构造POST请求的参数（包括请求的URL、请求头、请求体等）；
3. 发送POST请求，并获取响应；
4. 解析响应数据，根据需要提取所需的数据；
5. 关闭请求会话，释放资源。

具体步骤如下：

1. 导入requests库：import requests。

2. 构造POST请求参数：

   url = 'http://example.com/getdata'
   headers = {
       'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'
   }
   data = {
       'param1': 'value1',
       'param2': 'value2'
   }
   

   其中，url为请求地址，headers为请求头信息（一般至少需要设置User-Agent），data为请求体数据（如果需要传递参数的话）。

3. 发送POST请求，并获取响应：

   response = requests.post(url, headers=headers, data=data)
   

   发送POST请求使用的是requests.post方法，需要传入相应的参数。

4. 解析响应数据，根据需要提取所需的数据：

   result = response.text
   # 如果响应数据是json格式，可以直接使用response.json()方法将其转为Python字典。
   

   可以使用response.text获取响应数据（文本格式），或使用response.json()方法将响应数据（JSON格式）转为Python字典或列表。

5. 关闭请求会话，释放资源：

   response.close()
   

   结束POST请求并关闭请求会话，释放资源。

以上就是Python发送POST请求获取数据的基本过程。