内容概览

• 为什么Python3中没有urllib2
• 使用urllib.request替代方案
• 高级功能实现（请求头、POST请求、错误处理）
• 第三方库requests的解决方案
• 实际应用场景比较

为什么Python3中没有urllib2？

在Python 2中，urllib和urllib2是两个独立的模块，分别提供不同的功能：

• urllib：提供基础URL处理功能（urlencode等）
• urllib2：提供高级HTTP客户端功能（请求、认证、重定向等）

Python 3对这两个模块进行了整合：

• 将urllib2的功能合并到新的urllib.request模块中
• 保留urllib.parse用于URL解析
• 添加了urllib.error统一处理错误

迁移提示： 在Python3中，import urllib2会引发ImportError。正确的做法是使用import urllib.request替代。

使用urllib.request替代方案

1. 基本GET请求替代

Python2中使用urllib2的代码：

import urllib2

response = urllib2.urlopen('http://example.com')
html = response.read()
        

Python3中替代方案：

import urllib.request

with urllib.request.urlopen('http://example.com') as response:
    html = response.read().decode('utf-8')
        

2. 请求头设置

import urllib.request

url = 'http://example.com'
headers = {'User-Agent': 'Mozilla/5.0', 'Accept': 'text/html'}

request = urllib.request.Request(url, headers=headers)
with urllib.request.urlopen(request) as response:
    content = response.read().decode('utf-8')
        

高级功能实现

POST请求处理

import urllib.request
import urllib.parse

url = 'http://example.com/login'
data = {'username': 'user', 'password': 'pass'}
encoded_data = urllib.parse.urlencode(data).encode('utf-8')

request = urllib.request.Request(url, data=encoded_data, method='POST')
with urllib.request.urlopen(request) as response:
    result = response.read().decode('utf-8')
        

异常处理

import urllib.request
import urllib.error

try:
    with urllib.request.urlopen('http://example.com/404') as response:
        content = response.read()
except urllib.error.HTTPError as e:
    print(f'HTTP错误: {e.code} {e.reason}')
except urllib.error.URLError as e:
    print(f'URL错误: {e.reason}')
        

使用第三方requests库

虽然urllib.request可以替代urllib2的功能，但更推荐使用第三方库requests：

import requests

# GET请求
response = requests.get('http://example.com')
print(response.text)

# POST请求
response = requests.post('http://example.com/login', 
                         data={'user': 'name', 'pass': 'secret'})

# 带请求头
headers = {'User-Agent': 'custom-agent/1.0'}
response = requests.get('http://example.com', headers=headers)

# 处理JSON
json_response = response.json()

# 异常处理
try:
    response = requests.get('http://example.com/404')
    response.raise_for_status()
except requests.exceptions.HTTPError as err:
    print(f"HTTP错误: {err}")
        

解决方案对比

总结与建议

pip install requests

本教程提供Python3中替代urllib2的完整解决方案 | 实际开发中建议优先使用requests库