python访问web网页_python中

激活谷笔记 • 2026-04-05 12:43 • 阅读 5

在Python中访问网站，你可以使用多种方法，以下是几种常见的方式：

1. 使用`os`模块调用系统命令：

python

import os

os.system（'C:/Program Files/Internet Explorer/iexplore.exe http://www.baidu.com'）

2. 使用`webbrowser`模块打开网页：

python

import webbrowser

webbrowser.open（'http://www.baidu.com', new=0, autoraise=True）

3. 使用`urllib`或`urllib2`库（Python 2.x）访问网页：

python

import urllib2

url = 'http://www.python.org'

req = urllib2.Request（url）

page = urllib2.urlopen（req）

for line in page:

print（line）

4. 使用`httplib`库（Python 2.x），但请注意，`httplib`在Python 3.x中已经被重命名为`http.client`：

python

import httplib

conn = httplib.HTTPSConnection（"www.python.org"）

conn.request（"GET", "/"）

response = conn.getresponse（）

print（response.status, response.reason）

5. 使用`requests`库（Python 3.x），这是访问网页的推荐方法之一：

python

import requests

response = requests.get（'http://www.python.org'）

print（response.text）

6. 使用`BeautifulSoup`库解析网页内容（通常与`requests`库一起使用）：

python

from bs4 import BeautifulSoup

import requests

response = requests.get（'http://www.python.org'）

soup = BeautifulSoup（response.text, 'html.parser'）

print（soup.prettify（））

7. 使用`selenium`库自动化浏览器操作（适用于需要模拟用户交互的情况）：

python

from selenium import webdriver

driver = webdriver.Chrome（）

driver.get（'http://www.baidu.com'）

time.sleep（5）等待页面加载

driver.quit（）

选择哪种方法取决于你的具体需求，例如是否需要处理cookies、会话、表单提交等。`requests`和`BeautifulSoup`的组合在大多数情况下都能满足需求，并且易于使用。如果你需要更复杂的浏览器自动化，可以考虑使用`selenium`