python 爬虫微博

Python 爬虫技术正变得愈来愈受欢迎。微博作为中国最大的社交媒体平台，其中包括海量的用户信息、微博内容和话题活动，因此， Python 爬虫也被广泛利用于微博数据的抓取和分析。

import requests
from lxml import etree
import time
url = 'https://weibo.cn/u/1234567890'
header = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2661.94 Safari/537.36',
'Cookie': 'your_cookie'
}
res = requests.get(url, headers=header)
page = etree.HTML(res.content)
for i in range(1, 10):
info_xpath = f'//*[@id="M_Profile_Pic"]/tbody/tr/td[{i}]/text()'
info = page.xpath(info_xpath)
print(info)
time.sleep(1)

上面的代码是一个简单的示例，演示了使用 Python 爬虫从微博用户页面抓取数据的进程。其中，需要注意的几个点：

• 需要用到 requests 和 lxml 库，使用 pip 命令可安装。
• 要抓取微博数据，需要登录用户的账号才能取得 cookie，将 cookie 替换为自己的。
• 为了不对网站的过度访问，代码实现了 1 秒的延迟。

总之， Python 爬虫技术提供了一种强大的手段，能够大范围地搜集和分析微博数据，为社会热门、用户行动等相关研究提供了支持。