Python使用urllib实现有道翻译爬虫

洛溪

发布时间：2026-10-14 | 4人浏览过

原创

本文介绍如何使用Python的urllib库抓取有道翻译接口。重点讲解请求参数构造、URL中_o参数的影响及错误码50的解决方法，并通过添加请求头和JSON解析优化代码，实现可复用的中英互译功能。

环境准备与库安装

准备工作

首先需要安装Python的urllib相关库，以便进行网络请求。

执行以下命令安装依赖：

有道翻译接口请求实现

pip install urllib

接下来需要获取有道翻译的接口URL。在发送请求时，需要注意Form Data中包含的具体参数结构。

具体实现示例如下：


import urllib.request
import urllib.parse

url = 'http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule'
data = {}
data['i'] = 'i love python'
data['from'] = 'AUTO'
data['to'] = 'AUTO'
data['smartresult'] = 'dict'
data['client'] = 'fanyideskweb'
data['salt'] = '16057996372935'
data['sign'] = '0965172abb459f8c7a791df4184bf51c'
data['lts'] = '1605799637293'
data['bv'] = 'f7d97c24a497388db1420108e6c3537b'
data['doctype'] = 'json'
data['version'] = '2.1'
data['keyfrom'] = 'fanyi.web'
data['action'] = 'FY_BY_REALTlME'
data = urllib.parse.urlencode(data).encode('utf-8')
response = urllib.request.urlopen(url,data)
html = response.read().decode('utf-8')
print(html)

常见错误处理与结果优化

运行代码时如果遇到状态码为50的错误，通常是因为URL中包含了_o参数，需要将其从链接中删除才能正常访问。

移除该参数后重新运行，程序即可成功执行。

然而，直接返回的结果数据较为复杂，不利于直接使用，因此需要对代码进行进一步优化。

可以通过导入json模块，将返回的字符串转换为字典对象，从而提取出我们需要的翻译结果。


import urllib.request
import urllib.parse
import json

url = 'http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule'
data = {}
data['i'] = 'i love python'
data['from'] = 'AUTO'
data['to'] = 'AUTO'
data['smartresult'] = 'dict'
data['client'] = 'fanyideskweb'
data['salt'] = '16057996372935'
data['sign'] = '0965172abb459f8c7a791df4184bf51c'
data['lts'] = '1605799637293'
data['bv'] = 'f7d97c24a497388db1420108e6c3537b'
data['doctype'] = 'json'
data['version'] = '2.1'
data['keyfrom'] = 'fanyi.web'
data['action'] = 'FY_BY_REALTlME'
data = urllib.parse.urlencode(data).encode('utf-8')
response = urllib.request.urlopen(url,data)
html = response.read().decode('utf-8')

req = json.loads(html)
result = req['translateResult'][0][0]['tgt']
print(result)

代码重构与功能增强

上述程序仅能处理单个单词的翻译，且每次运行后需重新配置，缺乏复用性。因此，我对代码进行了进一步的优化。


import urllib.request
import urllib.parse
import json

def translate():
  centens = input('输入要翻译的语句:')
  url = 'http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule'
  head = {}#增加请求头，防反爬虫
  head['User-Agent'] = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36'
  data = {}#带上from data的数据进行请求
  data['i'] = centens
  data['from'] = 'AUTO'
  data['to'] = 'AUTO'
  data['smartresult'] = 'dict'
  data['client'] = 'fanyideskweb'
  data['salt'] = '16057996372935'
  data['sign'] = '0965172abb459f8c7a791df4184bf51c'
  data['lts'] = '1605799637293'
  data['bv'] = 'f7d97c24a497388db1420108e6c3537b'
  data['doctype'] = 'json'
  data['version'] = '2.1'
  data['keyfrom'] = 'fanyi.web'
  data['action'] = 'FY_BY_REALTlME'
  data = urllib.parse.urlencode(data).encode('utf-8')
  req = urllib.request.Request(url,data,head)
  response = urllib.request.urlopen(req)
  html = response.read().decode('utf-8')
  req = json.loads(html)
  result = req['translateResult'][0][0]['tgt']
  # print(f'中英互译的结果：{result}')
  return result
t = translate()
print(f'中英互译的结果：{t}')

优化后的程序运行效果良好，能够满足基本需求。