前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >30行爬虫代码实现中英互译

30行爬虫代码实现中英互译

作者头像
Python研究者
发布2021-01-12 11:02:48
1K0
发布2021-01-12 11:02:48
举报
文章被收录于专栏:Python研究者

),加上看英文论文难免少不了要翻译,所以就用python爬虫实现中英翻译的小程序,于是今天就记录一下这个过程,同时也希望分享给粉丝们能够学习,谢谢。

一、准备工作

目标网站

代码语言:javascript
复制
http://fanyi.youdao.com/

这里是选择的有道翻译

开发环境

代码语言:javascript
复制
开发工具:Pycharm
python版本:python3.6.5
浏览器:Google

二、网页分析

在Google浏览器中按F12可以查看获取数据包

翻译请求链接

代码语言:javascript
复制
http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule

这个翻译请求链接,通过这个url与有道服务器进行数据交换

翻译请求表单

在FormData里面是发送到请求链接的表单,比如参数i是待翻译的内容

代码语言:javascript
复制
i:我是李运辰

数据请求响应

在Response响应数据包里translateResult可以看到响应的内容

代码语言:javascript
复制
{"translateResult":[[{"tgt":"I'm Li Yunchen","src":"我是李运辰"}]],"errorCode":0,"type":"zh-CHS2en"}

三、代码实现

请求头Header

代码语言:javascript
复制
request.add_header('User-Agent',
                       'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36')

所需库

代码语言:javascript
复制
import urllib.request as req
import urllib.parse
import json

请求url

代码语言:javascript
复制
# 输入请求URL
    url = 'http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&sessionFrom='

数据包表单

代码语言:javascript
复制
data = {}
# 将请求表单以字典的形式写入data传入,i表示需要翻译的内容
data['i'] = content
data['from'] = 'AUTO'
data['to'] = 'AUTO'
data['smartresult'] = 'dict'
data['client'] = 'fanyideskweb'
data['salt'] = '16099982906531'
data['sign'] = 'a9d35d5d61ef0421160b9d53b6dff04f'
data['lts'] = '1609998290653'
data['bv'] = '4f7ca50d9eda878f3f40fb696cce4d6d'
data['doctype'] = 'json'
data['version'] = '2.1'
data['keyfrom'] = 'fanyi.web'
data['action'] = 'FY_BY_CLICKBUTTION'

为了防止乱码,进行UTF-8编码

代码语言:javascript
复制
urllib.parse.urlencode(data).encode('utf-8')

开始请求

代码语言:javascript
复制
request = req.Request(url, data)
response = req.urlopen(request)
html = response.read().decode('utf-8')

解析结果

代码语言:javascript
复制
# 根据返回内容获取翻译结果
    target = json.loads(html)
    target = target['translateResult'][0][0]['tgt']
    print(target)

四、测试结果

中文---->英文

英文翻译成中文

当输入!q时,结束程序。

五、结尾

OK,以上就是Python爬虫的实现中英互译的过程,记录生活,分享生活,有不明白的小伙伴可以在下方评论交流。好了,期待下次的分享。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2021-01-08,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Python爬虫数据分析挖掘 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 目标网站
  • 开发环境
  • 翻译请求链接
  • 翻译请求表单
  • 数据请求响应
  • 请求头Header
  • 所需库
  • 请求url
  • 数据包表单
  • 开始请求
  • 解析结果
  • 中文---->英文
  • 英文翻译成中文
相关产品与服务
云服务器
云服务器(Cloud Virtual Machine,CVM)提供安全可靠的弹性计算服务。 您可以实时扩展或缩减计算资源,适应变化的业务需求,并只需按实际使用的资源计费。使用 CVM 可以极大降低您的软硬件采购成本,简化 IT 运维工作。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档