解决python爬虫中有中文的url问题


Posted in Python onMay 11, 2018

如果URL中存在中文,而你却不对它做任何处理,他不会达到你所想的那样,因此我们需要将中文部分进行处理,要用到urllib.parse模块中的quote将中文转化成URL所需的编码,url中的中文要单独处理,不能中英文全部合在一起处理(因为一部分的特殊字符也会被处理掉)。

import urllib.parse 
 
word='龙' 
word=urllib.parse.quote(word) 
url='https://baike.baidu.com/search/word?word=%s'%word 
print(url)

运行结果为:

解决python爬虫中有中文的url问题

以上这篇解决python爬虫中有中文的url问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
探索Python3.4中新引入的asyncio模块
Apr 08 Python
Python3.x中自定义比较函数
Apr 24 Python
在Python中使用HTMLParser解析HTML的教程
Apr 29 Python
Swift中的协议(protocol)学习教程
Jul 08 Python
django框架模板语言使用方法详解
Jul 18 Python
解决Python计算矩阵乘向量,矩阵乘实数的一些小错误
Aug 26 Python
基于python实现雪花算法过程详解
Nov 16 Python
python 实现查询Neo4j多节点的多层关系
Dec 23 Python
利用Python脚本实现自动刷网课
Feb 03 Python
在python中使用nohup命令说明
Apr 16 Python
Python yield生成器和return对比代码实例
Apr 20 Python
python中requests库+xpath+lxml简单使用
Apr 29 Python
利用Python yagmail三行代码实现发送邮件
May 11 #Python
解决Pandas to_json()中文乱码,转化为json数组的问题
May 10 #Python
解决python3 json数据包含中文的读写问题
May 10 #Python
Python3.6通过自带的urllib通过get或post方法请求url的实例
May 10 #Python
对python3 urllib包与http包的使用详解
May 10 #Python
Python3处理HTTP请求的实例
May 10 #Python
python字符串与url编码的转换实例
May 10 #Python
You might like
php调用新浪短链接API的方法
2014/11/08 PHP
对laravel in 查询的使用方法详解
2019/10/09 PHP
使用PHP开发留言板功能
2019/11/19 PHP
JavaScript中的Location地址对象
2008/01/16 Javascript
js DOM模型操作
2009/12/28 Javascript
避免 showModalDialog 弹出新窗体的原因分析
2010/05/31 Javascript
javascript 数组排序函数sort和reverse使用介绍
2013/11/21 Javascript
使用js操作css实现js改变背景图片示例
2014/03/10 Javascript
jQuery实现tag便签去重效果的方法
2015/01/20 Javascript
jquery滚动条插件slimScroll使用方法
2017/02/09 Javascript
Nuxt.js实现一个SSR的前端博客的示例代码
2019/09/06 Javascript
微信小程序自定义波浪组件使用方法详解
2019/09/21 Javascript
Python 自动安装 Rising 杀毒软件
2009/04/24 Python
使用wxpython实现的一个简单图片浏览器实例
2014/07/10 Python
Python3中的真除和Floor除法用法分析
2016/03/16 Python
python实现员工管理系统
2018/01/11 Python
Python代码打开本地.mp4格式文件的方法
2019/01/03 Python
pandas把所有大于0的数设置为1的方法
2019/01/26 Python
Python实现KNN(K-近邻)算法的示例代码
2019/03/05 Python
对Python中画图时候的线类型详解
2019/07/07 Python
Pandas分组与排序的实现
2019/07/23 Python
Python使用matplotlib实现交换式图形显示功能示例
2019/09/06 Python
Python面向对象中类(class)的简单理解与用法分析
2020/02/21 Python
关于Python3爬虫利器Appium的安装步骤
2020/07/29 Python
如何用Python进行时间序列分解和预测
2021/03/01 Python
html5 canvas手势解锁源码分享
2020/01/07 HTML / CSS
互动出版网:专业书籍
2017/03/21 全球购物
施华洛世奇意大利官网:SWAROVSKI意大利
2018/07/23 全球购物
工程监理应届生求职信
2013/11/09 职场文书
《鞋匠的儿子》教学反思
2014/03/02 职场文书
企业形象策划方案
2014/05/29 职场文书
解除施工合同协议书
2014/10/17 职场文书
宝葫芦的秘密观后感
2015/06/11 职场文书
Python爬虫之自动爬取某车之家各车销售数据
2021/06/02 Python
nginx内存池源码解析
2021/11/20 Servers
ECharts transform数据转换和dataZoom在项目中使用
2022/12/24 Javascript