利用python将json数据转换为csv格式的方法


Posted in Python onMarch 22, 2018

假设.json文件中存储的数据为:

{"type": "Point", "link": "http://www.dianping.com/newhotel/22416995", "coordinates": [116.37256372996957, 40.39798447055443], "category": "经济型", "name": "北京荷塘山庄", "count": "278", "address": "北京市怀柔区黄花城村安四路", "price": "380"}
{"type": "Point", "link": "http://www.dianping.com/newhotel/19717653", "coordinates": [116.56881588256466, 40.43310967948417], "category": "经济型", "name": "慕田峪长城鱼师傅乡村酒店", "count": "89", "address": "北京市怀柔区渤海镇苇店村(慕田峪长城下3公里处,近怀黄路)", "price": "258"}
{"type": "Point", "link": "http://www.dianping.com/newhotel/58365289", "coordinates": [116.62874974822378, 40.45610264855833], "category": "经济型", "name": "北京蜜桃儿亲子客栈", "count": "119", "address": "北京市怀柔区神堂峪风景区下官地11号", "price": "549"}

现在需要将上面的这些数据存为csv格式,其中字典的keys为csv中的属性名称,字典的values为csv中属性对应的值。

如果只需要按照json的keys来生成csv,那么操作比较简单,直接按照下面的方法即可:

#-*-coding:utf-8-*-
import csv
import json
import sys
import codecs
def trans(path):
 jsonData = codecs.open(path+'.json', 'r', 'utf-8')
 # csvfile = open(path+'.csv', 'w') # 此处这样写会导致写出来的文件会有空行
 # csvfile = open(path+'.csv', 'wb') # python2下
 csvfile = open(path+'.csv', 'w', newline='') # python3下
 writer = csv.writer(csvfile, delimiter='\t')
 flag = True
 for line in jsonData:
  dic = json.loads(line[0:-1])
  if flag:
   # 获取属性列表
   keys = list(dic.keys())
   print (keys)
   writer.writerow(keys) # 将属性列表写入csv中
   flag = False
  else:
   # 读取json数据的每一行,将values数据一次一行的写入csv中
   writer.writerow(list(dic.values()))
 jsonData.close()
 csvfile.close()
if __name__ == '__main__':
 path=str(sys.argv[1]) # 获取path参数
 print (path)
 trans(path)

在python3下运行,命令行输入

python C:\Users\MaMQ\Documents\jsonToCsv.py C:\Users\MaMQ\Documents\data\geoFood

其中第三个参数为需要转换的文件的路径和其名称,将其后缀删除。运行文件后即可得到转换后的csv文件。

如果需要对json文件中每个字典的key字段进行修改,比如需要将上面dict中的coordinate中的经纬度数据取出来存为x、y数据,则可以按照下面的方法(此方法还可以调整每个属性显示的顺序,效果更好一点):

import csv
import json
import sys
import codecs
def trans(path):
 jsonData = codecs.open(path+'.json', 'r', 'utf-8')
 # csvfile = open(path+'.csv', 'w') # 此处这样写会导致写出来的文件会有空行
 # csvfile = open(path+'.csv', 'wb') # python2下
 csvfile = open(path+'.csv', 'w', newline='') # python3下
 writer = csv.writer(csvfile, delimiter='\t')
 keys=['id', 'name', 'category', 'price', 'count', 'type', 'address', 'link', 'x', 'y']
 writer.writerow(keys)
 i = 1
 for dic in jsonData:
  dic = json.loads(dic[0:-1])
  x = dic['coordinates'][0]
  y = dic['coordinates'][1]
  writer.writerow([str(i),dic['name'],dic['category'],dic['price'],dic['count'],dic['type'],dic['address'],dic['link'],x,y])
  i += 1
 jsonData.close()
 csvfile.close()
if __name__ == '__main__':
 path = str(sys.argv[1])
 print (path)
 trans(path)

运行方法同上。

json文件是我在大众点评抓取的数据,存储格式为utf-8。建议使用codecs包来读取json数据,可指定编码方式。

jsonData = codecs.open(path + '.json', 'r', encoding='utf-8')

欢迎交流讨论。

以上这篇利用python将json数据转换为csv格式的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
简单理解Python中基于生成器的状态机
Apr 13 Python
Python中使用装饰器时需要注意的一些问题
May 11 Python
详解Python的Django框架中manage命令的使用与扩展
Apr 11 Python
Python+Wordpress制作小说站
Apr 14 Python
Python数据结构与算法之图结构(Graph)实例分析
Sep 05 Python
python 中的divmod数字处理函数浅析
Oct 17 Python
unittest+coverage单元测试代码覆盖操作实例详解
Apr 04 Python
解决Python一行输出不显示的问题
Dec 03 Python
5分钟 Pipenv 上手指南
Dec 20 Python
python系统指定文件的查找只输出目录下所有文件及文件夹
Jan 19 Python
Keras 在fit_generator训练方式中加入图像random_crop操作
Jul 03 Python
利用python进行文件操作
Dec 04 Python
解决python3中解压zip文件是文件名乱码的问题
Mar 22 #Python
Python爬虫工程师面试问题总结
Mar 22 #Python
Python入门必须知道的11个知识点
Mar 21 #Python
python使用Tesseract库识别验证
Mar 21 #Python
python如何派生内置不可变类型并修改实例化行为
Mar 21 #Python
python如何通过实例方法名字调用方法
Mar 21 #Python
python如何为被装饰的函数保留元数据
Mar 21 #Python
You might like
Laravel 4.2 中队列服务(queue)使用感受
2014/10/30 PHP
php计算数组相同值出现次数的代码(array_count_values)
2015/01/20 PHP
php+Ajax处理xml与json格式数据的方法示例
2019/03/04 PHP
ie 调试javascript的工具
2009/04/29 Javascript
javascript 去字符串空格终极版(支持utf8)
2009/11/14 Javascript
javascript 正则替换 replace(regExp, function)用法
2010/05/22 Javascript
jquery 插件学习(四)
2012/08/06 Javascript
使用js实现按钮控制文本框加1减1应用于小时+分钟
2013/12/09 Javascript
js常用自定义公共函数汇总
2014/01/15 Javascript
js中settimeout方法加参数
2014/02/28 Javascript
thinkphp 表名 大小写 窍门
2015/02/01 Javascript
DeviceOne 让你一见钟情的App快速开发平台
2016/02/17 Javascript
用js控件div的滚动条,让它在内容更新时自动滚到底部的实现方法
2016/10/27 Javascript
基于jQuery Ajax实现下拉框无刷新联动
2017/12/06 jQuery
vue实现验证码按钮倒计时功能
2018/04/10 Javascript
手把手教你使用TypeScript开发Node.js应用
2019/05/06 Javascript
新手快速入门微信小程序组件库 iView Weapp
2019/06/24 Javascript
node创建Vue项目步骤详解
2020/03/06 Javascript
python同时给两个收件人发送邮件的方法
2015/04/30 Python
tensorflow: variable的值与variable.read_value()的值区别详解
2018/07/30 Python
Windows下pycharm创建Django 项目(虚拟环境)过程解析
2019/09/16 Python
python中@property和property函数常见使用方法示例
2019/10/21 Python
PyTorch的自适应池化Adaptive Pooling实例
2020/01/03 Python
Python3 xml.etree.ElementTree支持的XPath语法详解
2020/03/06 Python
Scrapy项目实战之爬取某社区用户详情
2020/09/17 Python
html5 video标签屏蔽右键视频另存为的js代码
2013/11/12 HTML / CSS
详解px单位html5响应式方案
2018/03/08 HTML / CSS
计算机网络毕业生自荐信
2013/10/01 职场文书
教师绩效考核方案
2014/01/21 职场文书
幼儿园庆六一游园活动方案
2014/01/29 职场文书
怎么写自荐书范文
2014/02/12 职场文书
2014第二批党员干部对照“四风”找差距检查材料思想汇报
2014/09/18 职场文书
会计实训报告范文
2014/11/04 职场文书
党纪处分决定书
2015/06/24 职场文书
Django与数据库交互的实现
2021/06/03 Python
MySQL令人大跌眼镜的隐式转换
2021/08/23 MySQL