Python处理json模块的详细介绍，python安装json库

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。

首先，了解下什么是JSON？

JSON：JavaScript Object Notation 【JavaScript 对象表示法】

JSON 是一种轻量级的数据交换格式，完全独立于任何程序语言的文本格式。一般，后台应用程序将响应数据封装成JSON格式返回。

JSON的基本语法如下:JSON名称/值对。JSON 数据的书写格式是：名称/值对。名称/值对包括字段名称(在双引号中)，然后着是一个冒号(:)，最后是值。

JSON最常用的格式是对象的键值对：key只能是string, value可以是 object、array、string、number、true/false、null

{"sites": [

{"name":"360" , "url":"www.360.com"},

{"name":"google" , "url":"www.google.com"},

{"name":"baidu" , "url":"www.baidu.com"}

]

}

键通过双引号包裹，后面跟冒号“：”，然后跟该键的值；

值可以是字符串、数字、数组等数据类型；

对象与对象之间用逗号隔开；

“{}”用来保存对象；

“[]”用来保存数组；

json跟python中的字典看起来很像，两者之间的区别？

1)json的key只能是字符串，dict的key可以是任何可hash的对象，例如：字符串、数字、元组等；

2)字典是一种数据结构，json是一种数据格式；字典有很多内置函数，有多种调用方法，而json是数据打包的一种格式，并不像字典具备操作性；

3)json的字符串强制用双引号，dict的字符串可以用单引号、双引号；

一般而言，我们会把json转化为python中的字典或者列表，再对其进行操作。

Python处理json的模块：json

Pythone3的标准库JSON模块，可以很方便的帮我们进行json数据的转换和处理，这里主要指序列化(json.dumps()、json.dump())和反序列化(json.loads()、json.load())。

序列化和反序列化：

将对象转换为可通过网络传输或可以存储到本地磁盘的数据格式(如：XML、JSON或特定格式的字节串)的过程称为序列化；反之，则称为反序列化。

常用的JSON模块方法：

json.dumps():将Python中的对象转换为JSON中的字符串对象

json.dump()：将python对象转换成JSON字符串输出到fp流中。

json.loads():将JSON中的字符串对象转换为Python中的对象

json.load():读取包含json对象的文件。

带s的都是和字符串相关的，不带s的都是和文件相关的。

实例：

把字典转换成json串

importjson

dic= {'name': 'xiaoming', 'age': 29}

json_str= json.dumps(dic)#返回json字符串

print(json_str)print(type(json_str))

输出：

{"name": "xiaoming", "age": 29}

Python解码JSON对象

importjson

json_str='{"id":"09", "name": "Nitin", "department":"Finance"}'

#Convert string to Python dict

dict =json.loads(json_str)print(dict)#转换成字典来后，要访问其中的值，可以使用字典的key来访问

print(dict['id'])

输出：

{'id': '09', 'name': 'Nitin', 'department': 'Finance'}

09

读取json文件

importjson

with open('test1.json') as f:

a=json.load(f)print(a)print(type(a))

输出：

{'sites': [{'name': '360', 'url': 'www.360.com'}, {'name': 'google', 'url': 'www.google.com'}, {'name': 'baidu', 'url': 'www.baidu.com'}]}

写入json文件

importjson

dic={"name" : "xiaoming","age" : 20,"phonenumber" : "15555555555"}

with open("test2.json", "w") as outfile:

json.dump(dic, outfile)

文件test.json {"name": "xiaoming", "age": 20, "phonenumber": "15555555555"}

Python类型转换JSON类型的对应关系

json类型转换到Python的类型对照表

实际应用中爬取到的信息肯定是需要保存到本地的。保存信息的方式有数据库和文件的形式，数据库我们后面再讲，现在让我们先看看怎么把信息保存到文件里。

这里我们主要讲讲 将数据保存为 json格式和 csv格式，这就要用到两个库 json库和 csv库，这两个库都是 python自带的库。

关于数据存储我们分两篇来讲，这一篇先讲 json，下一篇再讲 csv。

一、关于 json

json的简介直接引用百度百科的定义：

JSON(JavaScript Object Notation, JS 对象简谱) 是一种轻量级的数据交换格式。它基于 ECMAScript (欧洲计算机协会制定的js规范)的一个子集，采用完全独立于编程语言的文本格式来存储和表示数据。简洁和清晰的层次结构使得 JSON 成为理想的数据交换语言。 易于人阅读和编写，同时也易于机器解析和生成，并有效地提升网络传输效率。

实际上 json的格式和 python中的字典很像，也是由键值对组成，但是 python中的值可以为任何对象(列表、字典、字符串、数字等等)，而 json中的值只能是数组(列表)、字典、字符串、数组、布尔值中的一中或几种。

其格式就像下面这样：

注意：json中的引号必须是双引号，否则会报错{

"key1": "value1",

"key2": [1,2,"value2"],

"key3":

{

"key31": "value1",

"key32": [1,2,"value2"],

"key33": true,

},

}

二、json库的使用

json库一共有三个方法，分别是 dump、dumps、load、loads。

其中 dump和 dumps是用来把把字典和数组转换为 json格式的，dump把转换结果直接写入文件，dumps返回字符串。

load和 loads是把 json格式的数据转换为字典格式，load直接从 json文件中读取数据并返回字典对象，loads把字符串形式的 json数据转换成字典格式。

下面讲讲这些方法的具体用法。

1、dump和 dumps

dump的函数原型是 dump(obj, fp) 第一个参数 obj是要转换的对象，第二个参数 fp是要写入数据的文件对象。

dumps的函数原型是 dumps(obj) 参数是要转换的对象

注意：如果要转换的对象里有中文字符的话，要把 ensure_ascii设置为 False否则中文会被编码为 ascii格式#-*- coding: utf-8 -*

import json

test = {

"key1": "value1",

"key2": [1,2,"value2"],

"key3":

{

"key31": "value1",

"key32": [1,2,"value2"],

"key33": True,

"key34": "测试",

},

}

#没有设置 ensure_ascii为 False

with open('test.json', 'w', encoding='utf-8') as fp:

json.dump(test, fp)

#设置了 ensure_ascii为 False

with open('test_no_ascii.json', 'w', encoding='utf-8') as fp:

json.dump(test, fp, ensure_ascii=False)

#test.json的文件内容为：

#{... ... "key33": true, "key34": "\u6d4b\u8bd5"}}

#test_no_ascii.json的文件内容为：

#{... ... "key33": true, "key34": "测试"}}

#注意到 python中的 True转换成了 Javascript里的 true

#另外在打开文件的时候强烈建议用 encoding指定文件编码

#还需要注意文件的打开模式 w是写入，文件已存在的话就覆盖

#要追加写入的话记得用 a模式打开

test_string = json.dumps(test, ensure_ascii=False)

print(test_string)

2、load和 loads

load的函数原型是 load(fp) 参数 fp是要读取的文件对象

loads的函数原型是 loads(string) 参数 string是要转换成 python对象的 json字符串，通常用来将网页中的 json数据转换为 python对象#-*- coding: utf-8 -*

import json

#json格式的字符串

test_string = '{"key1": "value1", "key2": [1, 2, "value2"], "key3": {"key31": "value1", "key32": [1, 2, "value2"],

"key33": true, "key34": "测试"}}'

#从之前保存的 test_no_ascii.json中读取 注意模式为 r

with open('test_no_ascii.json', 'r', encoding='utf-8') as fp:

json_obj_from_file = json.load(fp)

json_obj_from_web = json.loads(test_string)

#打印两个返回结果的类型

print(type(json_obj_from_file))

print(type(json_obj_from_web))

#打印两个返回结果的内容

print(json_obj_from_file)

print(json_obj_from_web)