百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程字典 > 正文

7天学会Python最佳可视化工具Seaborn(三):数据集的分布

toyiye 2024-06-23 18:33 18 浏览 0 评论

当我们上手一个数据集时,往往第一件事就是了解每个变量是如何分布的。这一章节会简单地教大家如何在seaborn中检验一元分布和二元(维)分布。你也许会对如何对比一个变量在其他变量的不同水平下的分布有什么差异,在分类数据可视化教程中,你可以找到答案。

import numpy as np
import pandas as pd
import seaborn as sns
import matplotlib.pyplot as plt
from scipy import stats
sns.set(color_codes=True)

一、一元分布的可视化

在seaborn中,查看单变量分布情况最方便的方法就是使用distplot()函数。默认情况下,它会画一个直方图,并且做一个核密度估计(KDE)。

x = np.random.normal(size=100)
sns.distplot(x);

直方图

直方图我们应该都很熟悉了,matplotlib中也有一个hist()函数来绘制直方图。直方图将数据划分到多个数据桶中,然后对每个桶中的样本进行计数,并将它们以长条的形式画出来。

我们通过演示来理解这个过程:去掉密度曲线,并且加一个“地毯图”(rugplot)。地毯图会在每个观测值的位置添加一个垂直的线段小标记。我们可以使用rugplot()来仅仅绘制地毯图,不过它在distplot()中已经得到了支持:

# 高度和下方标记的密集度是成正比的
sns.distplot(x, kde=False, rug=True);

在绘制直方图时,最主要的选择就是指定数据桶的数量以及它们的边界。distplot()默认会用一条简单的规则来猜测多少个数据桶最合适,不过尝试更多或更少的分桶也许能帮助我们揭示数据的更多特性:

sns.distplot(x, bins=20, kde=False, rug=True);

核密度估计

我们对核密度估计可能不太熟悉,但是它在展示数据分布形状方面很有用。与直方图类似,KDE图用高度对观测值的密度进行编码:

sns.distplot(x, hist=False, rug=True);

相对于直方图,KDE图的绘制有更高的计算复杂度。在KDE的计算中,首先每个观测值会被替换为一条以该观测点为中心的正态曲线:

x = np.random.normal(0, 1, size=30)
bandwidth = 1.06 * x.std() * x.size ** (-1 / 5.)
support = np.linspace(-4, 4, 200)
kernels = []
for x_i in x:
 kernel = stats.norm(x_i, bandwidth).pdf(support)
 kernels.append(kernel)
 plt.plot(support, kernel, color='r')
sns.rugplot(x, color=".2", linewidth=3);

接下来,我们把所有的曲线都叠加起来,得到每个点上的密度。然后我们把最终的曲线正则化(归一化),这样曲线下方的面积加起来刚好是1:

from scipy.integrate import trapz
density = np.sum(kernels, axis=0)
density /= trapz(density, support)
plt.plot(support, density);

如果我们直接用kdeplot()函数,那我们会得到同样的结果。distplot()中集成了这个函数,但是当我们只想绘制密度估计图时,kdeplot()能提供更直接的接口以及更多的选项。

sns.kdeplot(x, shade=True);

kdeplot()中的bw参数控制着估计值与真实数据之间的贴近程度,就像直方图中的分桶大小一样。它与我们的KDE图的宽度相关。它提供了默认的规则来确定一个取值,不过有些时候我们自己尝试一些更大或更小的值也许会很有帮助:

sns.kdeplot(x, label="bw: default")
sns.kdeplot(x, bw=.2, label="bw: 0.2")
sns.kdeplot(x, bw=2, label="bw: 2")
plt.legend();

如你所见,高斯(正态)KDE过程的性质扩展了原数据集中的最大值和最小值。我们可以通过cut参数控制曲线超过极值的距离,然而这只会改变曲线的绘制,而不会改变它拟合、计算的过程:

sns.kdeplot(x, shade=True, cut=0)
sns.rugplot(x);

拟合指定的分布

我们可以使用distplot()将数据拟合到一个指定的分布形态,我们可以在视觉上评估它们有多接近:

x = np.random.gamma(6, size=200)
sns.distplot(x, kde=False, fit=stats.gamma);

二、二元分布可视化

将两个变量的联合分布形态可视化出来往往会很有用。在seaborn中,最简单的实现方式是使用jointplot()函数,它会生成多个面板,不仅展示了两个变量之间的关系,也在两个坐标轴上分别展示了每个变量的分布。

mean, cov = [0, 1], [(1, .5), (.5, 1)]
data = np.random.multivariate_normal(mean, cov, 200)
df = pd.DataFrame(data, columns=["x", "y"])

散点图

最常见的展示二元分布的方法是使用散点图,我们使用x、y两个坐标轴来定位每一个观测值。它类似于二维的地毯图。我么可以使用matplotlib中的plt.scatter()函数来绘制散点图,同时,jointplot()的默认绘制类型也是散点图。

sns.jointplot(x="x", y="y", data=df);

六边图

六边图(Hexbin),可以视为二维世界中的直方图,因为它展示了每个小六边形中观测点的数量。这种图在大数据集上表现最佳。我们使用matplotlib的plt.hexbin函数以及seaborn的jointplot(kind="hex")都可以绘制它。白色背景与六边图看起来更配哦:

x, y = np.random.multivariate_normal(mean, cov, 1000).T
with sns.axes_style("white"):
 sns.jointplot(x=x, y=y, kind="hex", color="k")

核密度估计

没错,核密度估计也适用于二元的情况。在seaborn中,这种图会以等高线的方式展示出来,我们可以用jointplot(kind="kde")来绘制它:

sns.jointplot(x="x", y="y", data=df, kind="kde");

我们也可以直接使用kdeplot()来绘制二维的核密度估计图。这允许我们直接在某个指定的matplotlib坐标轴上(包括已存在的坐标轴体系)绘制这类图形。作为对比,在jointplot()中我们只能创建一个新的图来生成核密度估计图。

f, ax = plt.subplots(figsize=(6, 6))
sns.kdeplot(df.x, df.y, ax=ax)
sns.rugplot(df.x, color="g", ax=ax)
sns.rugplot(df.y, vertical=True, ax=ax);

如果我们想将二元密度以更加连续的形式展示出来,我们可以简单地通过增加等高线的水平数:

f, ax = plt.subplots(figsize=(6, 6))
cmap = sns.cubehelix_palette(as_cmap=True, dark=0, light=1, reverse=True)
sns.kdeplot(df.x, df.y, cmap=cmap, n_levels=60, shade=True);

jointplot()函数基于JointGrid对象来控制图形。我们可以直接使用JointGrid来获得更高的灵活性。jointplot()在绘制完成后会返回一个JointGrid对象,我们可以通过它来增加更多图层或者调整其他细节:

g = sns.jointplot(x="x", y="y", data=df, kind="kde", color="m")
g.plot_joint(plt.scatter, c="w", s=30, linewidth=1, marker="+")
g.ax_joint.collections[0].set_alpha(0)
g.set_axis_labels("$X$", "$Y$");

三、数据集中成对关系的可视化

成对关系的可视化是指在一个数据集的所有变量中,两两之间的关系。假如我们想要看多个变量中两两组合之间的联合分布情况,我们可以使用pairplot()函数,它会创建一个由多个坐标轴构成的矩阵,然后把两两之间(一般是DataFrame的列之间的组合)的关系分别绘制在不同的坐标轴上去。默认情况下,它还会将每个变量自己的分布情况画在对角线的位置:

iris = sns.load_dataset("iris")
sns.pairplot(iris);

正如jointplot()函数和JointGrid对象之间的关系,pairplot()函数是基于PairGrid对象构建的,我们也可以使用PairGrid来获取更多灵活性:

g = sns.PairGrid(iris)
# 在对角线上的坐标轴内画图
g.map_diag(sns.kdeplot)
# 在非对角线上的坐标轴内画图
g.map_offdiag(sns.kdeplot, n_levels=6);

相关推荐

为何越来越多的编程语言使用JSON(为什么编程)

JSON是JavascriptObjectNotation的缩写,意思是Javascript对象表示法,是一种易于人类阅读和对编程友好的文本数据传递方法,是JavaScript语言规范定义的一个子...

何时在数据库中使用 JSON(数据库用json格式存储)

在本文中,您将了解何时应考虑将JSON数据类型添加到表中以及何时应避免使用它们。每天?分享?最新?软件?开发?,Devops,敏捷?,测试?以及?项目?管理?最新?,最热门?的?文章?,每天?花?...

MySQL 从零开始:05 数据类型(mysql数据类型有哪些,并举例)

前面的讲解中已经接触到了表的创建,表的创建是对字段的声明,比如:上述语句声明了字段的名称、类型、所占空间、默认值和是否可以为空等信息。其中的int、varchar、char和decimal都...

JSON对象花样进阶(json格式对象)

一、引言在现代Web开发中,JSON(JavaScriptObjectNotation)已经成为数据交换的标准格式。无论是从前端向后端发送数据,还是从后端接收数据,JSON都是不可或缺的一部分。...

深入理解 JSON 和 Form-data(json和formdata提交区别)

在讨论现代网络开发与API设计的语境下,理解客户端和服务器间如何有效且可靠地交换数据变得尤为关键。这里,特别值得关注的是两种主流数据格式:...

JSON 语法(json 语法 priority)

JSON语法是JavaScript语法的子集。JSON语法规则JSON语法是JavaScript对象表示法语法的子集。数据在名称/值对中数据由逗号分隔花括号保存对象方括号保存数组JS...

JSON语法详解(json的语法规则)

JSON语法规则JSON语法是JavaScript对象表示法语法的子集。数据在名称/值对中数据由逗号分隔大括号保存对象中括号保存数组注意:json的key是字符串,且必须是双引号,不能是单引号...

MySQL JSON数据类型操作(mysql的json)

概述mysql自5.7.8版本开始,就支持了json结构的数据存储和查询,这表明了mysql也在不断的学习和增加nosql数据库的有点。但mysql毕竟是关系型数据库,在处理json这种非结构化的数据...

JSON的数据模式(json数据格式示例)

像XML模式一样,JSON数据格式也有Schema,这是一个基于JSON格式的规范。JSON模式也以JSON格式编写。它用于验证JSON数据。JSON模式示例以下代码显示了基本的JSON模式。{"...

前端学习——JSON格式详解(后端json格式)

JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式。易于人阅读和编写。同时也易于机器解析和生成。它基于JavaScriptProgrammingLa...

什么是 JSON:详解 JSON 及其优势(什么叫json)

现在程序员还有谁不知道JSON吗?无论对于前端还是后端,JSON都是一种常见的数据格式。那么JSON到底是什么呢?JSON的定义...

PostgreSQL JSON 类型:处理结构化数据

PostgreSQL提供JSON类型,以存储结构化数据。JSON是一种开放的数据格式,可用于存储各种类型的值。什么是JSON类型?JSON类型表示JSON(JavaScriptO...

JavaScript:JSON、三种包装类(javascript 包)

JOSN:我们希望可以将一个对象在不同的语言中进行传递,以达到通信的目的,最佳方式就是将一个对象转换为字符串的形式JSON(JavaScriptObjectNotation)-JS的对象表示法...

Python数据分析 只要1分钟 教你玩转JSON 全程干货

Json简介:Json,全名JavaScriptObjectNotation,JSON(JavaScriptObjectNotation(记号、标记))是一种轻量级的数据交换格式。它基于J...

比较一下JSON与XML两种数据格式?(json和xml哪个好)

JSON(JavaScriptObjectNotation)和XML(eXtensibleMarkupLanguage)是在日常开发中比较常用的两种数据格式,它们主要的作用就是用来进行数据的传...

取消回复欢迎 发表评论:

请填写验证码