数据归一化与标准化的功能包括,数据归一化标准化处理方法

数据的标准化就是将数据按照比列缩放,使之落入一个小的特征区间。

在某些比较和评价的指标处理中经常会用到,去除数据的单位限制,将其转化为无量纲的纯数值,便于不同单位或量级的指标能够进行比较和加权

最典型的就是数据的归一化处理,即将数据统一映射到【0,1】区间上.

举例:

import numpy as npimport pandas as pdimport matplotlib.pyplot as plt'''方法:极差标准化极差标准化是一种常见的数据标准化方法,它通过将原始数据按极差进行缩放,使得不同取值范围的数据具有统一的取值范围,以便于统计和运算处理。将数据的最大最小值记录下来,并通过max-min作为基数,(即min=0,max=1)进行数据的归一化处理x = (x - min) / (max - min)原数据减去最小值除以(最大值减最小值)'''df = pd.DataFrame({'value1':np.random.rand(10)*20, 'value2':np.random.rand(10)*100})def guiyi(data, *cols): df_n = data.copy() #对大量数据进行处理的时候,一般先copy一个数据。 for col in cols: ma = df_n[col].max() mi = df_n[col].min() df_n[col+'_n'] = (df_n[col] - mi) / (ma - mi) return(df_n)df_n = guiyi(df,'value1', 'value2')df_n

数据归一化、标准化

第二种数据标准化处理方法:Z-SCORE标准化

z分数 是一个分手与平均数的差再除以标准差的过程–z=(x-u)/σ, 其中x为某一具体分数,u为平均数,σ为标准差,

Z值的量代表着原始分数和母体平均值之间的距离,是以标准差为单位计算。在原始分数低于平均值时Z则为负数,反之则为正数。

数学意义:一个给定分数距离平均数多少个标准差

公式:(df['data'] – df['data'].mean()) / df['data'].std()

df = pd.DataFrame({'value1':np.random.rand(10)*100, 'value2':np.random.rand(10)*100})dfdef z_score(df, *cols): df_n = df.copy() for col in cols: u = df_n[col].mean() std = df_n[col].std() df_n[col+'_zn'] = (df_n[col] - u) / std return(df_n)df_n = z_score(df, 'value1', 'value2')df_n

数据归一化、标准化

经过处理的数据符合标准正态分布,即均值为0,标准差为1.

df_n value1_zn 中的数值代表集中趋势离平均数标准差的个数,标准化后的值越大,代表这个数据距离他的平均数越远,值越小,代表越近。

那么什么情况下我们会用到z-score标准化呢?

一般在分类,聚类算法中,需要使用距离来度量相似性的时候,z-score表现更好。比如两组数据判断相似性的时候。

数据归一化、标准化

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。E-MAIL:dandanxi6@qq.com

(0)
上一篇 2023年 10月 14日 下午1:20
下一篇 2023年 10月 14日 下午1:44

相关推荐

  • 苹果air快捷键方法

    苹果手机快捷键即悬浮球功能,也就是将部分常用的功能放到悬浮球中,需要使用的时候点击即可。可以通过“设置”中的“辅助功能”,然后在“触控”中将“辅助触控”打开即可。下面我们来看详细的…

    2022年 12月 12日
  • 一代枭雄里老乌为什么背叛何辅堂

    大结局中老乌承认背叛了何辅堂,他贪污了查理送过来的700根金条,但诬陷了黑娃,导致黑娃被来运杀死。老乌说他也不想让何辅堂死,不想栽赃黑娃,也不想拿那个钱,就是一念之差。最后何辅堂没…

    2022年 12月 14日
  • 东莞太子辉的酒店

    中国裁判文书网近日公布的《梁耀辉组织卖淫、串通投标、单位行贿驳回申诉通知书》显示,广东东莞太子酒店老板梁耀辉因犯组织卖淫罪等被判无期之后,不服判决申诉至广东省高级人民法院,该院于2…

    综合百科 2023年 5月 26日
  • 桃木辟邪,桃木能避邪,而肥城的桃木更是真正的“降妖木”,桃木辟邪的来历

    桃木辟邪,源于后羿的传说,后羿是被桃木棒击杀,死后被封为宗布神,这种神经常在一颗桃树下,牵着一只老虎,每个鬼都要前去检验,一闻,如果是恶鬼的话,就会被虎吃掉。 有一说是和夸父有关,…

    2022年 11月 23日
  • 李沁出演过的五部苦情剧,李沁西北农村苦情剧

    想必很多人都知道在娱乐圈中的明星有两种,一种是靠流量取胜的流量明星,另外的一种就是靠自己实力在约了全闯出自己的一片名堂。当红小花李沁就是属于后者,在AngelaBaby在靠流量的时…

    2023年 3月 3日
  • 古今地名对照转图(古今地名名称对照)

    北厍的“厍”,读作“色”,在苏州甪直的“甪”,读作“路”, 在苏州颜单的“单”,读作“山”,在江苏建湖。六安的“六”,读作“路”,在安徽。(江苏“六合”同)天姥山的“姥”,读作“母…

    2023年 1月 21日
  • 「两节期间这些“线”不要踩」旅游这样“省钱”就违反纪律了

    随着中秋、国庆的临近,有人打算留在家中陪陪家人,有人打算四处走走看看世界。不少选择旅游的朋友为了玩得既舒心又经济,提早开始研究省钱攻略。那是不是只要能省钱的攻略都是好攻略呢? 《中…

    综合百科 2022年 12月 9日
  • 什么叫做ui

    UI即用户界面设计行业刚刚在全球软件业兴起,属于高薪技术设计产业,与国外在同步发展水平。因此很多人想学习UI设计,打算去找工作。但面对陌生的领域,很多人对UI还是有很大的疑虑。今天…

    2022年 11月 30日
  • 拜锦鲤是什么意思

    2017年10月12日,广州。位于天河路商圈的天环广场建筑外形呈“太极双鱼”状,双鱼首尾相接,环绕着中央的下沉广场。图/IC 在这个人人焦虑的时代,锦鲤指向的是自我疗愈、自我暗示的…

    2023年 7月 23日
  • 《叛逃》遭亲人利用爱人背叛,为爱牺牲的钟日嘉,终究走上了绝路

    立场不同的爱,真的太艰难了,自从钟日嘉爱上庄有正的那一刻,她的命运,便彻底被改写了。 一生都在被利用的钟日嘉,这人间走了一遭,却是受尽苦楚,无论是父亲,还是爱人,都狠狠的践踏了,她…

    2022年 11月 7日