成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

數(shù)據(jù)科學(xué)中的陷阱:變量的數(shù)學(xué)運(yùn)算合理嗎?

大數(shù)據(jù)
數(shù)據(jù)科學(xué)中有各種各樣的模型,有的聽起來很簡單,比如線性回歸;有點(diǎn)呢,聽起來就很嚇人,比如深度學(xué)習(xí)。但是不管什么樣的模型,從本質(zhì)上來講,模型都是對訓(xùn)練數(shù)據(jù)做數(shù)學(xué)運(yùn)算,并以此求得模型參數(shù)的估計值。

數(shù)據(jù)科學(xué)中有各種各樣的模型,有的聽起來很簡單,比如線性回歸;有點(diǎn)呢,聽起來就很嚇人,比如深度學(xué)習(xí)。但是不管什么樣的模型,從本質(zhì)上來講,模型都是對訓(xùn)練數(shù)據(jù)做數(shù)學(xué)運(yùn)算,并以此求得模型參數(shù)的估計值。

所以我們需要保證兩點(diǎn):

  • ***,訓(xùn)練數(shù)據(jù)能進(jìn)行數(shù)學(xué)運(yùn)算;
  • 第二,對變量所做的數(shù)學(xué)運(yùn)算是合理的。

對于***點(diǎn),通常只在一些特定的應(yīng)用場景里才需要比較復(fù)雜的處理,比如自然語言處理、圖像識別等。

但對于第二點(diǎn),幾乎所有的場景都會遇到。

這里將注重研究第二點(diǎn)“對變量所做的數(shù)學(xué)運(yùn)算是合理的”,它表示的內(nèi)涵是:對于變量,數(shù)字的運(yùn)算有相應(yīng)的實(shí)際意義,包括以下兩個方面:

  • 數(shù)字的大小關(guān)系。
  • 數(shù)字的四則運(yùn)算。

為了更好地討論問題,將模型的自變量分類。正如前面章節(jié)所提到的,在模型里使用的變量可以分為兩類:數(shù)值型變量和類別型變量。如圖1所示。

 


圖1

數(shù)值型變量,在學(xué)術(shù)上也被稱為定量變量(quantitative variable),如長度、收入、重量等。它們的數(shù)值表示具體的測量或計數(shù)。事實(shí)上,定量變量按是否連續(xù)可進(jìn)一步細(xì)分為連續(xù)型變量和離散型變量。在一定區(qū)間內(nèi)可以任意取值的變量叫連續(xù)型變量,比如人的身高、體重等;反之則是離散型變量,比如公司員工人數(shù)等。對于這類變量,數(shù)字間的不等關(guān)系是有實(shí)際意義的。比如對于收入,在數(shù)學(xué)上,100小于1000;在實(shí)際生活中,100元也小于1000元。數(shù)字間的四則運(yùn)算也同理,這里就不贅述了。當(dāng)然由于數(shù)字的等于關(guān)系和四則運(yùn)算,數(shù)值型變量常常隱含著邊際效應(yīng)恒定的假設(shè),正如我們在第5章里討論的那樣。在某些場景下,這個隱含假設(shè)與現(xiàn)實(shí)不符,直接使用變量會影響模型的效果。

類別型變量,也被稱為定性變量(categorical variable)。它并不是表示數(shù)量上的變化,而是表示類別。比如性別、省份、學(xué)歷、產(chǎn)品等級等。這類變量的取值通常是用文字而非數(shù)字來表示。比如對于性別這個變量,可能的取值為男、女。因此要將文字變量轉(zhuǎn)換為數(shù)字變量,并且保證對于轉(zhuǎn)換之后的變量,數(shù)學(xué)運(yùn)算是有意義的,這并不是一件容易的事情。通常針對一個類別型變量,我們會用一個數(shù)字去表示其中的一個類別,但這樣的轉(zhuǎn)換方法并不能滿足要求:

對于有序的類別型變量,比如產(chǎn)品等級,0表示合格、1表示良好、2表示優(yōu)秀。這種情況下,0小于1的確對應(yīng)著合格等級次于良好等級,但數(shù)字間的四則運(yùn)算就沒有對應(yīng)意義了。數(shù)學(xué)上2減1等于1,但對于產(chǎn)品等級,優(yōu)秀減去良好還等于良好嗎?

對于無序的類別型變量,比如對于省份,0表示北京、1表示上海、2表示深圳等。數(shù)字間的大小關(guān)系和四則運(yùn)算都是沒有實(shí)際意義的。

因此,在模型里直接使用類別型變量是沒有任何道理的,也會嚴(yán)重影響模型的效果。由此可見,不管是數(shù)值型變量還是類別型變量,通常都需要根據(jù)問題場景做相應(yīng)變換后,再放到模型中使用。具體的方法將在后續(xù)的文章中詳細(xì)討論。

責(zé)任編輯:未麗燕 來源: 網(wǎng)絡(luò)大數(shù)據(jù)
相關(guān)推薦

2018-07-12 13:47:04

數(shù)據(jù)科學(xué)變量虛擬變量

2018-05-15 08:40:40

Linux命令數(shù)學(xué)運(yùn)算

2009-07-21 09:31:00

Scala數(shù)學(xué)運(yùn)算邏輯操作位操作符

2025-02-24 11:16:20

2020-08-11 13:00:34

GNU bcLinuxShell

2020-09-30 14:24:58

PythonSet對象

2023-05-04 12:35:39

AI科學(xué)

2017-07-05 16:09:25

LED智慧城市

2023-12-04 09:37:00

C++靜態(tài)變量

2019-08-18 23:10:14

數(shù)據(jù)科學(xué)算法數(shù)學(xué)

2021-02-22 17:25:19

數(shù)據(jù)科學(xué)數(shù)據(jù)技能可視化

2019-08-29 10:20:13

大數(shù)據(jù)IT互聯(lián)網(wǎng)

2015-09-18 16:26:54

NaSC運(yùn)算Ubuntu

2019-08-27 09:34:29

數(shù)據(jù)科學(xué)統(tǒng)計機(jī)器學(xué)習(xí)

2022-12-07 07:43:21

2019-12-13 07:58:34

數(shù)據(jù)科學(xué)數(shù)據(jù)科學(xué)家統(tǒng)計

2021-09-14 10:39:16

入侵檢測數(shù)據(jù)泄露日志文件

2022-04-28 10:29:38

數(shù)據(jù)數(shù)據(jù)收集

2024-07-31 15:11:57

SymPypython數(shù)學(xué)運(yùn)算

2009-11-06 13:57:52

C#
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號

主站蜘蛛池模板: 精品日韩在线观看 | 精品日韩一区二区 | 久久高清精品 | 亚洲一区二区欧美 | 在线观看成年视频 | 亚洲欧美成人 | 在线免费观看黄网 | 亚洲精品aⅴ | 久久久久久久一区二区三区 | 国产精品国产a | 亚洲精品一区二区三区蜜桃久 | 欧洲精品久久久久毛片完整版 | 91久久精品国产 | 欧美区在线观看 | 羞羞涩涩在线观看 | 深夜福利亚洲 | 五月天婷婷久久 | 国产91久久久久蜜臀青青天草二 | 99精品一区二区三区 | 99精品国自产在线 | 日韩亚洲欧美综合 | 真人毛片 | 一级黄色淫片 | 超碰520| 欧美最猛黑人 | 曰韩一二三区 | 精品久久久久久久久久久 | www狠狠干 | 波多野结衣二区 | 黄a在线播放| 欧美日韩国产不卡 | 99pao成人国产永久免费视频 | 久久亚洲天堂 | 伊人天堂网 | 99久久婷婷 | 天天曰天天曰 | 天天草狠狠干 | 一区二区三区四区日韩 | 日韩欧美一区二区三区免费看 | 96久久久久久 | 91视频中文|