主頁 > 作業系統 > 滾動視窗對資料幀沒有影響

滾動視窗對資料幀沒有影響

2021-11-26 23:25:57 作業系統

所以我必須對資料幀內的一組行執行滾動視窗。問題是,當我執行顯示所有 NaN 值full_df = full_df.rolling(window=5).mean()的輸出時full_df.head(2000)有誰知道為什么會這樣?我必須對此進行時間序列練習。

這是資料集:滾動視窗對資料幀沒有影響

uj5u.com熱心網友回復:

首先,你的回圈for i in full_df沒有按照你的想法去做;您不是在每一行中運行滾動平均值,而是在整個資料幀上一遍又一遍地運行它,沿列求平均值。

如果我們只是按照您實施的方式進行一次滾動平均:

full_df = full_df.rolling(window=5).mean()
print(full_df)
          0         1         2         3     ...     1255    1256     1257     1258
A          NaN       NaN       NaN       NaN  ...      NaN     NaN      NaN      NaN
AAL        NaN       NaN       NaN       NaN  ...      NaN     NaN      NaN      NaN
AAP        NaN       NaN       NaN       NaN  ...      NaN     NaN      NaN      NaN
AAPL       NaN       NaN       NaN       NaN  ...      NaN     NaN      NaN      NaN
ABBV  48.56684  48.37228  47.95056  48.07312  ...  102.590  98.768  101.212  100.510
...        ...       ...       ...       ...  ...      ...     ...      ...      ...
XYL   45.58400  45.60000  45.74000  45.96200  ...   64.504  61.854   61.596   61.036
YUM   51.14200  51.01800  51.17400  51.28400  ...   66.902  64.420   63.914   63.668
ZBH   48.59000  48.49200  48.57000  48.75000  ...   75.154  73.112   72.704   72.436
ZION  44.84400  44.76600  44.89400  45.08200  ...   73.972  71.734   71.516   71.580
ZTS   45.08600  45.02600  45.27400  45.39200  ...   83.002  80.224   80.000   80.116

[505 rows x 1259 columns]

前四行都是NaN因為沒有為少于 5 行定義滾動平均值。

如果我們再做一次(總共做兩次):

full_df = full_df.rolling(window=5).mean()
print(full_df.head(9))
           0          1          2     ...      1256      1257      1258
A           NaN        NaN        NaN  ...       NaN       NaN       NaN
AAL         NaN        NaN        NaN  ...       NaN       NaN       NaN
AAP         NaN        NaN        NaN  ...       NaN       NaN       NaN
AAPL        NaN        NaN        NaN  ...       NaN       NaN       NaN
ABBV        NaN        NaN        NaN  ...       NaN       NaN       NaN
ABC         NaN        NaN        NaN  ...       NaN       NaN       NaN
ABT         NaN        NaN        NaN  ...       NaN       NaN       NaN
ACN         NaN        NaN        NaN  ...       NaN       NaN       NaN
ADBE  49.619072  49.471424  49.192048  ...  108.3420  110.4848  110.4976

您可以看到前 8 行都是NaN從第四行向下延伸到滾動平均值的第八行。給定資料框的大小(505 行),如果您運行滾動均值 127 次,則整個df將被NaN消耗,而您的for回圈執行的次數甚至比這更多,這就是為什么您dfNaN填充的原因

另外,請注意,您對不同的股票代碼進行平均,這是沒有意義的。我相信你想要做的是平均行,而不是在這種情況下你只需要做的列

full_df = full_df.rolling(axis = 'columns', window=5).mean()
print(full_df)
      0     1     2     3         4        5     ...     1253     1254     1255     1256     1257     1258
A      NaN   NaN   NaN   NaN  44.72600  44.1600  ...   73.926   73.720   73.006   71.744   70.836   69.762
AAL    NaN   NaN   NaN   NaN  14.42600  14.3760  ...   53.142   53.308   53.114   52.530   52.248   51.664
AAP    NaN   NaN   NaN   NaN  78.74000  78.7600  ...  120.742  120.016  118.074  115.468  114.054  112.642
AAPL   NaN   NaN   NaN   NaN  67.32592  66.9025  ...  168.996  168.330  166.128  163.834  163.046  161.468
ABBV   NaN   NaN   NaN   NaN  35.87200  36.1380  ...  116.384  117.992  116.384  113.824  112.888  113.168
...    ...   ...   ...   ...       ...      ...  ...      ...      ...      ...      ...      ...      ...
XYL    NaN   NaN   NaN   NaN  27.84600  28.0840  ...   73.278   73.598   73.848   73.698   73.350   73.256
YUM    NaN   NaN   NaN   NaN  64.58000  64.3180  ...   85.504   85.168   84.454   83.118   82.316   81.424
ZBH    NaN   NaN   NaN   NaN  75.85600  75.8660  ...  126.284  126.974  126.886  126.044  125.316  124.048
ZION   NaN   NaN   NaN   NaN  24.44200  24.4820  ...   53.838   54.230   54.256   53.748   53.466   53.464
ZTS    NaN   NaN   NaN   NaN  33.37400  33.5600  ...   78.720   78.434   77.772   76.702   75.686   75.112

同樣,您的前四列不在此處管理。

為了糾正這一點,我們再添加一個術語:

full_df = full_df.rolling(axis = 'columns', window=5, min_periods = 1).mean()
print(full_df)
         0        1          2        3         4        5     ...     1253     1254     1255     1256     1257     1258
A     45.0800  44.8400  44.766667  44.7625  44.72600  44.1600  ...   73.926   73.720   73.006   71.744   70.836   69.762
AAL   14.7500  14.6050  14.493333  14.5350  14.42600  14.3760  ...   53.142   53.308   53.114   52.530   52.248   51.664
AAP   78.9000  78.6450  78.630000  78.7150  78.74000  78.7600  ...  120.742  120.016  118.074  115.468  114.054  112.642
AAPL  67.8542  68.2078  67.752800  67.4935  67.32592  66.9025  ...  168.996  168.330  166.128  163.834  163.046  161.468
ABBV  36.2500  36.0500  35.840000  35.6975  35.87200  36.1380  ...  116.384  117.992  116.384  113.824  112.888  113.168
...       ...      ...        ...      ...       ...      ...  ...      ...      ...      ...      ...      ...      ...
XYL   27.0900  27.2750  27.500000  27.6900  27.84600  28.0840  ...   73.278   73.598   73.848   73.698   73.350   73.256
YUM   65.3000  64.9250  64.866667  64.7525  64.58000  64.3180  ...   85.504   85.168   84.454   83.118   82.316   81.424
ZBH   75.8500  75.7500  75.646667  75.7350  75.85600  75.8660  ...  126.284  126.974  126.886  126.044  125.316  124.048
ZION  24.1400  24.1750  24.280000  24.3950  24.44200  24.4820  ...   53.838   54.230   54.256   53.748   53.466   53.464
ZTS   33.0500  33.1550  33.350000  33.4000  33.37400  33.5600  ...   78.720   78.434   77.772   76.702   75.686   75.112

在上述資料幀中的第一列只是在時間的價值0,二是倍,平均01,第三是平均的時間012等視窗大小繼續增長,直到你得到你的價值window=5,此時視窗會隨著您的滾動平均值移動。請注意,如果您愿意,您也可以將滾動平均值居中,而不是使用尾隨視窗。您可以在此處查看檔案

uj5u.com熱心網友回復:

我不太確定你要做什么。您能否更詳細地解釋一下,您的操作目標是什么?我假設您嘗試在每個資產上建立一個 5 天間隔的移動(滾動)平均值,并計算每個間隔的平均價格。

但首先,讓我回答為什么您會看到所有 NaN:您在下面的代碼中所做的是,您只是一遍又一遍地執行相同的操作,而其結果始終是 NaN。也就是說,因為您對 dict 做了一些奇怪的事情,并且第一行都有 NaN,所以平均值也將是 NaN。并且由于您full_df通過此計算的結果覆寫了變數,因此您的資料框僅顯示 NaN。

for i in full_df:
    full_df = full_df.rolling(window=5).mean()

讓我更詳細地解釋一下。您(可能)試圖迭代資料幀(使用 5 天的視窗)并計算平均值。該函式full_df.rolling(window=5).mean()已經做到了這一點,輸出是一個新的資料幀,每個視窗在整個資料幀上的平均值full_df通過在回圈中運行這個函式,沒有額外的索引,你只是在整個資料幀上一遍又一遍地運行相同的函式。

也許這會讓你得到你想要的:

import pandas as pd

df = pd.read_csv("all_stocks_5yr.csv", index_col=[0,6])

means = df.rolling(window=5).mean()

轉載請註明出處,本文鏈接:https://www.uj5u.com/caozuo/366692.html

標籤:Python 数据框 文件 字典

上一篇:是否可以使用各種變數作為tcl/tk的字串映射中的替換條目?

下一篇:從字典創建資料幀時出現StopIteration錯誤

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • CA和證書

    1、在 CentOS7 中使用 gpg 創建 RSA 非對稱密鑰對 gpg --gen-key #Centos上生成公鑰/密鑰對(存放在家目錄.gnupg/) 2、將 CentOS7 匯出的公鑰,拷貝到 CentOS8 中,在 CentOS8 中使用 CentOS7 的公鑰加密一個檔案 gpg -a ......

    uj5u.com 2020-09-10 00:09:53 more
  • Kubernetes K8S之資源控制器Job和CronJob詳解

    Kubernetes的資源控制器Job和CronJob詳解與示例 ......

    uj5u.com 2020-09-10 00:10:45 more
  • VMware下安裝CentOS

    VMware下安裝CentOS 一、軟硬體準備 1 Centos鏡像準備 1.1 CentOS鏡像下載地址 下載地址 1.2 CentOS鏡像下載程序 點擊下載地址進入如下圖的網站,選擇需要下載的版本,這里選擇的是Centos8,點擊如圖所示。 決定選擇Centos8后,選擇想要的鏡像源進行下載,此 ......

    uj5u.com 2020-09-10 00:12:10 more
  • 如何使用Grep命令查找多個字串

    如何使用Grep 命令查找多個字串 大家好,我是良許! 今天向大家介紹一個非常有用的技巧,那就是使用 grep 命令查找多個字串。 簡單介紹一下,grep 命令可以理解為是一個功能強大的命令列工具,可以用它在一個或多個輸入檔案中搜索與正則運算式相匹配的文本,然后再將每個匹配的文本用標準輸出的格式 ......

    uj5u.com 2020-09-10 00:12:28 more
  • git配置http代理

    git配置http代理 經常遇到克隆 github 慢的問題,這里記錄一下幾種配置 git 代理的方法,解決 clone github 過慢。 目錄 git配置代理 git單獨配置github代理 git配置全域代理 配置終端環境變數 git配置代理 主要使用 git config 命令 git單獨 ......

    uj5u.com 2020-09-10 00:12:33 more
  • Linux npm install 裝包時提示Error EACCES permission denied解

    npm install 裝包時提示Error EACCES permission denied解決辦法 ......

    uj5u.com 2020-09-10 00:12:53 more
  • Centos 7下安裝nginx,使用yum install nginx,提示沒有可用的軟體包

    Centos 7下安裝nginx,使用yum install nginx,提示沒有可用的軟體包。 18 (flaskApi) [root@67 flaskDemo]# yum -y install nginx 19 已加載插件:fastestmirror, langpacks 20 Loading ......

    uj5u.com 2020-09-10 00:13:13 more
  • Linux查看服務器暴力破解ssh IP

    在公網的服務器上經常遇到別人爆破你服務器的22埠,用來挖礦或者干其他嘿嘿嘿的事情~ 這種情況下正確的做法是: 修改默認ssh的22埠 使用設定密鑰登錄或者白名單ip登錄 建議服務器密碼為復雜密碼 創建普通用戶登錄服務器(root權限過大) 建立堡壘機,實作統一管理服務器 統計爆破IP [root ......

    uj5u.com 2020-09-10 00:13:17 more
  • CentOS 7系統常見快捷鍵操作方式

    Linux系統中一些常見的快捷方式,可有效提高操作效率,在某些時刻也能避免操作失誤帶來的問題。 ......

    uj5u.com 2020-09-10 00:13:31 more
  • CentOS 7作業系統目錄結構介紹

    作業系統存在著大量的資料檔案資訊,相應檔案資訊會存在于系統相應目錄中,為了更好的管理資料資訊,會將系統進行一些目錄規劃,不同目錄存放不同的資源。 ......

    uj5u.com 2020-09-10 00:13:35 more
最新发布
  • vim的常用命令

    Vim的6種基本模式 1. 普通模式在普通模式中,用的編輯器命令,比如移動游標,洗掉文本等等。這也是Vim啟動后的默認模式。這正好和許多新用戶期待的操作方式相反(大多數編輯器默認模式為插入模式)。 2. 插入模式在這個模式中,大多數按鍵都會向文本緩沖中插入文本。大多數新用戶希望文本編輯器編輯程序中一 ......

    uj5u.com 2023-04-20 08:43:21 more
  • vim的常用命令

    Vim的6種基本模式 1. 普通模式在普通模式中,用的編輯器命令,比如移動游標,洗掉文本等等。這也是Vim啟動后的默認模式。這正好和許多新用戶期待的操作方式相反(大多數編輯器默認模式為插入模式)。 2. 插入模式在這個模式中,大多數按鍵都會向文本緩沖中插入文本。大多數新用戶希望文本編輯器編輯程序中一 ......

    uj5u.com 2023-04-20 08:42:36 more
  • docker學習

    ###Docker概述 真實專案部署環境可能非常復雜,傳統發布專案一個只需要一個jar包,運行環境需要單獨部署。而通過Docker可將jar包和相關環境(如jdk,redis,Hadoop...)等打包到docker鏡像里,將鏡像發布到Docker倉庫,部署時下載發布的鏡像,直接運行發布的鏡像即可。 ......

    uj5u.com 2023-04-19 09:26:53 more
  • 設定Windows主機的瀏覽器為wls2的默認瀏覽器

    這里以Chrome為例。 1. 準備作業 wsl是可以使用Windows主機上安裝的exe程式,出于安全考慮,默認情況下改功能是無法使用。要使用的話,終端需要以管理員權限啟動。 我這里以Windows Terminal為例,介紹如何默認使用管理員權限打開終端,具體操作如下圖所示: 2. 操作 wsl ......

    uj5u.com 2023-04-19 09:25:49 more
  • docker學習

    ###Docker概述 真實專案部署環境可能非常復雜,傳統發布專案一個只需要一個jar包,運行環境需要單獨部署。而通過Docker可將jar包和相關環境(如jdk,redis,Hadoop...)等打包到docker鏡像里,將鏡像發布到Docker倉庫,部署時下載發布的鏡像,直接運行發布的鏡像即可。 ......

    uj5u.com 2023-04-19 09:19:04 more
  • Linux學習筆記

    IP地址和主機名 IP地址 ifconfig可以用來查詢本機的IP地址,如果不能使用,可以通過install net-tools安裝。 Centos系統下ens33表示主網卡;inet后表示IP地址;lo表示本地回環網卡; 127.0.0.1表示代指本機;0.0.0.0可以用于代指本機,同時在放行設 ......

    uj5u.com 2023-04-18 06:52:01 more
  • 解決linux系統的kdump服務無法啟動的問題

    問題:專案麒麟系統服務器的kdump服務無法啟動,沒有相關日志無法定位問題。 1、查看服務狀態是關閉的,重啟系統也無法啟動 systemctl status kdump 2、修改grub引數,修改“crashkernel”為“512M(有的機器數值太大太小都會導致報錯,建議從128M開始試,或者加個 ......

    uj5u.com 2023-04-12 09:59:50 more
  • 解決linux系統的kdump服務無法啟動的問題

    問題:專案麒麟系統服務器的kdump服務無法啟動,沒有相關日志無法定位問題。 1、查看服務狀態是關閉的,重啟系統也無法啟動 systemctl status kdump 2、修改grub引數,修改“crashkernel”為“512M(有的機器數值太大太小都會導致報錯,建議從128M開始試,或者加個 ......

    uj5u.com 2023-04-12 09:59:01 more
  • 你是不是暴露了?

    作者:袁首京 原創文章,轉載時請保留此宣告,并給出原文連接。 如果您是計算機相關從業人員,那么應該經歷不止一次網路安全專項檢查了,你肯定是收到過資訊系統技術檢測報告,要求你加強風險監測,確保你提供的系統服務堅實可靠了。 沒檢測到問題還好,檢測到問題的話,有些處理起來還是挺麻煩的,尤其是線上正在運行的 ......

    uj5u.com 2023-04-05 16:52:56 more
  • 細節拉滿,80 張圖帶你一步一步推演 slab 記憶體池的設計與實作

    1. 前文回顧 在之前的幾篇記憶體管理系列文章中,筆者帶大家從宏觀角度完整地梳理了一遍 Linux 記憶體分配的整個鏈路,本文的主題依然是記憶體分配,這一次我們會從微觀的角度來探秘一下 Linux 內核中用于零散小記憶體塊分配的記憶體池 —— slab 分配器。 在本小節中,筆者還是按照以往的風格先帶大家簡單 ......

    uj5u.com 2023-04-05 16:44:11 more