按行检查NA,然后汇总其列名

如何解决按行检查NA,然后汇总其列名

我目前正在努力逐行获取信息,这些信息的变数很好/为NA。下面,我显示了一部分数据的示例/输出输出。

head(big_test)
# A tibble: 3 x 19
     id ctr_n   ctr    yr    mn  nvvi ENP_nat ENP_avg ENP_wght inflation1 inflation2 inflation3 inflation4 PSNS  PSNS_s PSNS_w
  <dbl> <chr> <dbl> <dbl> <dbl> <dbl>   <dbl>   <dbl>    <dbl> <chr>      <chr>      <chr>      <chr>      <chr>  <dbl> <chr> 
1  1854 Isra~   376  2019     4     1    3.50    3.50     3.50 NA         NA         NA         NA         NA     0.962 NA    
2  1855 Isra~   376  2019     9     1    2.51    2.51     2.51 NA         NA         NA         NA         NA     0.992 NA    
3  1856 Isra~   376  2020     3     1    3.78    3.78     3.78 NA         NA         NA         NA         NA     0.999 NA    
# ... with 3 more variables: PSNS_sw <chr>,local_E <dbl>,cst_tot <dbl>

dput(big_test)
structure(list(id = c(1854,1855,1856),ctr_n = c("Israel","Israel","Israel"),ctr = c(376,376,376),yr = c(2019,2019,2020),mn = c(4,9,3),nvvi = c(1,1,1),ENP_nat = c(3.50348063163162,2.51319610127466,3.78468892335972),ENP_avg = c(3.50348063163162,ENP_wght = c(3.50348063163162,inflation1 = c("NA","NA","NA"),inflation2 = c("NA",inflation3 = c("NA",inflation4 = c("NA",PSNS = c("NA",PSNS_s = c(0.961748183147869,0.992275075925835,0.998547438416594),PSNS_w = c("NA",PSNS_sw = c("NA",local_E = c(1,cst_tot = c(1,1)),row.names = c(NA,-3L),class = c("tbl_df","tbl","data.frame"))

编辑:此处的NA用引号引起来,这是不合适的。我认为问题出在写.xlsx。正确的版本在下面的dput输出中列出,NA上没有引号。

如您所见,数据在全国范围内通过选举分开,此处的每一行都应该是唯一的(即以色列,2019年,第4个月)。 我要创建一个字符列,其中列出了此输出中缺少的变量。这是所需列的示例:

desired_output <- tibble(missing_vars=paste("inflation1","inflation2","inflation3","inflation4","etc",sep=";"))

head(desired_output)
# A tibble: 1 x 1
  missing_vars                                   
  <chr>                                          
1 inflation1;inflation2;inflation3;inflation4;etc

因此,我想知道是否存在某种循环,可以对唯一的选举进行切片,查看丢失的列,然后对丢失的列进行矢量处理?这对于自动化至关重要,因为在存在相同国家/地区的其他变量的情况下,某些变量可能会丢失。我曾尝试对它们进行计数,但无法弄清楚如何将这些列名称列出为字符列。

感谢您的帮助。谢谢!

解决方法

这是tidyverse的一个选项,在这里我们用pivot_longer重塑为'long'格式,并按row_number()paste分组,其中缺少的列名“值”中的值

library(dplyr)
library(tidyr)
library(stringr)
big_test %>%
     select(starts_with('inflation')) %>% 
     mutate(rn = row_number()) %>% 
     pivot_longer(cols = -rn) %>% 
     group_by(rn) %>%
     summarise(missing_vars = str_c(name[is.na(value)],collapse=";"),.groups = 'drop') %>%
     select(-rn)          

在不重塑的情况下,选项为rowwise/c_across

big_test %>% 
   rowwise %>% 
   transmute(missing_vars = str_c(names(select(cur_data(),starts_with('inflation')))[which(c_across(starts_with('inflation')) 
        == 'NA')],collapse=";"))

在这里,它将(==)与“ NA”进行比较。如果它是真实的NA,请使用is.na代替==

,

@akrun指出,您使用的是“ NA”字符串而不是NA。解决该问题后,您可以定义一个缺少的函数并将其应用于每一行以创建一个新变量:

big_test <- structure(list(id = c(1854,1855,1856),ctr_n = c("Israel","Israel","Israel"),ctr = c(376,376,376),yr = c(2019,2019,2020),mn = c(4,9,3),nvvi = c(1,1,1),ENP_nat = c(3.50348063163162,2.51319610127466,3.78468892335972),ENP_avg = c(3.50348063163162,ENP_wght = c(3.50348063163162,inflation1 = c(NA,NA,NA),inflation2 = c(NA,inflation3 = c(NA,inflation4 = c(NA,PSNS = c(NA,PSNS_s = c(0.961748183147869,0.992275075925835,0.998547438416594),PSNS_w = c(NA,PSNS_sw = c(NA,local_E = c(1,cst_tot = c(1,1)),row.names = c(NA,-3L),class = c("tbl_df","tbl","data.frame"))

missing <- function(x) {
  idx <- is.na(unlist(x))
  paste(colnames(big_test)[idx],collapse=",")
}

big_test$missing <- apply(big_test,missing)

big_test$missing
#> [1] "inflation1,inflation2,inflation3,inflation4,PSNS,PSNS_w,PSNS_sw"
#> [2] "inflation1,PSNS_sw"
#> [3] "inflation1,PSNS_sw"

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


依赖报错 idea导入项目后依赖报错,解决方案:https://blog.csdn.net/weixin_42420249/article/details/81191861 依赖版本报错:更换其他版本 无法下载依赖可参考:https://blog.csdn.net/weixin_42628809/a
错误1:代码生成器依赖和mybatis依赖冲突 启动项目时报错如下 2021-12-03 13:33:33.927 ERROR 7228 [ main] o.s.b.d.LoggingFailureAnalysisReporter : *************************** APPL
错误1:gradle项目控制台输出为乱码 # 解决方案:https://blog.csdn.net/weixin_43501566/article/details/112482302 # 在gradle-wrapper.properties 添加以下内容 org.gradle.jvmargs=-Df
错误还原:在查询的过程中,传入的workType为0时,该条件不起作用 &lt;select id=&quot;xxx&quot;&gt; SELECT di.id, di.name, di.work_type, di.updated... &lt;where&gt; &lt;if test=&qu
报错如下,gcc版本太低 ^ server.c:5346:31: 错误:‘struct redisServer’没有名为‘server_cpulist’的成员 redisSetCpuAffinity(server.server_cpulist); ^ server.c: 在函数‘hasActiveC
解决方案1 1、改项目中.idea/workspace.xml配置文件,增加dynamic.classpath参数 2、搜索PropertiesComponent,添加如下 &lt;property name=&quot;dynamic.classpath&quot; value=&quot;tru
删除根组件app.vue中的默认代码后报错:Module Error (from ./node_modules/eslint-loader/index.js): 解决方案:关闭ESlint代码检测,在项目根目录创建vue.config.js,在文件中添加 module.exports = { lin
查看spark默认的python版本 [root@master day27]# pyspark /home/software/spark-2.3.4-bin-hadoop2.7/conf/spark-env.sh: line 2: /usr/local/hadoop/bin/hadoop: No s
使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams[&#39;font.sans-serif&#39;] = [&#39;SimHei&#39;] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -&gt; systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping(&quot;/hires&quot;) public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate&lt;String
使用vite构建项目报错 C:\Users\ychen\work&gt;npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-