WedX - журнал о программировании и компьютерных науках

Пользовательская функция с агрегированием таблиц данных

Я пытаюсь написать функцию в основном с наборами данных агрегации/слияния/подмножества. Мой фрейм данных выглядит так:

NameA   NameB   NameC   Score1   Score2
  A       F       K       3         3
  B       F       L       5         5
  C       F       M       7         4
  D       G       N       2         2
  E       G       O       5         8

и функция, которую я буду запускать:

test <- Fun(data, Score1, NameB)

Во-первых, я хочу вычислить среднее значение Score1, сгруппированное по NameB:

Fun <- function(df, col, group_by){
       setDT(df)
       df1<- df[, sapply(.SD, mean),  .SDcols = col, by= group_by]
    }

После некоторого дополнительного кодирования мой фрейм данных выглядит так:

NameA   NameB   NameC   Score1   Score2   Group_Mean
  A       F       K       3         3          4
  B       F       L       5         5          4
  C       F       M       4         4          4
  D       G       N       2         2          5
  E       G       O       5         8          5

Затем я хочу подмножить свой фрейм данных с Score1 != Score2. Поэтому я пишу:

Fun <- function(df, col, group_by){
       setDT(df)
       df1<- df[, sapply(.SD, mean),  .SDcols = col, by= group_by]           
       df2 <- df1[which(df1[col] != df[Score2])]
}

но это дает мне сообщение об ошибке: Error in Ops.data.frame(df2[col], df[Score2]) : ‘==’ only defined for equally-sized data frames

После этого шага я хочу сделать еще немного математики и подмножества, как показано ниже:

Fun <- function(df, col, group_by){
       setDT(df)
       df1<- df[, sapply(.SD, mean),  .SDcols = col, by= group_by]           
       df2 <- df1[which(df1[col] != df[Score2])]

       df2["NewCol"] <- abs(df2[col] - df2[Score2])
       output <- df2[which(df2[NewCol] > 1 or df2[NewCol] < 1.5)]
       return(output)
    }

Я новичок в пользовательской функции R и R. После части с сообщением об ошибке я застрял надолго. Пожалуйста, если кто-нибудь может дать мне какие-либо предложения по моему коду выше, я был бы очень признателен!

09.04.2018

  • Что ты пытаешься сделать? Каков ваш ожидаемый результат? 09.04.2018
  • Непонятно, где используется Master_Table. 2) Используйте lapply т.е. df[, lapply(.SD, mean), .SDcols = col, by = group_by]; 3) df[Score2] может не дать того, на что вы рассчитывали, 4) подобная проблема с NewCol' and the or` должна быть | 09.04.2018
  • У вас какие-то опечатки. Ваш Fun принимает входные данные col, но затем вы начинаете использовать col1, который никогда не определен. Также лучше всегда использовать , внутри [ для выбора столбцов таблицы данных и использовать with = FALSE], если это строковое имя столбца df[, col1, with = FALSE] 09.04.2018
  • Большое спасибо за вашу помощь! Опечатку исправил, надеюсь станет понятнее. 09.04.2018

Ответы:


1

Я не уверен, разумно ли поощрять новичка R вводить дикую смесь синтаксиса data.table и вызовов функций.

Тем не менее, вот несколько примеров функций.

library(data.table)

data <- fread(
  "NameA   NameB   NameC   Score1   Score2
  A       F       K       3         3
  B       F       L       5         5
  C       F       M       7         4
  D       G       N       2         2
  E       G       O       5         8"
)

Fun1 <- function(df, col, group_by){
  setDT(df)[, sapply(.SD, mean),  .SDcols = col, by = group_by]
}
Fun1(data, "Score1", "NameB")
   NameB  V1
1:     F 5.0
2:     G 3.5

Обратите внимание, что Score2 используется в следующем примере для воспроизведения изображенного кадра данных OP:

Fun2 <- function(df, col, group_by){
  setDT(df)[, Group_Mean := mean(get(col)), by = group_by]
}
Fun2(data, "Score2", "NameB")[]
   NameA NameB NameC Score1 Score2 Group_Mean
1:     A     F     K      3      3          4
2:     B     F     L      5      5          4
3:     C     F     M      7      4          4
4:     D     G     N      2      2          5
5:     E     G     O      5      8          5

Пример 3:

Fun3 <- function(df, col, group_by){
  setDT(df)[, Group_Mean := mean(get(col)), by = group_by]
  df[get(col) != Score2]
}
Fun3(data, "Score1", "NameB")[]
   NameA NameB NameC Score1 Score2 Group_Mean
1:     C     F     M      7      4        5.0
2:     E     G     O      5      8        3.5

Обратите внимание, что приведенная ниже функция была изменена WRT на черновик OP, чтобы возвращать непустую таблицу данных.

Fun4 <- function(df, col, group_by){
  setDT(df)[, Group_Mean := mean(get(col)), by = group_by]
  df[, NewCol := abs(get(col) - Group_Mean)]
  df[between(NewCol, 1.0, 1.5, incbounds = TRUE)]
}
Fun4(data, "Score1", "NameB")[]
   NameA NameB NameC Score1 Score2 Group_Mean NewCol
1:     D     G     N      2      2        3.5    1.5
2:     E     G     O      5      8        3.5    1.5

Обратите внимание, что data было изменено in place всеми предыдущими вызовами функций.

data
   NameA NameB NameC Score1 Score2 Group_Mean NewCol
1:     A     F     K      3      3        5.0    2.0
2:     B     F     L      5      5        5.0    0.0
3:     C     F     M      7      4        5.0    2.0
4:     D     G     N      2      2        3.5    1.5
5:     E     G     O      5      8        3.5    1.5
12.04.2018
  • Большое спасибо за вашу помощь! Я не думал об этом подходе раньше, это определенно помогает мне! 17.04.2018
  • Новые материалы

    Как проанализировать работу вашего классификатора?
    Не всегда просто знать, какие показатели использовать С развитием глубокого обучения все больше и больше людей учатся обучать свой первый классификатор. Но как только вы закончите..

    Работа с цепями Маркова, часть 4 (Машинное обучение)
    Нелинейные цепи Маркова с агрегатором и их приложения (arXiv) Автор : Бар Лайт Аннотация: Изучаются свойства подкласса случайных процессов, называемых дискретными нелинейными цепями Маркова..

    Crazy Laravel Livewire упростил мне создание электронной коммерции (панель администратора и API) [Часть 3]
    Как вы сегодня, ребята? В этой части мы создадим CRUD для данных о продукте. Думаю, в этой части я не буду слишком много делиться теорией, но чаще буду делиться своим кодом. Потому что..

    Использование машинного обучения и Python для классификации 1000 сезонов новичков MLB Hitter
    Чему может научиться машина, глядя на сезоны новичков 1000 игроков MLB? Это то, что исследует это приложение. В этом процессе мы будем использовать неконтролируемое обучение, чтобы..

    Учебные заметки: создание моего первого пакета Node.js
    Это мои обучающие заметки, когда я научился создавать свой самый первый пакет Node.js, распространяемый через npm. Оглавление Глоссарий I. Новый пакет 1.1 советы по инициализации..

    Забудьте о Matplotlib: улучшите визуализацию данных с помощью умопомрачительных функций Seaborn!
    Примечание. Эта запись в блоге предполагает базовое знакомство с Python и концепциями анализа данных. Привет, энтузиасты данных! Добро пожаловать в мой блог, где я расскажу о невероятных..

    ИИ в аэрокосмической отрасли
    Каждый полет – это шаг вперед к великой мечте. Чтобы это происходило в их собственном темпе, необходима команда астронавтов для погони за космосом и команда технического обслуживания..


    Для любых предложений по сайту: [email protected]