Публикации по теме 'pearson-correlation'
Выбор функций в предварительной обработке данных
Уровень статьи: Расширенный
Мои клиенты часто спрашивают меня об особенностях тех или иных методов предварительной обработки данных, зачем они нужны и когда их использовать. Я расскажу о нескольких распространенных (и не очень) методах предварительной обработки в серии статей на эту тему.
В этой серии о предварительной обработке:
Стандартизация данных — Краткое объяснение — для начинающих Нормализация данных — Краткое объяснение — для начинающих Горячее кодирование —..
Корреляция против ковариации: все намного проще, чем кажется
Что такое корреляция? Как мы можем вычислить корреляцию между непрерывными переменными? А в чем разница с ковариацией?
Машинное обучение — замечательная область исследований. Изучение машинного обучения означает использование наиболее интересных концепций из самых разных областей (математика, финансы, биология, информатика и т. д.) с целью создания точных и надежных прогностических моделей. За время моей работы преподавателем машинного обучения и науки о данных в Datamasters..
Корреляция - статистический анализ!
Самый важный шаг в компьютерном зрении или машинном обучении - хорошо понимать данные и использовать эти знания для выбора наилучшего дизайна.
Открытый вопрос ..
Как хорошо понимать данные?
Ответ заключается в применении статистических методов ...
Следовательно, красная тема этого урока - понять самый важный статистический метод, то есть корреляцию.
Слово корреляция используется в повседневной жизни для обозначения некоторой формы ассоциации. Это статистический метод, который..
Вопросы по теме 'pearson-correlation'
карта уменьшения - корреляция Пирсона
Как реализовать корреляцию Пирсона с помощью уменьшения карты?
Я думал о сопоставлении каждой пары (x_i, y_i), но я не уверен в части сокращения ..
539 просмотров
schedule
20.12.2022
Вычислите корреляцию Пирсона в наборе данных Spark
У меня есть JavaRDD, который содержит массивы двойников. Теперь я хочу рассчитать коэффициент Пирсона между каждым массивом. Но если я конвертирую rdd в векторы и применяю статистику.corr(), функция вычисляет для столбцов, но я хочу, чтобы она...
739 просмотров
schedule
12.12.2022
PROC CORR Пирсона для категориальной переменной
Я пытаюсь найти коэффициент корреляции Пирсона между весом и ростом для вида Pike в sashelp.fish , но у меня возникают проблемы с возвратом результатов специально для Пайка. Вот мой код:
proc corr data=sashelp.fish pearson;
var height width;...
1429 просмотров
schedule
26.07.2022
Корреляция Пирсона и нан значения
У меня есть два CSV_file с сотнями столбцов, и я хочу рассчитать коэффициент корреляции Пирсона и значение p для каждого столбца из двух CSV_files. Проблема в том, что когда в одном столбце отсутствуют данные «NaN», возникает ошибка. Когда ".dropna"...
13692 просмотров
schedule
05.04.2023
Как оптимизировать коэффициент корреляции Пирсона, регулируя веса?
Я хотел бы настроить вес w , чтобы оптимизировать r-квадрат коэффициента корреляции Пирсона.
import numpy as np
from scipy import stats
x1_raw=np.array([277, 115, 196])
x2_raw=np.array([263, 118, 191])
x3_raw=np.array([270, 114, 191])...
743 просмотров
schedule
25.10.2022
Регрессионный анализ для показателя Net Promoter Score (NPS)
Проблема: я пытаюсь рассчитать с помощью Excel регрессионный анализ для оценки NPS, но результат, я уверен, неверен. Не уверен, что использую правильный Valirable.
Справочная информация: Net Promoter Score (NPS) — это индекс в диапазоне от -100...
697 просмотров
schedule
30.06.2023
Ошибка при построении корреляционного теста с использованием пакета ggpubr в R
Это образец набора данных, над которым я работаю, где я запускаю корреляционный тест Пирсона между переменными step и z :
> head(datacorr)
Date & Time [Local] Latitude Longitude step x y z
1 2018-06-18 15:32:00...
2607 просмотров
schedule
24.02.2023
Изменить порядок меток осей графика корреляционной матрицы
Я использую ggcorrplot для построения корреляционной матрицы, но вывод меняет порядок столбцов таким образом, который мне не нужен. Как изменить порядок столбцов?
Для целей этого примера я буду использовать набор данных mtcars, найденный в R....
1259 просмотров
schedule
03.06.2023
Берт настроен на семантическое сходство
Я хотел бы применить точную настройку Берта для вычисления семантического сходства между предложениями. Я ищу на многих сайтах, но я почти не нашел об этом ниже по течению.
Я только что нашел тест STS . Интересно, могу ли я использовать набор...
2590 просмотров
schedule
23.06.2023
Вызов func pearsonr и Got TypeError: для ufunc add не найден цикл, соответствующий указанной сигнатуре и кастингу.
Я запускаю приведенный ниже код и получаю неожиданную ошибку «Ошибка типа: для ufunc add не найден цикл, соответствующий указанной подписи и приведению», где X и Y оба являются фреймами данных
from scipy.stats import pearsonr
for i in...
650 просмотров
schedule
11.02.2023
Цикл корреляции (Пирсона) через фрейм данных
У меня есть кадр данных со 159 наблюдениями и 27 переменными, и я хочу сопоставить все 159 наблюдений из столбца 4 (переменная 4) с каждым из следующих столбцов (переменных), то есть сопоставить столбец 4 с 5, затем столбец 4 с 6 и так далее... Я...
361 просмотров
schedule
01.04.2023
Почему я получаю низкий балл корреляции и взаимной информации?
Я генерирую случайные выборки для задачи бинарной классификации:
X, y = make_classification(n_features=40, n_redundant=4, n_informative=36,n_clusters_per_class=2, n_samples=50000)
Я хочу проверить корреляцию между функциями и целью (для...
104 просмотров
schedule
06.11.2022
Корреляция Пирсона между соседними столбцами в DataFrame
скажем, у меня есть фрейм данных из 10 столбцов.
теперь я хочу быстро рассчитать отношение между каждым столбцом и следующим за ним столбцом.
поэтому pearson r столбцов 1 и 2, столбцов 2 и 3, столбцов 3 и 4 и так далее.
есть ли быстрый способ...
85 просмотров
schedule
31.05.2022
Вычисление средних парных коэффициентов корреляции Пирсона из кадра данных в R
Предположим, у меня есть следующие векторы:
IDs_Complex_1 <- c("orangutan", "panda", "sloth", "mountain_gorilla", "dolphin", "snake")
IDs_Complex_2 <- c("bat", "penguin", "goat", "elephant", "tiger")
Я хотел бы вычислить попарные...
191 просмотров
schedule
23.03.2022
Настраиваемый цвет графика корреляции
Есть ли способ настроить график корреляции в R, например, на следующем графике
Я хочу иметь другое значение цвета, например, если значение находится в диапазоне от 0,5 до 0,7, тогда сделайте его зеленым и ниже, чтобы оно было синим, а выше 0,7...
209 просмотров
schedule
06.08.2022
pandas corr return Nan
Я пытаюсь рассчитать корреляцию между рейтингами фильмов, поэтому я использовал функцию pandas corr :
Как вы видите, корр между фильмами 4 и 3 - это Нэн, но я не понимаю, почему?
вот рейтинг фильма 4:
а вот рейтинг фильма 3:...
23 просмотров
schedule
31.03.2024
коэффициент корреляции Пирсона для производительности модели
Подскажите, пожалуйста, как использовать коэффициент корреляции Пирсона для оценки производительности модели? Я хочу предсказать pm2.5. последние переменные - y_pred и y_actual. Я не нашел ни одного учебника.
model.fit(x=X_train_scaled,...
121 просмотров
schedule
12.08.2022
