'데이터' 태그의 글 목록

[R] - 통계데이터분석 - 공분산분석 ANCOVA(analysis of covariance) , 반복측정 분산분석(repeated measures ANOVA)

공분산분석(analysis of covariance , ANCOVA) 분산분석에 공변량(covariate)을 추가하여 분산분석모델을 확장 분산분석은 집단 간의 차이를 검정합니다. 예를 들어 일원분산분석을 이용해서 세 종류의 비만치료제간의 효과가 차이가 있는지 검정할 수 있습니다. 그런데 비만은 스트레스와 밀접한 관련이 있다고 알려져있습니다. 실험에 참가한 참여자들은 서로 다른 스트레스 수준을 가지고 있을 수 있습니다. 따라서 일원분산분석을 통해서 비만치료제간에 차이가 있다는 결론을 내렸다면 그 이유는 치료제때문이 아니라 참여자의 스트레스 수준일 수 있습니다. 참여자의 스트레스 수준을 측정해서 그 데이터를 가지고 있다면 참여자의 스트레스 수준을 통제해서 치료제의 순수한 영향력을 측정할 수 있습니다. 스트레..

format_list_bulleted 카테고리 없음
· 2023. 8. 4.

[R] - 통계데이터분석 - 일원분산분석(one-way ANOVA) , 분산분석 가정

일원분산분석(one-way ANOVA) 집단을 구분하는 독립변수가 하나일 때 모집단 간 평균의 동일성을 검정하는 방법 귀무가설 : 집단 간 평균은 모두 동일하다. 대립가설 : 집단 간 평균은 모두 동일하지 않다. 어느 한 집단이라도 다른 집단과 통계적으로 유의한 차이를 보인다면 귀무가설은 기각됨 R programming InsectSprays 데이터를 이용해서 실습을 진행합니다. 아래의 코드를 통해 주어진 데이터셋에서 살충제의 종류별로 여러가지 함수를 적용해 볼 수 있습니다. 전체 카운트 횟수, 평균, 표준편차를 가져옵니다. tapply(InsectSprays$count, InsectSprays$spray, length) tapply(InsectSprays$count, InsectSprays$spray,..

format_list_bulleted Data science/R programming & 통계
· 2023. 8. 1.

[R] - 데이터의 표본(Sample)과 모집단(Population)의 정의 + 신뢰도 분석 , 크론바흐 알파계수(Cronbach's coefficient) 내적 일관성

통계 데이터 분석 다시 시작 !! R을 사용해서 통계에 집중한 데이터 분석 연습을 다시 해볼까 합니다 :) 표본(Sample) 및 모집단(Population) 표본 ( Sample ) 데이터 수집에 포함된 참여자의 집단을 의미한다. 모집단으로부터 추출된 관측값이나 측정값의 집합. 표본 데이터의 특성을 그대로 기술하는 기술 통계 ( descriptive statistics)의 대상 모집단 ( Population ) 우리가 궁극적으로 결론을 도출하고자하는 대상이 되는 집단입니다. 관심의 대상이 되는 모든 개체의 관측값이나 측정값의 집합. 표본 데이터의 특성으로부터 수학적 확률 이론을 토대로 그 데이터가 속해있을 것으로 예상되는 전체 모집단의 특성을 추론하는 추론 통계 ( inferential statisti..

format_list_bulleted Data science/R programming & 통계
· 2023. 7. 17.

[DL Basic] - Batch Size 배치 사이즈 정리하기

Batch size Batch란 학습을 할 때 모델에 한 번에 들어가게 되는 데이터 집합을 의미한다고 볼 수 있습니다. 학습할 때 준비한 Train 데이터 전체를 모델에 입력으로 넣을 수 없기 때문에 나눈 것을 Batch라고 생각하면 됩니다. Batch Normalization Batch normalizatiom 은 입력값 x를 평균 0, 분산 1로 표준화하여 활성화 함수로 전달하고 활성화 함수 출력값을 분포를 고르게 합니다. x를 표준화 하는 과정에서 batch size 단위로 평균과 분산값을 계산하는데요. 어떤 배치 사이즈를 선택하느냐에 따라서 평균과 분산값이 달라지므로 성능에 영향을 미치게 됩니다. Batch-Norm 이란 무엇일까요? Gaussian 범위로 activation을 유지시키는 하나의 ..

format_list_bulleted Data science/Pytorch Basic
· 2023. 2. 27.

Kaggle - 호텔 예약 데이터 분석 및 모델링 2 ( Hotel Reservation )

https://minyoungxi.tistory.com/39 Kaggle - 호텔 예약 데이터 분석 및 모델링 1 ( Hotel Reservation ) https://www.kaggle.com/datasets/ahsan81/hotel-reservations-classification-dataset Hotel Reservations Dataset Can you predict if customer is going to cancel the reservation ? www.kaggle.com Hotel Reservations 온라인 예약 플랫폼을 통해서 예약 minyoungxi.tistory.com 지난 포스팅에 이어서 Hotel Resevation 데이터 세트로 남은 시각화를 해보고 머신러닝 모델 여러가지를..

format_list_bulleted 카테고리 없음
· 2023. 2. 8.

[Data Visualization] 시각화 연습 - Netflix Data Visualization 2

오늘은 위의 그래프를 만들어 볼 것입니다. 흠 우선 이번에도 matplotlib 의 subplots를 사용해보면 좋겠네요. 상위 3개의 국가 그래프에는 빨간색을 칠해야하고 각 그래프의 위쪽에는 해당 국가의 컨텐츠 수를 써야합니다. 그리고 500개 단위로 라인을 그어줘야 하고 오른쪽에는 Insight 텍스트까지 넣어보면 되겠네요. 하나하나 코드를 다 뜯어서 어떤 식으로 전개되는지 해봅시다 ! 불필요한 데이터들을 계속해서 정리해주는 작업을 합니다 . 동시에 필요한 컬럼들을 생성합니다. 'counts' 값이 많은 순서대로 내림차순 저번 시간에 해봤던 반복문을 통한 주석달기. 정말 유용하게 쓸 수 있음 ! # Remove border from plot for s in ['top', 'left', 'right']..

format_list_bulleted Data science/Machine Learning basic
· 2023. 1. 25.