OBIG

안녕하세요, 여러분 :) 다들 열심히 공부하고 계신가요. 오늘은 실제 기출문제에 나왔던 이상치 기출문제를 함께 풀어보도록 할게요. 2021년 2회 실기 기출문제 풀이 [2021년 2회 실기 작업형 제 1유형 문제 13] 다음은 insurance 데이터 세트이다. Charges 항목에서 이상값의 합을 구하시오. (이상값은 평균에서 1.5 표준편차 이상인 값) 이 문제에서 주의해야할 점은 이상값의 기준을 딱 명시해주었기 때문에 그에 맞게 기준선을 정하고 이전까지는 이상치를 제거한 데이터의 범위를 출력해봤다면, 이 문제는 이상치들의 합을 구한다는거에요. 여기에 주의하시고, dplyr 패키지를 통해서 간단하게 문제를 풀어보겠습니다. 1) 데이터 불러오기 및 확인 -아래의 데이터를 다운로드 받아 워킹 디렉토리로 ..

빅데이터 학습자료/03. 데이터분석_R 2021. 11. 14. 13:00

안녕하세요, 여러분 :-) 지난 시간에 배운 결측치는 모두 잘 이해하셨겠죠? 데이터 분석에 있어서 데이터 전처리는 핵심이고 데이터 전처리에서 결측치와 이상치 처리는 기본 중 기본이므로 열심히 학습하시길 바랄게요. 이번엔 이상치에 대해서 배워보도록 하겠습니다. 1) 이상치(Outlier)란? -이상치는 관측된 데이터의 범위에서 너무 크거나 작은 값을 의미합니다. -이상치 관측 원인은 입력 오류, 데이터 처리 오류, 샘플링 오류 등이 있습니다. 2) 이상치 판별 -이상치를 판별 할 수 있는 방법은 크게 2가지로 정리할 수 있습니다. R 함수 활용 -R의 outliers 패키지를 설치하여 outlier 함수로 이상치를 판별합니다. 사분위수 활용 -제 3사분위수에서 제 1사분위수의 값을 뺀(Q3-Q1)다음 1...

빅데이터 학습자료/03. 데이터분석_R 2021. 11. 13. 13:00

안녕하세요, 여러분 :) 이제 드디어 기출 문제를 함께 풀어보겠습니다. 단, 꼭 앞 2개의 실습을 진행해보시고 넘어오시길 바랍니다. 꼭이요! ! ! 2021년 2회 실기 기출문제 풀이 [2021년 2회 실기 작업형 제 1유형 문제 12] 주어진 데이터의 첫 번째 행부터 순서대로 80%까지의 데이터를 훈련데이터로 추출 후 'total_bedrooms'변수의 결측값(NA)을 'total_bedrooms' 변수의 중앙값으로 대체하고 대체 전의 'total_bedrooms'변수 표준편차 값과 대체 후의 'total_bedrooms'변수 표준편차 값의 차이의 절댓값을 구하시오. 여러분이 이 문제를 풀기 위해서는 3가지를 알고 계셔야 합니다. 1) 데이터 추출 방법 2) 기초 함수 (중앙값, 표준편차, 절댓값) 3..

빅데이터 학습자료/03. 데이터분석_R 2021. 11. 12. 13:00

안녕하세요, 여러분. 지난 시간 다뤄본 결측치 확인과 삭제 방법은 잘 보고 오셨죠? 이번에는 결측치를 대치하는 방법에 대해서 학습하겠습니다. 다음 시간 기출문제를 풀어보기 위해서 반드시 알아두셔야 합니다. 만약 R 기초를 아예 모르시는 분들은 블로그에 온라인 강의가 있으니 듣고 오시면 좋을 것 같습니다. :-) 1) 결측값 처리 방법 - 평균 대치법(Mean Imputation) 평균 대치법이란 결측값을 데이터의 평균, 중위수 등으로 대체하는 방법입니다. 대체하는 방법 중 가장 많이 쓰이는 방법입니다. 두 가지 방식으로 대치하겠습니다. 사용된 데이터는 R 내장 데이터인 airquality입니다. Ozone 변수와 Solar.R 변수에 각각 결측치가 있는 것을 확인할 수 있습니다. ifelse 조건문을 활..

빅데이터 학습자료/03. 데이터분석_R 2021. 11. 11. 13:00

데이터 전처리에서 결측치를 확인하고 처리하는 과정은 기본 중 기본입니다. 빅데이터분석기사 실기 시험에 실제 결측치 처리(단순 대치법)문제가 나왔습니다. 공부해봅시다 ! ! :-) 1) 결측치란? -결측치는 관측되지 않은 값으로서 NA(Not Available)로 표시됩니다. -데이터에 결측치가 포함되어 있으면 산술연산과 같은 데이터 분석을 제대로 할 수 없습니다. 2) 결측치 데이터 처리 순서 (***) -결측치 확인 -결측치 처리 방법 결정 (삭제 or 대치) -결측치 삭제 -결측치 대체 결측치 처리 순서 잘 보셨나요? 이 순서대로 R로 학습하도록 하겠습니다. -필요한 데이터 세트 : airquality(내장 데이터) , 생성 데이터 -필요한 패키지 : dplyr 1. 결측치 확인 is.na(x) 데이..

빅데이터 학습자료/03. 데이터분석_R 2021. 11. 10. 13:00

안녕하세요, 여러분 ◡̈ 요즘 가장 핫한 기사 자격증인 빅데이터분석기사 잘 알고 계신가요 〰️ ? 올해 첫 시행된 시험이라 참고 자료도 많이 없고 특히 비전공자분들은 준비하시기 막막하실 것 같아서 제가 조금 도움을 드리고자 문제풀이를 진행하려고 합니다. 실기부터 시작하려고해요. R기본 강의부터 심화, 기출문제 풀이까지 차근차근 자료를 올리고 있습니다. 필요하신 분들은 아래 저의 빅데이터 블로그에서 참고하시면 될 것 같아요. https://everydatamaster.tistory.com/ BIGDATA) EVERYONE, EVERYTIME, EVERYWHERE 빅데이터 분석, 누구나 시작할 수 있습니다. 함께 열정적으로 세상을 읽어 나갈 수 있는 사람들에게는 언제나 열려 있는 빅데이터 학습 공간입니다. ..

빅데이터 학습자료/03. 데이터분석_R 2021. 11. 7. 13:00

안녕하세요, 김민지입니다. :-) 드디어 저의 책이 출판되었습니다. 도서명: 빅데이터분석,R프로그래밍으로시작하기 출판사: 성안당 구매처: 온오프라인 서점 타겟독자: 빅데이터분석을 시작하고 싶은 입문자, R프로그램을 다뤄본적이 없는 입문자 무료 강의/학습자료 사이트: everydatamaster.tistory.com/m BIGDATA) EVERYONE, EVERYTIME, EVERYWHERE 빅데이터 분석, 누구나 시작할 수 있습니다. 함께 열정적으로 세상을 읽어 나갈 수 있는 사람들에게는 언제나 열려 있는 빅데이터 학습 공간입니다. everydatamaster.tistory.com 학습자료에는 3가지가 있습니다. 저자가 진행하는 상세한 무료 강의 무료 코드/활용 데이터 강의 PPT 강의는 2월달 첫번째부..

빅데이터 학습자료/03. 데이터분석_R 2021. 2. 5. 16:17

안녕하세요. 빅데이터리더 김민지입니다. :-) 지루했던 장마가 만연했던 8월도 마무리 되어 가고 있습니다. 어느새 빅데이터분석기사 시험이 5개월 정도 남았습니다. 1회가 12.19일(토)이므로 준비를 하시는 분들은 이제 정말 슬슬 노트랑 펜잡고, 저와 함께 공부해나갑시다. 접수기간이 11.23일부터 27일이므로 접수기간도 달력에 표시해놓고 놓치시는 일 없으시길 바랍니다. *이전 내용입니다. 2020/06/12 - [BIGDATA/누구나 할 수 있는 R 데이터 분석] - 빅데이터분석기사 시험 준비, 시험 일정, 빅데이터 분석기사 책 추천, 독학준비 빅데이터분석기사 시험 준비, 시험 일정, 빅데이터 분석기사 책 추천, 독학준비 안녕하세요 ٩(๑❛ᴗ❛๑)۶♡ 2020년 1회 빅데이터분석기사가 드디어 시험 일정..

빅데이터 학습자료/03. 데이터분석_R 2020. 8. 22. 01:31