본문 바로가기

IT/빅데이터분석기사(빅분기)17

8회 빅분기 필기시험 대비 위한 MS Copilot 3가지 유형 연습 python 코드 문의결과 (빅데이터분석기사) 8회 빅분기 필기 시험 대비하여 3가지 유형에 대해 파악하였습니다. 그 과정중에 필기시험 면제기간 안내도 받았습니다. 이제는 다양한 사례를 대비해 python 코드 연습이 필요합니다. 이 번 포스팅은 MS Copilot 에게 3가지 유형에 대한 코드를 문의한 결과입니다. 제1유형 : 전처리 질문 1. 데이터 타입(object, int, float, bool 등) 2. 기초통계량(평균,중앙값,사분위수,IQR, 표준편차 등) 3. 데이터 인덱싱, 필터링, 정렬, 변경 등 4. 중복값, 결측치, 이상치 처리(제거 o 대체) 5. 데이터 Scaling(데이터 표준화(z), 데이터정규화(min-max)) 6. 데이터 합치기 7. 날짜/시간 데이터, index 다루기. 등등 관련 사례를 빅분기 실기 제1유형에 맞춰.. 2024. 4. 15.
8회 빅분기 필기시험 면제기간 (2년) 및 실기시험 유효기간 (빅데이터분석 기사) 빅분기 실기를 준비하는 과정에 필기시험 유효 기간 카톡 메세지를 받았습니다. 필자는 5회 합격하여 22년 10월 21일 공지를 받았습니다. 즉 11월 1일까지 접수기간인 9회 실기는 면제가 아닙니다. 이제 면제기간을 살리기 위해서라도 열심히 8회 빅분기 실기 시험 준비를 해야 겠습니다. 필기면제 기간 안내 및 유효기간 아래 메세지 마지막 문구 24년 10월 21일까지 면제 실기시험 접수기간이 필기시험 면제가간 내에 하루라도 포함 24년 빅분기 일정 및 실기시험 일정 8회 실기 접수 : 24년 5월 20일 ~ 24일 (면제 가능) 9회 실기 접수 : 24년 10월 28일 ~ 11월 1일 (면제 안됨) 2024. 4. 14.
8회 빅분기 실기 시험 준비, 작업 제3유형, 구글 Gemini 및 MS Copliot (Chat GPT) 분석 (빅데이터분석 기사) 빅분기 제3유형은 체험환경에서 통계분석을 예시로 하고 있습니다. 즉 추론통계 또는 기술통계검정을 문의합니다. 30점 (30%) 배점되며 문제가 2~3문제 이므로 2~3가지 경우의 코드 구현능력이 필요합니다. 필자는 통계검정이 취약한 분야 이므로 집중적으로 학습해야 할 분야입니다. 결론 구글 Gemini 가 답안 과정 더 신뢰되지만 2번의 보완질문 필요했음 MS Copilot 답변 코드 간단하나 답 소수점 형식 불일치 및 정확성 낮음 카이제곱 통계량 : 260.71702016732104 Parch 변수 계수 값 : -0.1858966930832436 오즈비 : -0.1858966930832436 구글 Gemini 답변 답 소수점 형식 일치 및 보완질문 필요 카이제곱 통계량: 260.717 Parch 변수의.. 2024. 4. 13.
구글 Gemini 및 MS Copliot (Chat GPT) 활용 8회 빅데이터분석 기사(빅분기) 실기 도전 작업 제2유형 제2유형 작업은 머신러닝 학습을 통해 평가지표 성능을 비교하고 예측값을 산출하는 문제입니다. 빅데이터분석 실기 체험은 ROC-AUC 평가지표 사용하여 성능점검을 하도록 질문하고 있습니다. 학습데이터에는 성별이 없지만 평가데이터는 성별 데이터가 업습니다. 학습데이터만으로 학습한 모델로 평가데이터에 없는 성별 데이터를 예측하는 문제입니다. 결론 결과는 구글 Gemini 및 MS Copliot 별로 ROC-AUC 값 약간 상이 MS Copliot ROC-AUC : 0.6506 구글 Gemini ROC-AUC : 0.6414 ROC-AUC 가 높고 코드 상대적 용이한 MS Copiolt 코드 채택 MS Copliot 코드 : 상대적 용이 구글 Gemini 코드 : 상대적 복잡 import pandas as pd.. 2024. 4. 10.
구글 Gemini 및 MS Copliot (Chat GPT) 활용 빅데이터분석 기사(빅분기) 실기 도전 작업 제1유형 2년전 필기 합격후 실기 시험을 응시하지 않은 빅데이터 분석 기사(빅분기)에 도전합니다. 그 사이 Chat GPT 가 출시되면서 학습방법의 많은 변화가 생겼습니다. 8회 빅데이터분석기사 실기에 도전하면서 도서를 구매했지만 Coploit 을 할용하여 학습을 병행하고자 합니다. 이번 포스팅은 실기시험 체험 제1유형 부분입니다. 결론 결과는 구글 Gemini 및 MS Copliot 모두 동일한 값을 출력하는 코드 생성 2개 생성형 AI 에서 fit() 과 transform() 을 함축한 fit_transform() 사용 2개 생성형 AI 결과와 기존 알고 있는 코드로 요약 내용 (아래-시험암기용) from sklearn.preprocessing import MinMaxScaler import pandas as.. 2024. 4. 10.
23년 빅데이터분석기사(빅분기) 일정 및 한국데이터검증원(데이터자격시험) 홈페이지 개편 22년에 발표된 올해 23년 빅데이터분석기사(빅분기) 시험일정은 필기/실기 2회 실시합니다. 여전히 빅분기와 차이점이 애매한 ADP와 ADsP는 연 4회 실시합니다. 23년 1월 데이터자격검정 홈페이지가 개편이 되면서 달력에 시험일정이 표현되어 수험일정 수립에 편의성을 제공합니다. 23년 빅데이터분석기사 일정 : 연 2회 실시 6회 필기 : 3월 접수, 4월 시험, 5월 결과/서류제출 7회 필기 : 8월 접수, 9월 시험, 10월 결과/서류제출 6회 실기 : 5월 접수, 6월 시험, 7월 결과 7회 실기 : 10월 접수, 11월 시험, 12월 결과 홈페이지 개편 : 일정 수립 편의성 제공 개편 전에는 응시과목을 deck 형으로 나열하였다면 개편되면서 달력 형태로 제공하여 일정수립 편의성을 제공합니다. 그.. 2023. 1. 25.
필기 시험 합격 : ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 1.5개월차 빅데이터분석기사 필기를 다행히 합격했습니다. 기쁨도 잠시 집안일이 해결이 안되니 이렇게 노력을 해봐야 무슨 소용인가 싶기도 하지만 현상유지 또는 미래발전을 위한 노력은 조금씩 진행합니다. 특이하게 4대보험 가입확인서도 필요하여 발급 방법도 알아 봅니다. 합격결과 좀 특이하게 필기 시험이 합격 점수를 넘더라도 증빙 서류가 필요합니다. 제출문서 필자인 저는 직장인 이기에 경력관려 제출서류는 경력증명서와 4대보험 가입확인서 1통씩 입니다. 경력증명서는 회사에서 신청하면 되는데 4대보험 가입확인서는 "4대사회보험 정보연계센터" 사이트에서 발급가능합니다. 4대보험 가입확인서 발급 (4대사회보험 정보연계센터) 별도 로그인 없이 바로 무료로 발급 가능합니다. 향후 일정 업데이트 재직증명성와 4대보험 가입확인서를 10.. 2022. 10. 17.
필기 시험후기 : ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 1개월차 1개월 단기간만에 준비했던 빅분기 자격증 응시 후기입니다. 변명이지만 전세 세입자 문제, 원유 인버스 투자 등 신경 쓸게 많았던 기간에 자격증까지 준비하려니 부족했었습니다. 어찌 되었건 가을을 맞이한 화창한 10월 첫째날 ADsP 취득자의 빅데이터 분석 기사 5회 차 응시 후기입니다. 응시장소 특별시, 광역시에만 가능합니다. 저는 송파구 문현중학교에서 시험을 봤는데 집에서 대중교통(1650번 광역버스) 접근이 용이했고 주차도 여유로웠습니다. 시험시간 오전 10시 부터 2시간 주어지지만 1시간 정도 소요되었습니다. 잘 모르는 문제는 빠르게 찍고 넘어가서 시간을 단축했습니다. 시험 내용 1과목 빅데이터 기획은 쉬웠으나, 2과목 통계분석은 역시 쉽지 않았습니다. 3,4 과목은 준비 여부에 따라 난이도는 달랐을.. 2022. 10. 1.
이기적 필기 CBT 무료 온라인 모의고사 : ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 9일차 시험공부 방법 중에 하나가 시험장에서 문제를 풀어가면서 공부한다는 우스개 소리가 있는데 그만큼 많은 문제 풀이도 중요합니다. 이기적 빅데이터 분석 필기 출판사인 영진닷컴에서는 문제 풀면서 공부할 수 있는 무료 온라인 모의고사를 제공합니다. 접속할 때마다 새로운 문제를 출제됩니다. 어쩌다 보니 책과 출판사 선전으로 보이는데 필자는 책을 보통 1권만 구매해서 집중적으로 풀기 때문에 출판사를 칭찬하는 것은 아니고 이런 서비스도 제공한다는 소개로 봐주십시오. 영진닷컴 무료 온라인 모의고사 접속 방법 https://license.youngjin.com/ 접속 후 로그인 없이, CBT 서비스(온라인 모의고사) -> 빅데이터 분석 기사 필기 -> 시작하기 순으로 클릭하면서 모의고사 화면으로 접속할 수 있습니다. 1개.. 2022. 9. 7.
이기적 요약본 핵심 맥락 도식화 : ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 7일차 23년 이기적 빅데이터 분석기사 필기 요약본 중에 제일 중요 (★★★) 하다고 표기된 4개 챕터 간의 맥락을 연결하였습니다. 아무리 암기를 통해 필기시험을 응시한다고 하지만 최소한의 맥락 이해는 필요해 정리하였습니다. 빅데이터 기술 및 제도와 분석 방안 수립은 비슷한 내용인데 특히 분석과 평가/전개 부분에 대해 별도 챕터를 만들 정도로 깊이 있게 다루고 있습니다. 빅데이터 분석 로직트리는 데이터 표본 검정을 할 것이냐 데이터 전수 분석을 할 것이냐에 따라 통계분석과 머신러닝으로 나뉩니다. 통계분석은 2장에서 정리해야 하는데 중요도가 모두 별2개 이하였고 요약에서 조차 너무 복잡한 수식만 나열한 것이 아쉽지만 최소한 1종 오류 및 2종 오류가 어떤 뜻인지 3.2.1 분석기법에서 요약하였습니다. 머신러닝은 .. 2022. 9. 5.
ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 6일차 : 꼭 외워야할 9가지 2x2매트릭스 어차피 시험을 봐야 하므로 반드시 외워야 하는 것들이 있습니다. 1+1=2 이듯이 이해하지 말고 그냥 외워서 풀어야 할 답들입니다. 총 9가지이며 연관분석 측정지표만 제외하면 2x2매트릭스로 이루어져 있습니다. ADsP 자료지만 빅데이터 분석기사 기준으로 재정리 하였습니다. 1. 기획 암묵지와 형식지의 지식 상호 관계 분석 대상과 인지 상황에 따른 분석 방향성 결정 방법 난이도와 시급성에 따른 과제 우선순위 선정 방법 분석 조직 발전 단계 2. 탐색 통계분석 모델 선정 구분법 추론 통계분석 1,2종 오류와 적용방법 3. 모델링 잡음 영향 및 가중치 활용 머신러닝 4. 결과 해석 오분류표에 의한 성능 측정식 및 AUC 연관분석 측정지표 2022. 9. 4.
ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 5일차 : 빅분기는 모델 평가 방법을 더 심도 있게 다룸 모의고사도 풀어보고 책도 구입하고 동영상 강의도 1번 들어보고 대략적인 수준은 파악된 빅분기입니다. ADsP 와 달리 필기 시험이 있어서 그런지 R 프로그램 문법이 없는 대신 계산문제가 눈에 띕니다. 이제 본격적인 공략을 위해 과거 자료를 이용해서 복기부터 시작합니다. ADsP 커리큘럼은 데이터 이해 -> 데이터 분석 기획 -> 통계학 -> 정형데이터 분석 으로 총 4개로 구성됩니다. 빅데이터 분석기사는 빅데이터 분석 기획 -> 빅데이터 탐색 -> 빅데이터 모델링 -> 빅데이터 결과 해석으로 마찮가지로 4가지로 구분됩니다. 공통점은 데이터 분석의 2개 축인 통계분석과 머신러닝을 모두 다루고 있습니다. 다른점은 ADsP 는 통계분석과 머신러닝을 명확히 구분하고 각 분석방법에 따라 모델 평가를 포함하였는데,.. 2022. 9. 3.
ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 4일차 : 출판사 요약본 PDF,모의고사 유튜브 해설 검토 결과 빅분기 기출복원 모의고사를 풀어보고 해설 강의도 들어보고 요약본 PDF와 구매 도서를 속독해 보니 빅분기 필기는 ADsP와 95%는 유사합니다. 기각역 5%에 있는 것은 R문법이 없고 통계분석이 ADsP 보다 강화되었다 정도입니다. 이렇게 유사한 자격증이면 필기라도 면제해줘야 하는 거 아닌가 싶습니다. 구매한 도서의 출판에서 운영하는 네이버 카페에서 구매이벤트 참여후 다음날 오후 4시경에 27페이지 요약본 PDF 를 메일로 받았습니다. 쭉 읽어 보아 하니 통계분석을 굉장히 세부적으로 다룹니다. 저한테는 큰일이네요. 실무에서도 약한 부분이 통계분석입니다. 나머지는 ADsP와 큰 차이를 모르겠습니다. 이제 4일차이니 다 파악된것은 아니지만 대략적으로 이런 차이점이 보입니다. 모의고사 무료 해설 유튜브 강의는.. 2022. 9. 2.
ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 3일차 : 구매도서 소개 23 이기적인 빅데이터 분석기사 필기 책을 구매하였습니다. 순위나 인기도보다는 특이한 책 구성에 4가지에 대해 소개합니다. 자가 수준별 학습플랜 선별 QR, 기출복원 모의고사 4회분 제공, 모의고사별 유튜브 해설 강의 링크 QR 그리고 구매 이벤트로 요약 pdf 신청 등을 알아보겠습니다. 0) 구매 도서 배달 : 당연하게도 1일 만에 받았습니다. 2) 학습플래너 선별 위한 자기 수준별 진단 QR 책 목차를 찾다가 특이한 QR을 봤는데 자기 수준별 학습플래너 선별 QR로 접속하게 됩니다. 총 8문제였는데 깊이 있는 문제는 아니고 데이터 분석을 어느 정도 알고 있는지 질의를 합니다. 큰 부담은 없습니다. 진단 결과에 따라 플랜 유형을 확인할 수 있습니다. 시간이 부족하면 코스를 선택하면 되겠지만 그렇다고 짧.. 2022. 9. 1.
ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 2일차 : 수험도서(책) 획득 및 구매 동료로부터 받은 빅분기 수험서에서 제공하는 모의고사 풀이로 저의 현재 수준을 파악하고 모의고사를 최대한 많이 제공하는 수험서를 구매하였습니다. 1개월 시간 동안 복습한 답시고 1장부터 천천히 보는 방법보다는 오답노트를 작성해 가면서 기억을 상기시키는 방법으로 진행할 생각입니다. 모의고사를 4회 제공하는 2023년 빅분기 서적을 구매하였습니다. 시간도 없고 짧은 시간 내에 시험 통과가 목적입니다. 처음부터 공부하는 것은 아니고 기억을 상기시키는 방법으로 진행하는데 문제 풀이 후 오답노트 정리로 진행할 생각입니다. 1일만에 배달된다고 하니 기다려 봅니다. 4년전인 2018년 ADsP 대비하기 위해서 핸드폰에 일일이 필기하면서 정리했던 내용과 거의 유사한데 문제는 지금 기억이 나지 않는다는 게 함정입니다. 나.. 2022. 8. 31.
ADsP 취득자의 5회 빅데이터분석 기사(빅분기) 자격증 도전 1일차 : 시험접수 및 과거 취득 ADsP 조회불가 오류 조치 2018년 이후 4년 만에 데이터 분석 관련 자격증에 재도전합니다. 당시에는 빅데이터 분석 기사 자격증이 없었기 때문에 데이터 분석 준전문가(ADsP)를 취득하였습니다. 일명 빅분기와 ADsP의 자격증의 차이는 국가 공인이냐 국가 인증이냐 차이로 나뉘지만 필기시험의 포함 여부로 구분됩니다. 목적 수익의 상당 부분을 차지하는 직업 특성상 데이터 관련된 업무를 많이 합니다. 지능화 시대로 전환되면서 데이터 분석에 대한 수요와 업무량이 증가하고 있는데 최소한의 의사소통을 위해 취득했고 이번에는 국가 인증 자격증을 취득하고자 합니다. 시험 접수 및 아이디(ID) 재생성 저는 분명 4년 전에 ADsP를 취득하면서 ID를 생성했던 것 같은데 아이디 찾기로도 로그인이 안되어서 예전과 동일한 ID를 생성했습니다. 이 .. 2022. 8. 30.
빅데이터분석 기사(빅분기) 자격증 개설 및 ADP,ADsP 우대는? 4년전 인스타그램에서 운영히 알게된 ADP,ADsP 서적 광고를 보고 데이터분석(준)전문가 자격증을 취득하였습니다. ADP,ADsP 자격증은 국가공인 민간자격증이라 산업관리공단에서 주관하는 빅데이터분석 기사 자격증 개설을 기다리고 있었죠. 기다리는 중에, 취득하면서 알게된 데이터분석 지식과 2년간의 진단경험 및 java 코딩 역량을 더해 작년 11월에 도서출판을 위한 원고작업을 열심히 하고 있었습니다. 그런데 책 집필에 열중하던 사이에 빅데이터분석 기사 자격증이 개설 되었습니다. 왜 취득해야 하는가? 민간이 아닌 국가기술 자격증 아주 간단히 요약한다면, 같은 한국데이터산업진흥원 (kdata) 에서 시험을 주관하지만 빅데이터분석 기사는 국가기술 자격이고 ADP,ADsP 는 국가인증 이냐의 차이네요. 그리고.. 2021. 4. 9.