『Data Bonanza』

어제, ADP 필기 시험을 보았다. 일시: 2월 13일 토요일 10:00~13:00 장소: 서울 성동공고 1. 시험 시간 - 시험시간은 13:00까지 이나 10:30분부터 조기퇴장이 가능함 - 9:40분까지 입실해야하고, 그때부터 모든 자료는 넣어야 됨 - 컴퓨터용사인펜, 볼펜 필수 지참 2. 시험 분위기 - 성동공고는 서울/경기에 유일한 시험장임 - 약 한 200~300명정도 시험본듯 함 (생각보다 연세드신분도 많아서 신기...) 3. 시험 유형 - 객관식은 가끔 함정문제가 나와서 찍게 만듬 ex.) 비모수 검정 방법론 선택: 윌콕슨의 순위합검정, 만-위트니의 U검정 등 - 전반적인 난이도는 문제집 수준이고, 문제집에서 비슷하게 나온 문제가 많았음 (데이터 에듀 교재 꼭 풀어볼것!!) - 주관식 시험문..

1. 대용량 로그 데이터 수집 가. 로그(log) 로그(log)는 기업에서 발생하는 대표적인 비정형 데이터로, 과거에는 문제 상황 보존을 위해 사용됐고, 최근에는 마케팅/영업 전략 수립을 위한 사용자의 형태 분석 등에 사용된다. 용량이 방대하기 때문에 이를 분석하기 위해서는 고성능과 확장성을 가진 시스템이 필요하다. 로그 데이터 수집 시스템의 예 : 아파치 Flume-NG, 페이스북 Scribe, 아파치 Chukwa 등 ​ 나. 대용량 비정형 데이터 수집 시스템의 특징 초고속 수집 성능과 확장성 데이터 전송 보장 메커니즘 다양한 수집과 저장 플러그인 인터페이스 상속을 통한 애플리케이션 기능 확장 2. 대규모 분산 병렬 처리 (하둡) 하둡(Hadoop)은 대규모 분삭 병렬 처리의 업계 표준인 맵리듀스(Ma..

본 자료는 ADP/ADsP에 교재에서 참고한 글이다. 빅데이터는 시각화와 초대형 데이터 처리를 위한 NoSQL을 사용한다는 특징이 있다. NoSQL은 기존 관계형 데이터베이스 관리 시스템(RDBMS)와 다르게 비관계형(non-realation) DBMS으로 대규모 데이터 처리에 강점이 있음 (예: 하둡)

ADP 실기시험은 R만 된다고 하는 사람이 아직도 있다. 생각보다 모르는 사람들이 많다. 2018년5월에 10회 데이터분석 전문가 실기검정부터 python이 가능하다!! www.dataq.or.kr/www/board/view.do 이전에는 R만 가능했었다. (그래서 나도 시험치기 주저했었다... R은 대학원 초창기.. 2013~2014년에만 줄곧 다룬 후 바로 Python으로 갈아탔기에..) 어쨋든 최근에는 R과 Python이 다 가능하다. 최근공지: 2. 응시환경 - 분석환경 운영체제: Ubuntu(64bit) (VirtualBox로 제공) - 분석언어 및 제공 패키지 ·R(3.6): RStudio 제공 / 2019년 8월 기준 CRAN All Package 제공 (시험장에서 패키지 추가 제공없음) ·..