『Data Bonanza』

IT업계에서 주로 쓰이는 용어로 시스템에서 발생하는 복갑한 문제들을 종합적으로 진단해 처리한다는 뜻이다. 시스템이나 장치등에서 발생한 장애를 각종 수법을 사용하여 그 발생 원인을 찾아내는 것을 의미한다. 흔히, "트러블 슈팅 한다." 라 하면, 시스템을 점검중이다라고 이해하면 된다.

어제, ADP 필기 시험을 보았다. 일시: 2월 13일 토요일 10:00~13:00 장소: 서울 성동공고 1. 시험 시간 - 시험시간은 13:00까지 이나 10:30분부터 조기퇴장이 가능함 - 9:40분까지 입실해야하고, 그때부터 모든 자료는 넣어야 됨 - 컴퓨터용사인펜, 볼펜 필수 지참 2. 시험 분위기 - 성동공고는 서울/경기에 유일한 시험장임 - 약 한 200~300명정도 시험본듯 함 (생각보다 연세드신분도 많아서 신기...) 3. 시험 유형 - 객관식은 가끔 함정문제가 나와서 찍게 만듬 ex.) 비모수 검정 방법론 선택: 윌콕슨의 순위합검정, 만-위트니의 U검정 등 - 전반적인 난이도는 문제집 수준이고, 문제집에서 비슷하게 나온 문제가 많았음 (데이터 에듀 교재 꼭 풀어볼것!!) - 주관식 시험문..

데이터 자격검정(빅데이터분석기사, 데이터아키텍처, SQL, 데이터분석)에 대한 이의신청 제도가 향후 아래와 같이 재검토 제도로 변경됩니다. https://www.dataq.or.kr/www/board/view.do?bbsKey=eyJiYnNhdHRyU2VxIjoxLCJiYnNTZXEiOjUwNzk0OX0=&boardKind=notice 데이터자격시험 www.dataq.or.kr 큰 특이사항은 우선 서술형/실기시험 외 모든 문항에 대해 재검토를 받고, 온라인으로만 손쉽게 신청이 가능하다!!

흔히 인공지능 = 딥러닝 인것처럼 착각하는 사람들이 많다. 나는 아직도 이분야에 비전문가들이 와서 얘기하는 것이 맘에 안든다.. 1. 인공지능 (Artificial Intelligence: AI) 인간의 학습 능력과 같은 기능을 수행하는 기계의 능력 인공지능(人工知能, 영어: artificial Intelligence, AI)은 인간의 학습능력, 추론능력, 지각능력, 논증능력, 자연언어의 이해능력 등을 인공적으로 구현한 컴퓨터 프로그램 또는 이를 포함한 컴퓨터 시스템 - 위키피디아 인공지능 이라는 말 뜻에는 어디에도 인공신경망 모형을 쓴다느니 파이썬으로 코딩을 한 프로그램이라는 말이 없다. 즉, 인공지능 이란 말은 학술적, 추상적인 용어일 뿐이다. 그렇기에 '인공지능'이라는 말을 창시한 존 매카시(Joh..

데이터 매쉬업(mash up)에서 매쉬업은 무슨뜻일까? 여러 컨텐츠를 복합하다. 라는 뜻입니다. 영어 사전에서는 mash up ① 충분히 으깨다. ②엉망진창으로부수뜨리다. 이런 뜻인데, mashup (붙여쓰기)로 고유명사화 되어 원래 서로 다른 곡을 조합하여 새로운 노래를 만들어 낸다 는 음악용어지만, IT분야에서는 웹상에서 웹 서비스 업체들이 제공하는 다양한 정보와 서비스를 혼합하여 새로운 서비스를 개발하는 것 을 의미한다.

1. 빅데이터의 정의 좁은 의미의 정의 - 가트너 그룹의 3V: Volume + Variety + Velocity (+value까지 4V) 중간 범위의 정의 - 데이터 자체뿐 아니라, 처리, 분석 기술적 변화까지 포함 - 데이터 처리, 저장, 분석 기술 및 아키텍쳐 - 클라우드 컴퓨팅 활용 넓은 범위의 정의 - 인재, 조직 변화까지 포함 - Data Scientist 같은 새로운 인재 필요 - 데이터 중심 조직 2. 빅데이터 활용의 3요소 데이터: 모든 것의 데이터화 기술: 진화하는 알고리즘, 인공지능 인력: 데이터사이언티스트, 알고리즈미스트 3. 빅데이터가 만들어 내는 본질적인 변화 사전처리 -> 사후처리 표본조사 -> 전수조사 질 -> 양 인과관계 -> 상관관계

예전에도 봣던 책인데, 우연히 북러닝 코스에도 있어 또 한번 읽어보았다. 김옥기 저자님에 대해서는 데이터분석을 종사하면서 종종 들어보았다. (외부강연 등도 많이 하신것으로 알고 있다) 책을 읽으면서 느낀점은 이분은 현업 적용 업무를 많이 하셨구나.. 느꼈다. (내공이 다르달까...?) (데이터 분석 업무를 하다보면 진정한 고수와 허수를 구분할 능력이 늘어가는것 같다..) 데이터 과학 무엇을 하는가? 현직 데이터 과학자가 알려주는 실무 적용 방법! 김옥기 지음 | 이지스퍼블리싱 | 2018년 05월 25일 출간 www.kyobobook.co.kr/product/detailViewKor.laf?ejkGb=KOR&mallGb=KOR&barcode=9791163030096&orderClick=LEa&Kc= 데이..

1. 데이터베이스의 정의 데이터 베이스(database)라는 용어가 처음 등장한 것은 1950년대에 미국 정부가 전 세계에 산재한 자국 군대의 군비 상황을 집중 관리하기 위하여 컴퓨터 기술로 구현한 도서관을 설립하면서 비롯되었다. 데이터베이스의 1차개념은 정형 데이터만을 관리하였으나, 빅데이터의 출현으로 비정형 데이터를 포함한 2차 개념으로 발전하였다. 데이터베이스를 "문자, 기호, 음성, 화상, 영상 등 상호 관련된다수의 콘텐츠를 정보처리 및 정보통신 기기에 의하여 체계적으로 수집 및 축적하여 다양한 용도와 방법으로 이용할 수 있도록 정리한 정보의 집합체"로 정의한다. - 과학기술 발달의 대부분은 국방과 맞물려있다. 데이터베이스의 출현도 마찬가지인 것 같다. 2. 데이터베이스의 특징 3. DBMS 데이..

(1) 가상환경 확인 $ conda info --envs (2) 가상환경 생성 $ conda create --name 가상환경명 - env2라는 이름의 가상환경 생성 (3) 가상환경 활성화 $ conda activate 가상환경명 - 가상환경 변경: (base)에서 (env2)로 변경 (4) 패키지 설치 $ conda install 패키지명 (6) 가상환경 비활성화 $ conda deactivate (7) 가상환경 삭제 $ conda remove --name 가상환경명 --all - base환경에서 시행할 것!

패키지 설치시 일반적인 방법은 다음과 같다. $ pip install 설치패키지 * 그런데 어떠한 블로그에는 다음과 같이 알려준다. $ conda install 설치패키지 과연 무슨 차이가 있는 것일까? 여러 블로그에는 pip는 python만 한정된 패키지 관리자이고, conda 는 python 뿐만 아니라 c, java등에도 포함도니 패키지 관리자라고 한다. (잘은 모르겠지만, 맞는거 같다.) 하지만 이러한 표현보다 더 사용자 측면에서 차이가 나는것을 정리하고자 한다. 1. pip와 conda의 차이 pip와 conda 는 쉽게 얘기하면, pip는 안드로이드 Google Play store이고, conda는 삼성 갤럭시 스토어이다. pip는 python의 정식 지원을 받는 패키지만을 관리하는 관리자이고..