연관분석 lift confidence support 가이드.confidence와 support와 lift는 상호 보완적으로 활용해야 한다.이화경 경험적 의견 : lift와 support를 상호 보완적으로 활용하고, confidence는 보조적으로 활용한다.lift (향상도)쇼핑 상품 관련도에 비유한 설명일반적으로 상품B를 보는 비율보다, 상품A를 본 직후에 B를 보는 비율이 높으면, .. 일/Data Mining 2013.08.22
Information Theory : Entropy, KL-divergence (Cross Entorpy), Mutual Information, RIG (relative information gain) 12년 10월 오박사님 강의, 13년 8월 손JH님의 인수인계 교육 듣고 필기했던 내용을 정리했다. 그 동안 대략적으로 알고 있었던 내용을, 다른 두 명의 시점에서 들으니, 더 명료하게 와 닿아서 정말 좋다. 이제 이걸 좀 더 활용해서 일에 써먹어야지 ㅎㅎㅎ < 정보이론 (Information Theory) 중 3가.. 일/Data Mining 2013.08.22
데이터마이닝 : 문제의 확인. 풀 수 있을 지 없을 지 몰라도, 문제 케이스가 명확하고, 그것이 내가 풀어야 한다는 동기부여만 되면, 어떻게 풀지~ 어떻게 풀지~ 이런 저런 생각들을 하면서도 오히려 흥이 나고 재미있다. 대부분의 문제는 애매모호한 정성적인 언어로 제시된다. 지금 내가 푸는 것은 "상품이 브랜드 별.. 일/Data Mining 2013.07.27
데이터마이너가 되려면? 질문을 많이 받는다. 데이터마이닝을 하려면 어떤 준비를 해야 하나요? 데이터마이너는 어떤 일을 하나요? 답을 많이 해주다보니 대략 개괄적인 흐름이 잡혀 글을 쓴다. 사실 몇 달 전에 써주기로 했는데 이제야 자판을 두드리니 미안할 따름이다. 그것도 맥주 한 잔 힌 뒤에. ㅎㅎ.. 일/Data Mining 2013.07.22
R에서 Decision Tree 돌리기. 0. 환경 세팅. * R 설치 http://www.r-project.org/ * 패키지 설치하기 풀다운 메뉴에서 Packages -> Install Package(s) 해서 원하는 거 골라서 설치하면 됨. 네트웍 연결되어 있어야 함은 물론. # 패키지 설치. install.packages("RWeka") install.packages("tree") * Decision Tree 도움말 http://127.0.0.1:13015/library/tree/html/tree.ht.. 일/Data Mining 2013.07.09
데이터 분석 스터디 조언. 사내에서 데이터 분석 교육(3시간*3회)을 몇 년째 정기적으로 강의하고 있다. 이번에 교육을 들으신 분이, 데이터 분석 스터디를 하고 싶다고 조언을 부탁하셔서 드린 메일을 기록해둔다. 1. 책 추천. * head first 시리즈 책의 특징이, 사고력 훈련 문제, 연습 문제, 바보같은 질문은 없습니다 .. 일/Data Mining 2013.06.28
crontab 에서 쉘 스크립트 실행이 되지 않을 때. 오라클 설치 후 이런저런 설정 파일 경로를 정해줘야 하는 부분이 있다. 그것이 ~/.profile 이거나 ~/.bash_profile 이다. 이번에 서버를 새로 받아 작업 세팅하는데, 지금까지 열 몇 대를 작업하는 동안 본 적 없는 문제가 발생해서 당황했는데, 어디서나 누구에게 문제가 생기면 도와주는 신짱.. 일/Data Mining 2013.03.14
SAS 퍼센타일 값 매크로 변수에 할당하기. AAA 라는 데이터셋에서 qcnt, ccnt, ctr 변수의 퍼센타일 값을 구하고, 원하는 퍼센타일 값을 메크로 변수에 박아 넣는다. 이것들은 후에 원본 데이터셋의 아웃라이어 처리할 때 활용하기 좋다. proc univariate 의 pctlpts 문법을 몇 년 만에 쓰려니 기억이 잘 나지 않아 조금 헤맨 기념으로 기록 남.. 일/Data Mining 2013.02.18
2013 봄. 팀 회의. OEC 퍼실리테이션 하고 싶었다. 그래서 했는데, 만족스러웠다. 이 기분을 기억이 휘발되기 전에 기록으로 남긴다. 목적은 두 가지였다. 1. 서로에 대한 인간적인 이해 2. 업무에 대한 생각 공유 를 그냥 멍석 깔아놓고, 혹은 회식 자리에서, 하는 것도 물론 좋지만. 지금 우리 상황에서 시도해보고 싶.. 일/Data Mining 2013.02.14
2013 Daum 검색개발 경력공채 진입장벽이 다소 있다보니, 괜히 분야만 좁아진 상황에서 과연 인력이 얼마나 지원할지는 모르겠지만. 마찬가지로 좁은 바닥에서 이렇게 공개적으로 구인한다는 것은 나름 좋은 기회가 아닐까 하네요. 경력공채를 이렇게 대대적으로 하는 것도, 업계 전체로 보았을 때 나름 좋은 사인이 .. 일/Data Mining 2013.02.13