본문 바로가기

분류 전체보기53

[ADsP 1과목] 데이터의 이해 정리 part 1 - 데이터와 정보(정성적/ 정량적 데이터, 암묵지/ 형식지, DIKW 피라미드) 차례 1. 데이터의 정의와 특성 1.1. 데이터의 정의 1.2. 데이터의 특성 2. 데이터의 유형 2.1. 정성적 데이터와 정량적 데이터 3. 지식경영의 핵심 이슈 3.1. 암묵지 3.2. 형식지 3.3. 암묵지와 형식지의 상호작용 (SECI 모델) 4. 데이터와 정보의 관계 4.1. DIKW 4.2. DIKW 피라미드 1. 데이터의 정의와 특성 1.1. 데이터의 정의 데이터라는 용어는 1646년 영국 문헌에 처음 등장하였으며 라틴어인 dare(주다)의 과거 분사형으로 '주어진 것'이란 의미로 사용되었다 1940년대 이후 컴퓨터 시대 시작과 함께 자연과학뿐만 아니라 경영학, 통계학 등 다양한 사회과학이 진일보하며, 데이터의 의미는 과거의 관념적이고 추상적인 개념에서 기술적이고 사실적인 의미로 변화되었다 .. 2021. 8. 17.
[ADsP 2과목] 분석 마스터 플랜 정리 part 2 - 분석 거버넌스 체계 수립(분석 거버넌스, 데이터 거버넌스/ 데이터 분석 수준 진단/ 분석 지원 인프라) 차례 1. 거버넌스 체계 1.1. 분석 거버넌스 체계 구성요소 1.2. 분석 거버넌스 2. 데이터 분석 수준 진단 2.1. 분석 준비도 2.2. 분석 성숙도 2.3. 분석 수준 진단 결과 3. 분석지원 인프라 방안 수립 3.1. 플랫폼 4. 데이터 거버넌스 체계 수립 4.1. 데이터 거버넌스 구성 요소 4.2. 데이터 거버넌스 체계 4.3. 분석을 위한 3가지 조직구조 1. 거버넌스 체계 1.1. 분석 거버넌스 체계 구성요소 지속적인 데이터 분석의 적용과 확산을 위한 거버넌스 체계 1.2. 분석 거버넌스 기업에서 데이터를 어떻게 관리, 유지 및 규제하는지에 대한 내부적인 관리 방식이나 프로세스 2. 데이터 분석 수준 진단 2.1. 분석 준비도 (Readiness) 기업의 데이터 분석 도입의 수준을 파악하.. 2021. 8. 17.
[ADsP 2과목] 분석 마스터 플랜 정리 part 1 - 마스터 플랜 수립 프레임 워크 차례 1. 마스터플랜 수립 개요 1.1. 우선순위 고려요소 & 적용범위/ 방식 고려요소 1.2. ISP(Information Strategy Planning) : 정보전략계획 1.3. 분석 마스터플랜 2. 수행 과제 도출 및 우선순위 평가 2.1. 일반적인 IT 프로젝트의 우선순위 평가 2.2. ROI 관점에서 빅데이터의 핵심 특징 2.3. 데이터 분석 과제 추진 시 고려해야 하는 우선순위 평가 기준 2.4. 포트폴리오 사분면 분석을 통한 과제 우선순위 선정 3. 이행계획 수립 3.1. 로드맵 수립 3.2. 세부 이행계획 수립 1. 마스터플랜 수립 개요 1.1. 우선순위 고려요소 & 적용범위/ 방식 고려요소 데이터 기반 구축을 위해 분석 과제를 대상으로 다양한 기준을 고려해 적용 우선순위를 설정 분석 적.. 2021. 8. 17.
[컴활 1급 필기] 1과목 컴퓨터 일반 - 빈출 개념 정리 part 1 참고 Tip 최대한 기출문제 보기에 나왔던 문장 그대로 정리하였으니 문장을 그대로 보면 시험칠 때 익숙 형광펜 칠한 문장 => 기출문제에서 답이었던 문장 빨간 글씨 => 보기에 오답으로 바꾸어 출제되었던 부분 진한 글씨 => 답은 아니었지만 기출에 자주 출제된 보기 멀티미디어의 특징 디지털화(Digitalization), 쌍방향성(Interactive), 비선형성(Non-Linear), 정보의 통합성(Intergration) 디지털 데이터로 변환하여 통합 처리한다 정보 제공자와 사용자 간의 상호작용에 의해 데이터가 전달된다 데이터가 사용자 선택에 따라 비순차적으로 처리되는 비선형성의 특징을 가진다 문자, 그림, 사운드 등의 여러 미디어를 통합하여 처리한다 보안 위협의 구체적 형태 분산 서비스 거부 공격(.. 2021. 8. 14.
[ADsP 2과목] 데이터 분석 기획의 이해 정리 part 3 - 분석 과제 발굴(하향식/ 상향식 접근법), 분석 프로젝트 관리 방안 차례 1. 분석 과제 발굴 방법론 1.1. 하향식 접근법 1.2. 상향식 접근법 1.3. 하향식 접근방식 VS 상향식 접근방식 2. 분석 과제 정의서 3. 분석 프로젝트 관리 방안 3.1. 분석 과제 관리를 위한 5가지 주요 영역 3.2. 분석 프로젝트 관리 방안 1. 분석과제 발굴 방법론 1.1. 하향식 접근법 (Top-Down Approach) 문제가 주어지고 이에 대한 해법을 찾기 위해(Problem Solving) 각 과정이 체계적으로 단계화되어 수행하는 방식 현황 분석을 통해 기회나 문제를 탐색(Problem Discovery)하고, 해당 문제를 정의(Problem Definition), 해결방안을 탐색(Solution Search) 한 후 데이터 분석의 타당성 평가(Feasibility Stu.. 2021. 8. 12.
[ADsP 2과목] 데이터 분석 기획의 이해 정리 part 2 - 분석 방법론(폭포수, 애자일, 나선형 모델/ KDD, CRISP-DM, 빅데이터 분석 방법론) 차례 1. 분석 방법론 생성과정 2. 분석 방법론의 모델 2.1. 폭포수 모델 2.2. 애자일(Agile) 모델 2.3. 프로토타입 모델 2.4. 나선형 모델 3. 방법론의 구성 3.1. 계층적 프로세스 모델 4. 분석 방법론 4.1. KDD 4.2. CRISP-DM 4.3. 빅데이터 분석 방법론 4.4. 방법론 비교 1. 분석 방법론 생성과정 구분 의미 예 특징 상호작용 암묵지 학습과 경험을 통해 개인에게 체화되어 있지만 겉으로 드러나지 않는 지식 김치 담그기, 자전거 타기 사회적으로 중요하지만 다른 사람에게 공유되기 어려움 내면화, 공통화 형식지 문서나 매뉴얼처럼 형상화된 지식 교과서, 비디오, DB 전달과 공유가 용이함 표출화, 연결화 2. 분석 방법론의 모델 2.1. 폭포수 모델 단계를 순차적으로.. 2021. 8. 11.
[ADsP 2과목] 데이터 분석 기획의 이해 정리 part 1- 분석기획 방향성 도출(최적화, 통찰, 솔루션, 발견/ 과제 중심적 접근, 장기적인 마스터 플랜/ 분석 기획시 고려사항) 차례 1. 분석기획의 특징 1.1. 분석기획 1.2. 데이터 사이언티스트의 역량 2. 분석 대상과 방법 2.1. 최적화, 통찰, 솔루션, 발견 3. 목표 시점 별 분석 기획 방안 3.1. 당면한 분석 주제의 해결 "과제 중심" 3.2. 지속적 분석 문화 내재화 "마스터 플랜" 4. 분석 기획시 고려사항 4.1. 가용 데이터 4.2. 적절한 유스케이스 4.3. 장애요소 +) 데이터 종류- 정형 데이터, 반정형 데이터, 비정형 데이터 1. 분석기획의 특징 1.1.분석기획? 실제 분석을 시작하기에 앞서 수행할 과제를 정의하고, 의도했던 결과를 도출할 수 있도록 이를 적절하게 관리할 수 있는 방안을 사전에 계획하는 일련의 작업 분석 과제 및 프로젝트를 직접 수행하지 않으나 어떤 목표(What)를 달성하기 위해(.. 2021. 8. 10.
[공공데이터 open API] 에러 핸들링: "Module not found Error: No module named 'urllib2'", "ImportError: cannot import name 'urlencode' from 'urllib'" 공공데이터 포털에서 open API를 받아오면서 발생한 "Module not found" 에러와 "Import Error" 에러 핸들링 결과부터 말하자면 파이썬 버전의 차이에 따른 문제였다 현재 사용 중인 파이썬 버전은 3.9.1 공공데이터 포털 https://www.data.go.kr/ 먼저 활용한 데이터는 공공데이터 포털에 등록되어 있는 한국산업인력공단의 데이터인 " 산업인력 국가기술자격 통계 정보" 먼저 활용하고 싶은 open API 상세를 보면 화면 하단에 아래와 같은 샘플 코드가 나온다. 이 샘플 코드는 open API를 불러오는 코드로 자신이 사용하는 언어에 맞는 샘플 코드를 활용하면 된다. 오류 발생/ 에러 핸들링 Jupyter notebook에서 python을 이용하여 API를 불러올 것이.. 2021. 7. 26.
[Excel] 단축키 정리 및 셀 포인터 이동/ 범위 지정- Ctrl, Shift, Alt 차이 Tab 오른쪽 셀로 이동 Shift + Tab 왼쪽 셀로 이동 Enter 아래쪽 셀로 이동 Shift + Enter 위쪽 셀로 이동 Home 해당 행의 A열로 이동 Ctrl + Home A1 셀로 이동 Ctrl + End 데이터 범위의 마지막 셀(맨 오른쪽 아래)로 이동 Ctrl + 방향키 화살표 방향으로 데이터 범위의 마지막 셀로 이동 PgUp, PgDn 한 시트 내에서 위, 아래 이동 Alt + PgUp/ PgDn 한 시트 내에서 좌, 우로 이동 Ctrl + PgUp/ PgDn 현재시트의 앞, 뒤 다른 시트로 이동 F5 셀 주소를 직접 입력하여 이동 연속된 셀 테이블 형태 Shift키를 누른채로 첫번째 셀과 마지막 셀을 클릭 Ctrl + Shift + 방향키 원하는 행방향과 열방향으로 방향키를 모두 .. 2021. 7. 20.
[python & Jupyter] 필요한 열로만 데이터 프레임 만드는 방법 두 가지 + drop 명령 이전 포스팅에서 만든 데이터 프레임을 이용한 작업입니다 [python & Jupyter] 폴더 내 여러 개의 csv파일을 하나의 데이터 프레임으로 한 번에 합치기 FinanceData에서 받은 연도별 주식 데이터를 하나의 데이터 프레임으로 합치는 작업 먼저 FinanceData에서 알려주는 방법을 따라 데이터를 다운로드하게 되면 marcap/data라는 폴더 안에 주식 데이터 파 hyunsitstory.tistory.com 필요한 데이터를 받아서 작업을 하려고 데이터 프레임을 보면 내가 필요 없는 데이터도 포함되어 있기 마련이다. 이 데이터프레임을 가지고 계속 작업하면 필요 없는 부분도 계속 포함되다 보니 보기에도 불편하고 효율성이 그다지 좋지 않아 필요한 열만 포함하고 있는 데이터 프레임을 원하게 된다.. 2021. 3. 29.

티스토리툴바