Data Analysis 검색 결과

해당 글 34건

[SQL 레벨업] 2장. SQL 기초

6강. SELECT 구문 검색 데이터가 저장되어 있는 테이블에서 필요한 데이터를 뽑아내는 것 (select) 질의(query), 추출(retrieve) where 필터 조건, ~라는 경우 null은 데이터 값이 아니므로, 데이터값에 적용하는 연산자(=)를 적용할 수 없다. select 구문의 입/출력은 모두 2차원 표 (테이블) 폐쇄성 (closure property) group by, having 집합, 집합 조건 order by 정렬 뷰 (VIEW) select 구문을 데이터베이스 안에 저장 데이터 저장 X 뷰에서 데이터를 선택하는 SELECT 구문은, 실제로는 내부적으로 ‘추가적인 SELECT 구문’을 실행하는 중첩 (nested) 구조 → 서브쿼리 7강. 조건 분기, 집합 연산, 윈도우 함수, 갱..
Data Analysis/SQL Tuning 2023. 12. 19. 13:37

[SQL 레벨업] 1장. DBMS 아키텍쳐

1강. DBMS 아키텍쳐 개요 쿼리 평가 엔진 실행 계획을 세우고 실행하는 DBMS의 핵심 기능을 담당하는 모듈 버퍼 매니저 버퍼라는 메모리 영역을 관리하는 모듈 디스크 용량 매니저 데이터를 어떻게 저장할지, 데이터의 읽고 쓰기를 제어 트랜잭션 매니저와 락 매니저 트랜잭션의 정합성을 유지하면서 실행시키고, 필요한 경우 데이터에 락을 걸어 다른 사람의 요청을 대기시키는 모듈 리커버러 매니저 데이터를 정기적으로 백업하고, 문제가 일어났을 때 복구해주는 모듈 2강. DBMS와 버퍼 기억 비용과 접근 속도에 따라 기억장치 분류됨 1차 기억장치 : 메모리, 레지스터 등 (접근 속도 빠르고, 기억 비용 높음) 2차 기억장치 : 하드디스크, DC, DVD 등 3차 기억장치 : 테이프 등 HDD DBMS가 데이터를 저..
Data Analysis/SQL Tuning 2023. 12. 13. 09:27

[SQL 레시피] 사용자 전체의 특징과 경향 찾기

11강. 사용자 전체의 특징과 경향 찾기 서비스를 제공하는 측에서 사용자와 관련된 정보로 알고 싶은 것 사용자의 속성 (나이, 성별, 주소지) 사용자의 행동 (구매한 상품, 사용한 기능, 사용하는 빈도) 일반적으로 서비스와 관련된 업무 데이터가 저장된 데이터베이스에 관심 상품 등록, 카트 추가, 구매, 댓글 등의 각각의 테이블이 있을 것이지만, 액션 로그 테이블을 따로 만들고 내부에 내용을 적으면 별도의 테이블 결합 없이 데이터를 다룰 수 있다. 1. 사용자의 액션 수 집계하기 사용자들이 특정 기간 동안 기능을 얼마나 사용하는지 집계 사용률 (usage_rate) = 특정 액션 UU / 전체 액션 UU 1명 당 액션 수 (count_per_user) = 사용자가 평균적으로 액션을 몇 번 사용했는지 💡 U..
Data Analysis/SQL Recipe for Data Analysis 2023. 12. 12. 09:14

[프로그래머스 SQL 코딩테스트 연습] 도서 관련 문제 모음

프로그래머스 SQL 코딩테스트 연습문제 https://school.programmers.co.kr/learn/challenges?order=recent&languages=mysql 코딩테스트 연습 | 프로그래머스 스쿨 개발자 취업의 필수 관문 코딩테스트를 철저하게 연습하고 대비할 수 있는 문제를 총망라! 프로그래머스에서 선발한 문제로 유형을 파악하고 실력을 업그레이드해 보세요! school.programmers.co.kr 도서 관련 문제 모음 개인 답안 (MYSQL) 1. 조건에 맞는 도서 리스트 출력하기 [문제] BOOK 테이블에서 2021년에 출판된 '인문' 카테고리에 속하는 도서 리스트를 찾아서 도서 ID(BOOK_ID), 출판일 (PUBLISHED_DATE)을 출력하는 SQL문을 작성해주세요. 결..
Data Analysis/SQL Coding Test 2023. 11. 16. 15:15

[프로그래머스 SQL 코딩테스트 연습] 자동차 관련 문제 모음

프로그래머스 SQL 코딩테스트 연습문제 https://school.programmers.co.kr/learn/challenges?order=recent&languages=mysql 코딩테스트 연습 | 프로그래머스 스쿨 개발자 취업의 필수 관문 코딩테스트를 철저하게 연습하고 대비할 수 있는 문제를 총망라! 프로그래머스에서 선발한 문제로 유형을 파악하고 실력을 업그레이드해 보세요! school.programmers.co.kr 자동차 관련 문제 모음 개인 답안 (MYSQL) 1. 특정 옵션이 포함된 자동차 리스트 구하기 [문제] CAR_RENTAL_COMPANY_CAR 테이블에서 '네비게이션' 옵션이 포함된 자동차 리스트를 출력하는 SQL문을 작성해주세요. 결과는 자동차 ID를 기준으로 내림차순 정렬해주세요...
Data Analysis/SQL Coding Test 2023. 11. 16. 08:57

[SQL 레시피] 다면적인 축을 사용해 데이터 집약하기

10강. 다면적인 축을 사용해 데이터 집약하기 시계열로 매출 금액의 추이를 표현하는 것 이외에도, 상품 카테고리에 주목해서 매출 내역을 집계하거나 구성하는 비율을 집계하는 등 리포트 표현 방법은 다양하다. 1. 카테고리별 매출과 소계 계산하기 리포트 업무는 전체적인 수치 개요를 전하면서, 해당 내역을 다양한 관점에서 설명해야한다. PC 사이트와 SP 사이트, 상품 카테고리별, 웹사이트의 총 페이지 뷰 수에 대한 회원들의 페이지 뷰와 비회원의 페이지 뷰 비율 등을 드릴다운하여 리포트함. select coalesce(category, 'all') AS category , coalesce(sub_category, 'all') AS sub_category , sum(price) AS amount from sql..
Data Analysis/SQL Recipe for Data Analysis 2023. 11. 14. 14:29

[SQL 레시피] 시계열 기반으로 데이터 집계하기

9강. 시계열 기반으로 데이터 집계하기 분석 현장에서는 시계열로 매출 금액, 사용자 수, 페이지 뷰 등의 다양한 데이터를 집계하는 경우가 많음. 변화를 이해하기 쉽게 표현할 수 있는 리포팅 방법을 소개한다. 1. 날짜별 매출 집계하기 dt별 count, sum, avg 확인 2. 이동평균을 사용한 날짜별 추이 보기 매출이 주기적으로 높아지는 날이 존재, 매출이 상승 경향이 있는지 하락 경향이 있는지 살펴보기 위해서 이동 평균을 사용함. 7일 동안의 평균 매출을 사용한 ‘7일 이동평균’ select dt , sum(purchase_amount) AS total_amount -- 최근 최대 7일 동안의 평균 계산하기 , avg(sum(purchase_amount)) over(order by dt rows b..
Data Analysis/SQL Recipe for Data Analysis 2023. 11. 14. 08:27

[SQL 튜닝] 기본적인 튜닝 절차

기본적인 튜닝 절차 SQL문 실행결과 & 현황 파악 결과 및 소요시간 확인 조인/서브쿼리 구조 동등/범위 조건… 가시적 테이블의 데이터 건수 SELECT덜 컬럼 분석 조건절 컬럼 분석 그루핑/정렬 컬럼 비가시적 실행계획 인덱스 현황 데이터 변경 추이 업무적 특징 튜닝 방향 판단 & 개선/적용 1. SQL 문 단순 수정으로 착한 쿼리 만들기 기본 키를 변형하는 나쁜 SQL 문 기본 키를 변형하지 않는 조회 조건을 넣어야한다. 사용하지 않는 함수를 포함하는 나쁜 SQ문 불필요한 ifnull 함수를 사용해서 인덱스를 활용 못하는 경우 형변환으로 인덱스를 활용하지 못하는 나쁜 SQL 문 문자열을 숫자 취급해서 인덱스를 활용 못하는 경우 열을 결합하여 사용하는 나쁜 SQL 문 열을 분리하지 않고 합쳐서 인덱스를 ..
Data Analysis/SQL Tuning 2023. 11. 13. 10:09

[SQL 튜닝] 실행계획

실행계획 id 실행 순서 숫자, 같으면 조인 select_type SIMPLE select구문으로만 작성 PRIMARY 서브쿼리 포함된 혹은 UNION ALL에서 첫번째 SELECT 문 SUBQUERY 독립적 서브쿼리, 스칼라 서브쿼리, WHERE절 중첩 서브쿼리 DERIVED FROM절의 서브쿼리 UNION 첫번째 SELECT 구문 이후의 SELECT 구문 UNION RESULT union all이 아닌 union 구문 DEPENDENT SUBQUERY UNION 형태로 구성된 서브쿼리 (메인테이블의 영향을 받는 경우 = 튜닝대상) DEPENDENT UNION UNION 형태로 구성된 서브쿼리에서 두번째 쿼리 UNCACHEABLE SUBQUERY 메모리에 상주하여 재활용되어야 할 서브쿼리가 재사용되지 ..
Data Analysis/SQL Tuning 2023. 11. 13. 10:07

[SQL 튜닝] 기본개념

기본개념 JOIN 블록중첩조인/블록해시조인 BKA (배치 키 액세스) 조인 블록중첩루프해시 (해시) 조인 인덱스 인덱스범위스캔 인덱스풀스캔 인덱스고유스캔 인덱스루스스캔 인덱스병합스캔 페이지 데이터를 검색하는 최소단위 조건 액세스조건 / 필터조건 선택도 / 카디널리티 중복이 낮으면, 카디널리티가 높음(고유) 힌트 /*! USE INDEX ( ) */ ⇒ mysql에서는 인덱스 없을 시 오류발생 콜레이션 (collation) 문자셋의 순서(정렬)과 관련 통계정보 옵티마이저가 통계정보에 기반을 두고 SQL문의 실행 계획을 수립함. 히스토그램 ANALYZE TABLE 테이블명 UPDATE HISTOGRAM ON 열명 나열; 드라이빙 테이블 JOIN시 먼저 액세스되서 ACCESS PATH를 주도하는 테이블 (Dr..
Data Analysis/SQL Tuning 2023. 11. 13. 10:06