모바일 오유 바로가기
http://m.todayhumor.co.kr
분류 게시판
베스트
  • 베스트오브베스트
  • 베스트
  • 오늘의베스트
  • 유머
  • 유머자료
  • 유머글
  • 이야기
  • 자유
  • 고민
  • 연애
  • 결혼생활
  • 좋은글
  • 자랑
  • 공포
  • 멘붕
  • 사이다
  • 군대
  • 밀리터리
  • 미스터리
  • 술한잔
  • 오늘있잖아요
  • 투표인증
  • 새해
  • 이슈
  • 시사
  • 시사아카이브
  • 사회면
  • 사건사고
  • 생활
  • 패션
  • 패션착샷
  • 아동패션착샷
  • 뷰티
  • 인테리어
  • DIY
  • 요리
  • 커피&차
  • 육아
  • 법률
  • 동물
  • 지식
  • 취업정보
  • 식물
  • 다이어트
  • 의료
  • 영어
  • 맛집
  • 추천사이트
  • 해외직구
  • 취미
  • 사진
  • 사진강좌
  • 카메라
  • 만화
  • 애니메이션
  • 포니
  • 자전거
  • 자동차
  • 여행
  • 바이크
  • 민물낚시
  • 바다낚시
  • 장난감
  • 그림판
  • 학술
  • 경제
  • 역사
  • 예술
  • 과학
  • 철학
  • 심리학
  • 방송연예
  • 연예
  • 음악
  • 음악찾기
  • 악기
  • 음향기기
  • 영화
  • 다큐멘터리
  • 국내드라마
  • 해외드라마
  • 예능
  • 팟케스트
  • 방송프로그램
  • 무한도전
  • 더지니어스
  • 개그콘서트
  • 런닝맨
  • 나가수
  • 디지털
  • 컴퓨터
  • 프로그래머
  • IT
  • 안티바이러스
  • 애플
  • 안드로이드
  • 스마트폰
  • 윈도우폰
  • 심비안
  • 스포츠
  • 스포츠
  • 축구
  • 야구
  • 농구
  • 바둑
  • 야구팀
  • 삼성
  • 두산
  • NC
  • 넥센
  • 한화
  • SK
  • 기아
  • 롯데
  • LG
  • KT
  • 메이저리그
  • 일본프로야구리그
  • 게임1
  • 플래시게임
  • 게임토론방
  • 엑스박스
  • 플레이스테이션
  • 닌텐도
  • 모바일게임
  • 게임2
  • 던전앤파이터
  • 마비노기
  • 마비노기영웅전
  • 하스스톤
  • 히어로즈오브더스톰
  • gta5
  • 디아블로
  • 디아블로2
  • 피파온라인2
  • 피파온라인3
  • 워크래프트
  • 월드오브워크래프트
  • 밀리언아서
  • 월드오브탱크
  • 블레이드앤소울
  • 검은사막
  • 스타크래프트
  • 스타크래프트2
  • 베틀필드3
  • 마인크래프트
  • 데이즈
  • 문명
  • 서든어택
  • 테라
  • 아이온
  • 심시티5
  • 프리스타일풋볼
  • 스페셜포스
  • 사이퍼즈
  • 도타2
  • 메이플스토리1
  • 메이플스토리2
  • 오버워치
  • 오버워치그룹모집
  • 포켓몬고
  • 파이널판타지14
  • 배틀그라운드
  • 기타
  • 종교
  • 단어장
  • 자료창고
  • 운영
  • 공지사항
  • 오유운영
  • 게시판신청
  • 보류
  • 임시게시판
  • 메르스
  • 세월호
  • 원전사고
  • 2016리오올림픽
  • 2018평창올림픽
  • 코로나19
  • 2020도쿄올림픽
  • 게시판찾기
  • 게시물ID : programmer_21787
    작성자 : 도레미파솔라
    추천 : 1
    조회수 : 617
    IP : 125.131.***.193
    댓글 : 13개
    등록시간 : 2017/11/30 15:35:50
    http://todayhumor.com/?programmer_21787 모바일
    mysql 성능이 너무 안나와서.. 질문좀 드리겠습니다!!
    옵션
    • 베스트금지
    • 베오베금지
    • 본인삭제금지
    • 외부펌금지
    mysql 5.7버전
    fr_hit 테이블
    6개의 열 : id(int), hitter(tinitext),  category(tinitext),  target(tinitext),  tag(tinitext), date(timestamp)
    primary key = id
    fulltext index = hitter, category, target, tag
    카테고리, 타겟, 태그는 enum 같은 정해진 몇개의 텍스트 
    hitter는 불특정 텍스트

    약 60만개의 행
    =======================
    select *
    from fr_hit 
    where
    hitter=2 and
    category="community" and
    tag="inbox" and
    target=744
    ======= 약 0.3초 =======

    select fr_test.*, fr_hit.id
    from fr_test
    left join fr_hit ON
    fr_hit.hitter='aa' and
    fr_hit.category='community' and
    fr_hit.tag='inbox' and
    fr_hit.target=fr_test.id
    limit 1;
    ========= 약 50초 ==========

    fr_test테이블 리스트를 10개 뽑아온다고 하면 몇분이 걸리는 상황입니다.
    지금은 fr_test를 그냥 select하고 fr_hit테이블을 셀렉트 하는 상황이고 
    지금 그 마저도 한개당 0.3초 정도니 10개를 한다고 하면 3초인 상황이라 느리다는 판단입니다.

    찾다가 fulltext라는 인덱싱을 해봤는데 이건 match와 같은걸로 해야한다고 하고... 
    음.. 몇일정도 찾아보고 이것 저것해봤는데 답이 안나오는 상황입니다..

    제가 해본 테스트 상황으로는 fr_hit.hitter 때문에 느리다는 답이 나왔는데 어떻게 개선을 해야할지...

    어떻게 성능향상을 할 수 잇을까요...그리고 join이 왜이렇게 느린걸까요...
    답변 부탁드립니다... 감사합니다..




    이 게시물을 추천한 분들의 목록입니다.
    [1] 2017/11/30 16:02:58  106.249.***.106  kre29  493160
    푸르딩딩:추천수 3이상 댓글은 배경색이 바뀝니다.
    (단,비공감수가 추천수의 1/3 초과시 해당없음)
    골방꾼(2017-11-30 16:08:49)125.61.***.2추천 0
    1. index를 만드세요.
    https://dev.mysql.com/doc/refman/5.7/en/create-index.html
    Prefixes must be specified for BLOB and TEXT column indexes. / TEXT는 길이를 지정해야만(!) 됨. tinytext는 text의 일종임
    단순 CREATE INDEX 인덱스명 ON 테이블명 (컬럼명(길이) );
    복합 CREATE INDEX 인덱스명 ON 테이블명 (컬럼명(길이), 컬럼명(길이), ... );
    어느 컬럼을 앞에 쓰고 뒤에 쓸지 등은 통계와 쿼리의 형태를 모르기 때문에 못 알려드림.
    댓글 1개 ▲
    도레미파솔라(2017-12-02 18:21:27)추천 0
    답변 감사합니다. 적용해보겠습니다!!
    kre29(2017-11-30 16:12:29)106.249.***.106추천 0
    "카테고리, 타겟, 태그는 enum 같은 정해진 몇개의 텍스트 "
    - 정해진 몇개의 텍스트라면 varchar를 사용하시는 편이 검색이 빠르던 것으로 알고있습니다.

    "
    select *
    from fr_hit
    where
     hitter=2 and
     category="community" and
     tag="inbox" and
     target=744
    "

    이 부분을 한개당 0.3초라고 하신 것 같은데, mysql 입장에서는 조금 다릅니다.
    1. hitter가 2인것을 모든 행에서 찾고,
    2. category가 community인것을 (1)을 찾은 모든 행에서 찾고,
    3. tag가 inbox인 것을 (2)를 찾은 모든 행에서 찾고,
    4. target이 fr_test.id와 같은것을 (3)을 찾은 모든행에서 찾는

    위와 같은 형태로 돌아갑니다.
    데이터에 따라 튜닝 형태가 달라지겠지만,  기본적으로 검색할 때는 가장 검색자료가 적은 것 (이름, 나이, 주민등록번호 열이 있다면 주민등록번호, 이름, 나이 순으로 검색.)부터 넣어야 하고, 다른 테이블과의 비교가 필요없는 경우에는 on이 아닌 where 절에 넣어 검색하는게 맞습니다.

    데이터를 가지고 테스트 해볼 수 없어서 이 정도밖에 말씀드리지 못할 것 같습니다.
    댓글 2개 ▲
    골방꾼(2017-11-30 16:58:55)125.61.***.2추천 0
    애석하게도 "그와 같은 형태"로 돌아가지 않습니다.
    https://dev.mysql.com/doc/internals/en/optimizer-and-relations.html
    index가 없을 것으로 보이고 그렇다면 아마도 몽창 다 읽어보면서 찾아보기(sequential scan)를 하고 있을겁니다.

    그리고 MySQL이 optimizer가 좀 띨띨하기로서니(<-지극히 개!인!적!인! 의!견!입니다.) 앞에 있는지 뒤에 있는지 등의 위치를 가지고 쿼리를 실행하지는 않습니다.
    index가 언제 만들어진건지를 따질 수는 있어도.. -_-;;
    도레미파솔라(2017-12-02 18:22:18)추천 0
    target은 int(11)로 , category, hitter, tag는 varchar(10,20,10) 으로 변경해 보겠습니다.
    골방꾼(2017-11-30 16:15:15)125.61.***.2추천 0
    2. 아주 특별한 이유(하나의 row가 엄청 긴 경우 같은)가 없다면 VARCHAR로 type을 변경하는 것을 고려하세요.
    https://dev.mysql.com/doc/refman/5.7/en/blob.html
    댓글 1개 ▲
    도레미파솔라(2017-12-02 18:22:57)추천 0
    특별히 길진 않고 모두 20이하의 글자수를 가지고 있어서 varchar로 적용해보겠습니다
    골방꾼(2017-11-30 16:17:35)125.61.***.2추천 0
    3. join 조건인지 where 조건인지 구별하세요.

    -- test code
    CREATE TABLE aaa (
     aa INT
     , bb INT
    )
    ;

    CREATE TABLE bbb (
     aa INT
     , bb INT
    )
    ;

    INSERT INTO aaa ( aa, bb ) VALUES( 1, 2 )
    , (2, 4)
    , (3, 6)
    ;

    INSERT INTO bbb ( aa, bb ) VALUES( 1, 100 )
    , (4, 400)
    ;
    -- 아래의 쿼리에서 aaa.bb = 2를 20 으로 바꿔서도 테스트
    SELECT *
    FROM aaa
    LEFT OUTER JOIN bbb
     ON aaa.aa = bbb.aa
    WHERE aaa.bb = 2
    ;
    SELECT *
    FROM aaa
    LEFT OUTER JOIN bbb
     ON aaa.aa = bbb.aa
     AND aaa.bb = 2
    ;
    댓글 1개 ▲
    도레미파솔라(2017-12-02 18:24:15)추천 0
    답변 감사합니다. 일단 저 hit이라는 테이블을 조율 후에 join을 해보도록 하겠습니다 ㅠㅠ
    골방꾼(2017-11-30 16:19:59)125.61.***.2추천 0
    4. 쿼리가 느린 이유로 질문시에는 통계값(데이터의 분포)와 EXPLAIN한 결과를 주세요.
    https://dev.mysql.com/doc/refman/5.7/en/using-explain.html
    댓글 0개 ▲
    자유해결사(2017-11-30 17:03:29)123.254.***.192추천 0
    도움 될지 모르지만. 저는 join 할 태이블에서 데이터를 걸러와서 조인을 걸었어여. join 만 걸면 오래 걸리길래. 우선 필요한 데이터를 조회 해놓고 조회된 정보를 join 으로 걸었더니 튜닝이 되었거든요.
    댓글 0개 ▲
    비호감목룩보기(2017-11-30 18:37:32)61.33.***.69추천 0
    fr_test 엔 뭐가있는지 알려주셔야 할꺼 같습니다만.. fr_test를 기준으로 left join하는데 해당 데이터엔 뭐가있는지 없네요. ft_test는 따로 조건이없음으로 fullscan하게 되겠네요. 무엇보다.. 저런 테이블 정보도 정보지만 위에 골방꾼님이 이야기했듯 실행계획 결과도 알려주셔야 해요..
    댓글 0개 ▲
    잔혹한마법사(2017-12-01 01:38:07)220.117.***.103추천 1
    어디서부터 글을 시작해야 하나 싶은데요.
    먼저... 현재 컴퓨터의 연산 성능에서 단일 테이블 60만건에서 0.3초가 걸린다는 것부터 설계든 쿼리든 뭔가 심각한 문제가 있다는 얘기입니다.
    그리고 모든 설계와 코딩은 명칭 하나까지 논리적인 설명이 가능해야 합니다.

    본문을 읽으면서 드는 궁금점과 하고 싶은 말이..
    1. 테이블 설계에서 varchar(256) 이 아닌 tinitext 를 사용한 이유가 무엇인가요?
    2. sql 에서 join 절에는 검색 조건이 아닌 두 테이블의 relation 설명이 들어가야 합니다.
    3. sql의 join 절에서 사용하는 관계 설명용 필드는 PK와 FK 필드만으로도 충분해야 합니다.
    만약 3의 조건을 벗어난다면 테이블간의 관계 설계를 제대로 했는지 검증이 필요합니다.
    4. 검색 조건은 where 조건에만 들어가야 합니다.
    5. order 절이 없이 Limit 가 있다는것은 다른 결과가 나올 수도 있다는 것을 의미합니다.

    DB 크기 1GB 이하 레벨에선 인덱스니 뭐니 하는 기법을 쓰기보다..
    기본에 충실한 설계만으로도 해결이 되야 한다고 생각하고 아직까지 그걸 벗어나는 경우도 없었습니다.
    댓글 0개 ▲

    죄송합니다. 댓글 작성은 회원만 가능합니다.

    번호 제 목 이름 날짜 조회 추천
    23467
    로또 까망사투리 25/05/07 11:18 464 0
    23466
    IT 개발자를 희망하는 취준생에게 공유하는 국비지원 교육 수강 후기 [1] 발토랑 25/04/15 22:52 797 0
    23465
    카페 주문 pos 만들기 html javascript 까망사투리 25/04/09 15:34 731 2
    23464
    진짜 벼랑끝에 몰려서 물어보는 질문 [6] 아젬라 25/03/13 16:33 1418 2
    23463
    로또 [1] 까망사투리 25/03/03 14:18 1290 0
    23462
    2월 8일 오후 8시 진행- 맛보기 강좌: 5시간 만에 웹 만들기 [1] quickturn 25/02/19 14:44 1196 0
    23461
    로또 [2] 까망사투리 25/02/12 13:13 1415 2
    23459
    C++ 입문전 초보자입니다. Qt / wxWidgets / FLTK 어떤 [6] OMG! 24/12/07 00:28 1666 0
    23458
    [KOCCA] 2024 게임콘텐츠 제작지원 이용자평가 체험단모집 장파랑 24/11/26 16:56 1523 0
    23457
    [한국콘텐츠진흥원] 2024 게임콘텐츠 제작지원 이용자평가 이용자 모집 장파랑 24/11/18 14:02 1585 0
    23456
    [한국콘텐츠진흥원] 2024 게임콘텐츠 제작지원 이용자평가 이용자 모집 장파랑 24/10/28 18:24 1929 0
    23455
    논문 읽는 사람들을 위한 문서 번역 서비스 rWhale 24/10/10 13:06 2285 2
    23453
    로또번호 [2] 까망사투리 24/09/19 11:10 2990 2
    23452
    AI와 함께가는 코딩 업계 [2] 펌글 우가가 24/09/02 22:19 3213 9
    23451
    Switch문 도배된 2100줄 짜리 함수 [4] 펌글 우가가 24/08/26 22:37 3066 4
    23450
    개인정보 수집 없는 이미지 리사이즈 사라밍 24/08/23 20:31 2392 0
    23449
    디자인 패턴의 템플릿 메소드 패턴 실무 적용 사례 [1] 써니썬 24/08/23 16:47 2412 1
    23448
    TMDB API Key 얻을 때 동의하게 되는 면책 및 포기 조항 우가가 24/08/18 16:07 2403 1
    23447
    펌) 아무튼 개쩌는 번역기를 국내기술로 개발완료 했다는 소식 [1] 펌글 우가가 24/08/15 17:30 2658 2
    23446
    쿠팡 가격 변동 추적 알림 서비스 피드백 요청 (제발) 창작글펌글 애오옹 24/08/10 14:30 2684 0
    23445
    넥사크로 17.1 관련 [2] 본인삭제금지 나르하나 24/08/01 12:30 2611 0
    23444
    개밯자 의자에 머리받침 없어 [2] 까망사투리 24/07/25 13:32 3061 1
    23443
    안드로이드 EditText 리스너 연동 문의드립니다. - 해결됨 [1] 창작글 상사꽃 24/07/01 17:47 2860 2
    23442
    펌) 파이어폭스 엔진이 신인 이유 [1] 펌글 우가가 24/06/30 23:25 3483 2
    23441
    예전에는 함수 하나에 대한 기능에 고민을 많이 했는데.. ssonacy 24/05/21 09:45 3229 0
    23440
    c++ 에서 DB 쿼리문처럼 사용할 방법이 있을까요? [8] 상사꽃 24/05/19 11:10 3384 0
    23439
    쉬운 배터리 알림 창작글 언젠가아자 24/05/14 10:47 3526 0
    23438
    아후 서터레스 [1] NeoGenius 24/04/02 17:52 3207 1
    23436
    로또 [3] 까망사투리 24/03/11 15:53 3903 4
    23434
    copilot 기업유료버전 intelliJ에 붙여서 쓰고있는데 지리네요 안녕월드 24/02/22 00:15 3900 0
    [1] [2] [3] [4] [5] [6] [7] [8] [9] [10] [다음10개▶]
    단축키 운영진에게 바란다(삭제요청/제안) 운영게 게시판신청 자료창고 보류 개인정보취급방침 청소년보호정책 모바일홈