MySQL MySQL에서 중복 값 찾기

2018.06.15 15:18

졸리운_곰 조회 수:964

 

 

MySQL에서 중복 값 찾기

 
Answers
 
SELECT varchar_col
FROM table
GROUP BY varchar_col
HAVING count(*) > 1;
Question

varchar 열이있는 테이블이 있고이 열에 값이 중복 된 레코드를 모두 찾고 싶습니다. 복제본을 찾는 데 사용할 수있는 최상의 쿼리는 무엇입니까?

 
 

중복 행의 ID를 얻기위한 levik의 응답을 토대로 서버가 지원할 경우 GROUP_CONCAT 수행 할 수 있습니다 (쉼표로 구분 된 ID 목록이 반환 됨).

SELECT GROUP_CONCAT(id), name, COUNT(*) c FROM documents GROUP BY name HAVING c > 1;
 
 

@ maxyfc의 대답을 더 자세히 살펴보면 , 중복 값으로 반환 된 모든 행을 찾아야 만 MySQL Workbench 에서 편집 할 수 있습니다.

SELECT * FROM table
   WHERE field IN (
     SELECT field FROM table GROUP BY field HAVING count(*) > 1
   ) ORDER BY field
 
 

나는 어떤 복제본에도 많은 용도가있는 JOIN aproaches를 보지 않을 것입니다.

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com

이 aproeach 실제로 두 배로 결과를 제공합니다.

SELECT t1.* FROM table as t1 LEFT JOIN table as t2 ON t1.name=t2.name and t1.id!=t2.id WHERE t2.id IS NOT NULL ORDER BY t1.name
 
 
CREATE TABLE tbl_master
    (`id` int, `email` varchar(15));

INSERT INTO tbl_master
    (`id`, `email`) VALUES
    (1, 'test1@gmail.com'),
    (2, 'test2@gmail.com'),
    (3, 'test1@gmail.com'),
    (4, 'test2@gmail.com'),
    (5, 'test5@gmail.com');

QUERY : SELECT id, email FROM tbl_master
WHERE email IN (SELECT email FROM tbl_master GROUP BY email HAVING COUNT(id) > 1)
 
   
 

위의 결과를 보았고 중복 된 단일 열 값을 검사해야하는 경우 쿼리가 제대로 작동합니다. 예를 들어 이메일.

그러나 더 많은 열을 확인하고 결과 조합을 확인하여이 쿼리가 올바르게 작동하는지 확인하려면 다음을 수행하십시오.

SELECT COUNT(CONCAT(name,email)) AS tot,
       name,
       email
FROM users
GROUP BY CONCAT(name,email)
HAVING tot>1 (This query will SHOW the USER list which ARE greater THAN 1
              AND also COUNT)
 
 

하나의 매우 늦은 공헌 ... 누군가가 줄을 서서 기다리는 데 도움이되는 경우 ... 은행 애플 리케이션에서 일치하는 쌍의 거래 (실제로 계좌 간 송금의 양측)를 찾고, 각 계좌 간 이체 거래의 '시작'과 '끝'이었기 때문에 다음과 같이 끝 냈습니다.

SELECT 
    LEAST(primaryid, secondaryid) AS transactionid1,
    GREATEST(primaryid, secondaryid) AS transactionid2
FROM (
    SELECT table1.transactionid AS primaryid, 
        table2.transactionid AS secondaryid
    FROM financial_transactions table1
    INNER JOIN financial_transactions table2 
    ON table1.accountid = table2.accountid
    AND table1.transactionid <> table2.transactionid 
    AND table1.transactiondate = table2.transactiondate
    AND table1.sourceref = table2.destinationref
    AND table1.amount = (0 - table2.amount)
) AS DuplicateResultsTable
GROUP BY transactionid1
ORDER BY transactionid1;

결과적으로 DuplicateResultsTable 은 일치하는 (즉 중복 된) 트랜잭션을 포함하는 행을 제공하지만 두 번째 동일한 쌍과 일치하는 동일한 트랜잭션 ID를 역순으로 제공하므로 첫 번째 트랜잭션 ID로 그룹화 할 외부 SELECT 가 있습니다. LEASTGREATEST 를 사용하여 두 개의 트랜잭션 LEAST 가 항상 같은 순서로 정렬되도록합니다. 그러면 첫 번째 트랜잭션에 의해 GROUP 에 대해 안전하게되므로 모든 중복 된 일치를 제거합니다. 약 2 백만 초에 약 백만 건의 레코드를 검색하고 12,000 개 이상의 일치 항목을 식별했습니다. 물론 transactionid가 중요한 인덱스이며, 이는 실제로 도움이되었습니다.

 
 
SELECT * 
FROM `dps` 
WHERE pid IN (SELECT pid FROM `dps` GROUP BY pid HAVING COUNT(pid)>1)
 
 
SELECT 
    t.*,
    (SELECT COUNT(*) FROM city AS tt WHERE tt.name=t.name) AS count 
FROM `city` AS t 
WHERE 
    (SELECT count(*) FROM city AS tt WHERE tt.name=t.name) > 1 ORDER BY count DESC
본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.
번호 제목 글쓴이 날짜 조회 수
공지 오라클 기본 샘플 데이터베이스 졸리운_곰 2014.01.02 87189
공지 [SQL컨셉] 서적 "SQL컨셉"의 샘플 데이타 베이스 SAMPLE DATABASE of ORACLE 가을의 곰을... 2013.02.10 79405
공지 [G_SQL] Sample Database 가을의 곰을... 2012.05.20 96121
78 [Kafka] Kafka 한번 살펴보자... Quickstart file 졸리운_곰 2021.06.18 1315
77 Java Kafka Producer, Consumer 예제 구현 Java를 이용하여 Kafka Producer와 Kakfa Consumer를 구현해보자. file 졸리운_곰 2021.06.18 1172
76 Beginner’s Guide to Understand Kafka file 졸리운_곰 2021.06.18 1575
75 [Kafka] Kafka 설치/실행 및 테스트 file 졸리운_곰 2021.06.18 1068
74 [java] [kafka] [Kafka] 개념 및 기본예제 file 졸리운_곰 2021.06.16 2172
73 Getting started with Apache Kafka in Python file 졸리운_곰 2020.09.10 2263
72 [Kafka] 다운로드 및 Quick Start file 졸리운_곰 2020.09.07 1902
71 [Kafka] 기본 개념잡기 file 졸리운_곰 2020.09.07 1724
70 Flume Integration with Kafka file 졸리운_곰 2019.04.16 2089
69 빅데이터: 플럼(Flume) 토폴로지 설계 file 졸리운_곰 2019.04.16 1605
68 실시간 처리를 위한 분산 메시징 시스템 카프카(Kafka) file 졸리운_곰 2018.05.12 1414
67 Flume과 Kafka를 사용한 초당 100만개 로그 수집 테스트 file 졸리운_곰 2018.05.12 1403
66 웹 크롤링 / web crwaling / web scraping / 웹 스크래핑 file 졸리운_곰 2017.07.09 1849
65 빅데이터 단지 몇퍼센트의 예측 정확성을 위하여 장애로 가득찬 빅데이터 시스템을 도입하여야 하는가에 대한 의문! file 졸리운_곰 2017.03.20 1615
64 빅데이터: 플럼(Flume) 토폴로지 설계 file 졸리운_곰 2017.03.20 1422
63 [실시간 분석 시스템] Apache Flume를 활용한 데이터 수집(1) file 졸리운_곰 2017.03.06 1325
62 [실시간 분석 시스템] 데이터 수집 #2 Apache Sqoop을 활용하여 RDBMS 데이터 수집(2) file 졸리운_곰 2017.03.06 1388
61 [실시간 분석 시스템] 데이터 수집 #2 Apache Sqoop을 활용하여 RDBMS 데이터 수집(1) file 졸리운_곰 2017.03.06 1113
60 [실시간 분석 시스템] 데이터 수집 #1 오픈 소스 수집기 비교 file 졸리운_곰 2017.03.06 1755
59 [실시간 분석 시스템] 일단 데이터 들여다 보기 file 졸리운_곰 2017.03.06 1951
대표 김성준 주소 : 경기 용인 분당수지 U타워 등록번호 : 142-07-27414
통신판매업 신고 : 제2012-용인수지-0185호 출판업 신고 : 수지구청 제 123호 개인정보보호최고책임자 : 김성준 sjkim70@stechstar.com
대표전화 : 010-4589-2193 [fax] 02-6280-1294 COPYRIGHT(C) stechstar.com ALL RIGHTS RESERVED