🔤n-gram 생성기

텍스트를 n개 단위 토큰으로 분할

분석할 텍스트

자르는 단위

n (몇 개씩 묶을지 — 2면 2글자 또는 2어절)

표에 표시할 개수 (빈도 높은 순)

공백 처리 (문자 단위일 때만 적용)

n-gram 생성기 사용법

n-gram은 텍스트를 앞에서부터 한 칸씩 밀면서 n개씩 잘라 낸 조각입니다. 검색어 자동완성, 오타 교정, 표절 검사, 간단한 언어 모델처럼 텍스트를 다루는 작업에서 기본 재료로 쓰입니다. 이 도구는 붙여넣은 글을 문자 단위 또는 어절 단위로 잘라 빈도가 높은 순으로 정리해 줍니다.

단위 선택이 결과를 크게 바꿉니다. 문자 단위는 보이는 글자 하나를 1글자로 세며, 이모지나 결합 문자도 하나로 묶어 셉니다. 어절 단위는 공백으로 나눈 덩어리를 하나로 봅니다. 한국어는 형태소 분석이 아니라 어절과 음절 기준이라는 점에 주의하세요. '먹었다'는 어절 하나이자 음절 셋으로 다뤄지며, 어간과 어미를 나누지는 않습니다.

표에는 순위, n-gram, 빈도, 비율이 나오고 탭 구분으로 한 번에 복사할 수 있습니다. 비율은 전체 n-gram 개수 대비 값입니다. 텍스트보다 n이 크면 만들 수 없다는 안내가 나오고, 종류가 표시 개수보다 많으면 상위 몇 개만 보여 주고 있다는 사실을 결과 위에 표시합니다. 입력은 5만 자까지 처리하며, 붙여넣은 글은 서버로 전송되지 않고 브라우저 안에서만 계산됩니다.

자주 묻는 질문

한국어도 형태소 단위로 잘라 주나요?

아니요. 이 도구는 형태소 분석을 하지 않고 어절(공백 단위) 또는 음절(문자 단위)로만 자릅니다. 어간과 어미를 나누려면 별도의 형태소 분석기가 필요합니다.

이모지가 섞여 있으면 몇 글자로 세나요?

문자 단위에서는 보이는 글자 기준으로 세기 때문에 이모지 하나는 1글자입니다. 브라우저가 이 기능을 지원하지 않으면 코드포인트 기준으로 세며, 그 경우 결과 위에 그 사실을 표시합니다.

n-gram 생성기 사용법

자주 묻는 질문

같은 카테고리 도구