단어 목록을 병합하는 방법(중복 제거)은 무엇입니까?

Question

하나의 텍스트 파일에 있는 긴 고유 단어 목록(한 줄에 한 단어)을 편집하고 있습니다.

저는 Notepad++와 TextFXTools를 사용하여 단어 목록을 병합했고 제대로 작동했습니다. 목록 맨 아래에 새 단어를 추가하고 FXTools를 사용하여 중복 항목을 제거했습니다. 목록이 2백만 단어로 커질 때까지 작동했습니다. Notepad++는 이렇게 큰 목록이 있는 경우 자주 충돌합니다.

하나의 큰 목록에 새 단어 목록을 추가하고, 중복된 단어를 삭제하고, 고유한 단어만 유지하는 방법이 필요합니다. 이 작업을 어떻게 수행할 수 있습니까?

Answer 1

HTML5 브라우저에서 이 도구를 사용할 수 있습니다. http://textmechanic.com/Big-File-Tool-Remove-Duplicate-Lines.html

Answer 2

1. Excel을 열고 A1 Cell로 이동하여 제목을 입력하세요.
2. A2, A3, A4에 기록을 붙여넣으세요..... 셀
3. A1 Cell을 선택하고 Data-> Advance-> OK프롬프트가 나타나면 클릭하세요.
4. 클릭 Unique Data Only하고 클릭하세요OK
5. 이제 목록에는 중복 데이터가 없어야 합니다.