[bash:uniq, sort] 한글 문자열에 대한 중복 제거 문제

반달가면|2016년 12월 29일
Posts

[bash:uniq, sort] 한글 문자열에 대한 중복 제거 문제

반달가면|2016년 12월 29일

같은 문자열의 행이 연속될 경우 중복을 제거하거나 중복되는 회수를 확인하기 위해 uniq 명령을 종종 사용하게 된다(uniq의 기본적인 활용에 대한 내용은 이전 게시물을 참고하자. 여기로). 매우 요긴한 기능을 제공하지만, 한글에서는 문제가 발생할 수 있다는 사실을 최근에 발견. 아래의 예시를 보자. 글자수가 같으면 동일한 문자열로 간주하는 것처럼 보인다. # my_data.txt 파일 내용 확인 cat my_data.txt 나비 강아지 메뚜기 메뚜기 # 중복 제거 uniq my_data.txt 나비 강아지 위의 예시에서 "강아지"와 "메뚜기"는 다른 단어임에도 불구하고 uniq에서는 "메뚜기"가 제거되었다. 인터넷을 좀 찾아보니, 지역정보(locale)와 관계가 있는 것

Related Posts

3 posts
엑셀 하이퍼링크 기초 다지기 링크로 삽입과 일괄 제거하는 법

엑셀 하이퍼링크 기초 다지기 링크로 삽입과 일괄 제거하는 법

덕질남녀|2026년 5월 27일|IT리뷰

안녕하세요~ 덕질남녀입니다. 오늘은 엑셀 실무에서 정말 자주 쓰이지만 제대로 알지 못하면 업무 효율을 떨어뜨리는 주범이 되는 기능에 대해 알아보려고 합니다. 바로 문서 내에서 특정 파일이나 웹사이트 경로로 바로 이동할 수 있게 도와주는 '링크'설정인데요. 편리할 때도 많지만 단순 텍스트를 입력하는 상황에서 자꾸 파란색 폰트와 밑줄 서식이 자동 생성되어 불편을 겪는 경우도 많습니다. 그래서 이번 시간에는 엑셀 기초를 탄탄히 다지고 실무 스트레스를 봉쇄할 수 있는 핵심 노하우를 정리해드립니다. ☑️엑셀 하이퍼링크 삽입하는 법 : 원하는 주소 연결하기 기본적으로 특정 셀에 웹 주소(url등)나 이메일을 입력하면.......

돌아기책추천 리틀천재 돌잡이 한글 아기첫전집

돌아기책추천 리틀천재 돌잡이 한글 아기첫전집

돌아기책추천 리틀천재 돌잡이 한글 아기첫전집 책을 이제서서히 좋아하게 되는 우리딸 근데 막연하게 글 많은건 지루해하고 짧고 간단한건 좋아하는데 아무래도 이제 슬 한글을 노출시켜야해서 한글로 전집을 딱!!!!!! 근데 워낙에유명한 돌잡이한글이라 진짜 궁금했는데 제딸이 이렇게 좋아할줄 몰랐어요! ㅋㅋㅋㅋ 그래서 결과는 저는 대만족ㅋㅋ 수학이랑 명화도 궁금해질정도니까요! 열자마자 딱 아이들이 좋아하는 책으로 되어있고 확실히 움직이면서 그리고 체험하면서 하는거라 다른책이랑 다르더라구요. 그래서 그런지 책집중도도 좋았어요! 돌잡이한글! 사회관계, 자기이해, 논리사고, 자연탐구 놀이스티커도 있어요! 이건 조금더 있다.......

[프로그램 리뷰] 한컴오피스 한글 맞춤법 검사 및 단어 전환

[프로그램 리뷰] 한컴오피스 한글 맞춤법 검사 및 단어 전환

윤피티연구소|2026년 4월 6일|IT리뷰

한컴오피스 한글 맞춤법 검사 및 단어 전환 안녕하세요, 윤피티입니다. 문서 작업을 할 때 내용이 가장 중요하겠지만, 맞춤법과 띄어쓰기도 무시할 수 없잖아요. 그럴 때면, 맞춤법 검사를 이용하게 되지 않나요? 보통 네이버 맞춤법 검사기, 혹은 ㈜나라인포테크에서 제공하는 맞춤법/문법 검사기를 많이 쓰시더라고요. 하지만 매번 맞춤법 검사 웹 사이트에 접속하는 것도 불편한 부분이 많잖아요. 한컴오피스 한글(HWP)에서도 맞춤법 검사 기능을 사용할 수 있습니다. 그래서 오늘은 한컴오피스 한글의 맞춤법 검사 및 단어 전환 기능을 직접 사용해 보고 장점과 한계에 대해 리뷰해 보도록 하겠습니다. 한컴오피스 한글에서는 기본적으로 맞.......