F7 project

시작에 앞서 본 내용은 새롭게 알게 된 정보 또는 방법론을 기록하기 위함이며 내용에 부족한 점이 있으니 이점 유의 부탁드립니다. 띄어쓰기 없이 여러 번 반복되는 문자 처리 바로 알아보기 re.sub(f'(\\S{{{n},}}?)\\1+', '\\1', i) 활용방향 Ex_Before : "Eazyyyyyyyyyyy" , "아ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ 진짜 웃겨ㅕㅕㅕㅕ", "어쩔티비어쩔티비어쩔티비어쩔티비" Ex_After : "Eazy" , "아ㅋ 진짜 웃겨ㅕ", "어쩔티비" 텍스트 전처리 과정에서 위 예시와 같이 의미 없는 반복된 문자를 마주하게 되는데, 이 처럼 띄어쓰기 없이 반복되는 문자는 단어 토큰을 증가시키는데 한몫 한다. 여러 번 반복되는 문자를 한 자리만 남도록 하여 단어 토큰 통일화하려는 시도로써,..