🧺 LLM 곡백-특문 세탁기 πŸ€–

LLM이 μƒμ„±ν•œ ν…μŠ€νŠΈμ—λŠ” λˆˆμ— 보이지 μ•ŠλŠ” 특수 문자(μœ λ‹ˆμ½”λ“œ 곡백, 특수 ν•˜μ΄ν”ˆ λ“±)κ°€ 포함될 수 μžˆμŠ΅λ‹ˆλ‹€. μ΄λŠ” μžμ‹ λ„ λͺ¨λ₯΄λŠ” 사이에 ν•΄λ‹Ή ν…μŠ€νŠΈκ°€ AI에 μ˜ν•΄ μƒμ„±λ˜μ—ˆμŒμ„ λ‚˜νƒ€λ‚΄λŠ” '낙인'처럼 μ‚¬μš©λ  수 μžˆμŠ΅λ‹ˆλ‹€. μ•„λž˜ 도ꡬλ₯Ό μ‚¬μš©ν•˜μ—¬ μ΄λŸ¬ν•œ μˆ¨κ²¨μ§„ 문자λ₯Ό ν‘œμ€€ 문자둜 λ³€ν™˜ν•˜κ³  ν…μŠ€νŠΈλ₯Ό '세탁'ν•˜μ„Έμš”.