보이지 않는 문자 제거기

유니코드에는 전혀 시각적 공간을 차지하지 않는 문자가 포함되어 있습니다. 일부는 좋은 이유로 존재합니다: 제로 너비 비결합자는 페르시아어를 올바르게 쓰기 위해 필요하며, 가족 이모지와 같은 이모지는 여러 그림이 제로 너비 결합기로 붙여져 만들어집니다. 다른 것들은 순수한 형식으로, 워드 프로세서가 파일 시작 부분에 남기는 바이트 순서 마크와 같은 것입니다. 이들은 화면에 나타나지 않기 때문에 복사 및 붙여넣기를 통해 눈에 띄지 않게 이동하며 CMS, 스프레드시트 또는 코드베이스에 남게 됩니다.

왜 문제가 발생하나요?

보이지 않는 문자는 조용히 문제를 일으킵니다. 키워드 안의 제로 너비 공백은 검색이 일치하지 않게 만듭니다. CSV 열의 줄 바꿈 방지 공백은 숫자 가져오기를 중단시킵니다. URL 슬러그의 부드러운 하이픈은 404를 생성합니다. 코드에서 식별자 안의 보이지 않는 문자는 화면에서 두 식별자가 동일하게 보이기 때문에 이해할 수 없는 오류 메시지를 생성합니다. 양방향 오버라이드 문자는 소스 코드의 한 줄이 실제 실행되는 순서와 완전히 다른 순서로 표시되게 할 수 있으며, 이는 잘 알려진 트로이 목마 소스 공격의 기초입니다.

숨겨진 메시지와 프롬프트 주입

이 문자들 중 일부는 데이터를 전달할 수 있습니다. 유니코드 태그 블록은 인쇄 가능한 ASCII에 직접 매핑되므로 태그 문자의 연속은 문자 그대로 읽을 수 있는 문장입니다. 변형 선택자는 임의의 바이트를 인코딩하는 데 동일한 방식으로 남용될 수 있습니다. 두 가지 모두 텍스트 내부에 지침을 숨기기 위해 사용되며, 나중에 AI 도우미에 붙여넣기 위해 사용됩니다. 이 도구는 두 가지 모두를 해독하여 숨겨진 내용을 읽을 수 있게 합니다.

이 도구는 이를 어떻게 처리하나요?

모든 발견은 맹목적으로 삭제되는 것이 아니라 분류됩니다. 텍스트에 정당한 용도가 없는 문자는 확인된 발견으로 표시되고 제거됩니다. 페르시아어 문자 사이의 제로 너비 비결합자나 이모지 내부의 결합자와 같이 있을 수 있는 문자는 표시되지만 주의하여 처리됩니다 - 이모지 결합자는 기본적으로 유지되며, 이를 제거하면 하나의 이모지가 세 개로 나뉩니다. 이러한 구분은 텍스트를 정리하는 것과 손상시키는 것의 차이입니다.