새로운 단문 메시지 압축 도구: ts_sms
2024-12-30
ts_sms는 대규모 언어 모델을 사용하는 단문 메시지 압축 도구입니다. 손실 없는 압축 기술을 사용하여 통계적 중복을 식별하고 제거함으로써 비트 수를 줄이며 정보 손실이 없습니다. brotli와 같은 도구와 비교하여 ts_sms는 작은 메시지 압축에서 이점이 있습니다. Linux 및 Windows 버전을 사용할 수 있습니다. 핵심 기술은 ts_zip과 유사하며, 산술 부호화와 호환되는 특정 패딩 시스템을 사용하여 메시지 길이를 명시적으로 인코딩할 필요가 없습니다.
개발