LLMs Decifram uma Cifra de Notação Musical Bizantina

Pesquisadores descobriram que grandes modelos de linguagem como Claude e GPT-4 conseguem decifrar uma cifra peculiar baseada no bloco Unicode de notação musical bizantina. Essa cifra se assemelha a uma cifra de César, mas com um deslocamento de 118784. Os modelos conseguem decifrar essa cifra diretamente, sem raciocínio em cadeia, alcançando taxas de sucesso ainda maiores do que com cifras de César regulares. Os pesquisadores levantam a hipótese de que isso se deve a uma relação linear entre a adição em um intervalo específico de Unicode e a adição no espaço de tokens, permitindo que os modelos aprendam uma cifra de deslocamento baseada nessa relação. Esse fenômeno sugere a existência de mecanismos ainda não compreendidos dentro dos LLMs.