Un dato poco conocido es que interactuar con inteligencia artificial en coreano puede resultar entre un 50% y un 70% más costoso que hacerlo en inglés. En inglés, aproximadamente una palabra corresponde a un token. por ejemplo, «Hello» equivale a 1 token, mientras que «artificial intelligence» se descompone en 2 tokens. Sin embargo, el coreano presenta una particularidad: la expresión «안녕하세요» (hola) puede dividirse en 2 o 3 tokens debido a la estructura combinatoria del idioma.
Tokenización Coreana: Desafíos del Idioma
written by Editor de Tecnologia
67
Editor de Tecnologia
Carlos Vega es editor de Tecnología y sigue de cerca la innovación digital, la inteligencia artificial, el hardware, el software y las grandes plataformas tecnológicas. Explica cómo los avances tecnológicos afectan la vida cotidiana y el trabajo.
previous post
