Skip to main content

estimate_tokens_memory

mecab_ko_core::memory

Function estimate_tokens_memory 

Source 
pub fn estimate_tokens_memory(tokens: &[Token]) -> usize
Expand description

토큰 메모리 사용량 추정

토큰 벡터의 메모리 사용량을 추정합니다.