ソース見てにゃいから分からにゃいんだけど、良い感じに形態素解析した単語に変換掛けていると思っているんだけど、分割に失敗すると壊れるのかもしれにゃいね。