So, we have some number of tokens and the vocabulary size is 29,066. Just to give you an indication that bigrams are actually very, very sparse.
हमारे पास कुछ संख्या में टोकन हैं और शब्दावली का आकार 29,066 है। बस आपको यह संकेत देने के लिए कि बाईग्राम वास्तव में बहुत, बहुत स्पारस हैं।