nltk入门函数解释(concordance,similar,common_contexts)

  1. #from nltk.book import *;   #导入NTLK包中book中的所有的例子模型  
  2.   
  3. #print(text1);  #输出book中text1的相关信息  
  4.   
  5. #text1.concordance("monstrous");    #在text1中找到特定单词并显示出上下文  
  6. #print("monstrous in text1 similar to");  
  7. #text1.similar("monstrous");    #在text1找到用法、意义与该单词相似的词  
  8. #print();  
  9.   
  10. #print("monstrous in text2 similar to");  
  11. #text2.similar("monstrous");    #在text2找到用法、意义与该单词相似的词  
  12. #print();  
  13.   
  14. #text2.common_contexts(["monstrous", "very"]);    #在text2找到用法、意义与该单词集合相似的词  
  15. #print();  
  16.   
  17. #print(len(text3));     #显示text3长度  
  18. #print();  
  19.   
  20.   
  21. #print(sorted(set(text3)));     #筛选出text3中所有单词和字符(不重复)并按照字母顺序排序  
  22. #print(len(set(text3)));     #测定text3中出现的单词和字符数(不重复)  
  23.   
  24.   
  25. ''''' 
  26. from __future__ import  division; 
  27. from nltk.book import text3; 
  28. a = 1.0 * len(text3) / len(set(text3)); 
  29. print(a); 
  30. '''  
  31.   
  32.   
  33. from __future__ import  division;  
  34. from nltk.book import *;  
  35.   
  36. def lexical_diversity(text):  
  37.     return len(text) / len(set(text));      #建立函数测算某个文本中所有单词出现的平均次数  
  38.   
  39. def percentage(count, total):  
  40.     return 100 * count / total;     #建立函数测算某个单词在某个文本中所占的百分比  
  41.   
  42. print(lexical_diversity(text3));  
  43. print(percentage(text4.count("a"), len(text4)));  

你可能感兴趣的:(自然语言处理,python,自然语言处理,nltk)