博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
单词 统计续
阅读量:5246 次
发布时间:2019-06-14

本文共 3729 字,大约阅读时间需要 12 分钟。

 

  

第1步:输出单个文件中的前 N 个最常出现的英语单词。

功能1:输出文件中所有不重复的单词,按照出现次数由多到少排列,出现次数同样多的,以字典序排列。

功能2: 指定文件目录,对目录下每一个文件执行统计的操作。 

功能3:指定文件目录,是会递归遍历目录下的所有子目录的文件进行统计单词的功能。

功能4:输出出现次数最多的前 n 个单词, 

 例如, 提示统计统计前多少名:输入10。 就是输出最常出现单词的前 10 名。 当没有指明数量的时候,我们默认列出所有单词的频率。

2步:第二步:  支持 stop words

在一本小说里, 频率出现最高的单词一般都是 "a",  "it", "the", "and", "this", 这些词, 可以做一个 stop word 文件 (停词表), 在统计词汇的时候,跳过这些词。  我们把这个文件叫 "stopwords.txt" file.  

第三步:  想看看常用的短语是什么, 怎么办呢?  

先定义短语:"两个或多个英语单词, 它们之间只有空格分隔".   请看下面的例子:

 

  hello world   //这是一个短语

 

  hello, world //这不是一个短语

 

同一频率的词组, 按照字典序来排列。

第四步:把动词形态都统一之后再计数。

想找到常用的单词和短语,但是发现英语动词经常有时态和语态的变化,导致同一个词,同一个短语却被认为是不同的。 怎么解决这个问题呢?

假设我们有这样一个文本文件,这个文件的每一行都是这样构成:

动词原型  动词变形1 动词变形2... ,词之间用空格分开。

e.g.  动词 TAKE 有下面的各种变形:take takes took taken taking

我们希望在实现上面的各种功能的时候,有一个选项, 就是把动词的各种变形都归为它的原型来统计。  

功能 支持动词形态的归一化

 

package piao;import java.io.BufferedReader;import java.io.File;import java.io.FileNotFoundException;import java.io.FileOutputStream;import java.io.FileReader;import java.io.IOException;import java.io.PrintStream;import java.util.ArrayList;import java.util.List;import java.util.Scanner;class letter{private char l;private int count;public char getL() {    return l;}public void setL(char l) {    this.l = l;}public int getCount() {    return count;}public void setCount(int count) {    this.count = count;}public letter() {};public letter(char l,int count) {    this.l=l;    this.count=count;}}class word{    private String value;    private int count;        public String getValue() {        return value;    }    public void setValue(String value) {        this.value = value;    }    public int getCount() {        return count;    }    public void setCount(int count) {        this.count = count;    }    public word() {};    public word(String value,int count)    {        this.value=value;        this.count=count;    }}public class Piao {    public static void main(String[] args)throws FileNotFoundException, IOException {        // TODO 自动生成的方法存根        Interface();        Scanner scan=new Scanner(System.in);        System.out.println("请选择:");        int num=scan.nextInt();        while(num!=0)             {        switch(num)        {        case 1:LetterList();break;        case 2:WordList();break;        case 3:System.out.println("输入数量n");int n=scan.nextInt();WordList(n);break;        }        Interface();        System.out.println("请选择:");        num=scan.nextInt();            }    }        public static void Interface()//主界面    {        System.out.println("1:统计字母数量及占比");        System.out.println("2:统计单词数量及占比");        System.out.println("3:统计前n个单词数量及占比");        System.out.println("按0退出");    }        public static void LetterList()throws FileNotFoundException, IOException//统计字母    {        File file=new File("F:/java开发/piao.txt");        BufferedReader br=new BufferedReader(new FileReader(file));        FileOutputStream out=new FileOutputStream("F:/java开发/jieguo.txt");        PrintStream p=new PrintStream(out);//文件写入流        String s;        int i=0;        double b=0;        int j=0;        double sum=0;        int count=0;        s=br.readLine();        char [] strArr1 = s.toCharArray();//转化为单个字符                for(i=0;i
list=new ArrayList
(); double sum=0; int count=0; s=br.readLine(); ss=br2.readLine(); String []s1=s.split(" ");//以空格为分割划分每个单词 String []s2=ss.split(" "); word []w=new word[s1.length]; for(i=0;i
list=new ArrayList
(); double sum=0; int count=0; s=br.readLine(); String []s1=s.split(" ");//以空格为分割划分每个单词 word []w=new word[s1.length]; for(i=0;i

 

  

 

转载于:https://www.cnblogs.com/gkl20173667/p/11066405.html

你可能感兴趣的文章
SFTP信任公钥配置及JSCH库
查看>>
mysql导入导出sql文件
查看>>
Start all over again
查看>>
BZOJ做题记录[0512~?]
查看>>
sin之舞---蓝桥杯练习
查看>>
java Log4j日志配置详解大全
查看>>
es6中的promise对象
查看>>
Python中的strip用于去除字符串的首位字符。
查看>>
【宋红康程序思想学习日记5】数组排序之冒泡法
查看>>
apache页面压缩mod_gzip实现
查看>>
ubuntu部署vsftpd
查看>>
SQL语句
查看>>
js中 函数也是对象
查看>>
APICloud |UIChatTools 模块demo
查看>>
netstat命令
查看>>
学会做笔记-子弹笔记学习概要二
查看>>
常用Git命令清单(转)
查看>>
gulp使用笔记
查看>>
sqli-labs(less-11-16)
查看>>
Apache 访问测试
查看>>