前言
空余时间写了一个工具:
利用 SpringBoot
只需要一行命令即可统计自己写了多少个字。
java -jar nows-0.0.1-SNAPSHOT.jar /xx/Hexo/source/_posts
传入需要扫描的文章目录即可输出结果(目前只支持 .md
结尾 Markdown
文件)
当然结果看个乐就行(40 几万字),因为早期的博客我喜欢大篇的贴代码,还有一些英文单词也没有过滤,所以导致结果相差较大。
如果仅仅只是中文文字统计肯定是准的,并且该工具内置灵活的扩展方式,使用者可以自定义统计策略,具体请看后文。
其实这个工具挺简单的,代码量也少,没有多少可以值得拿出来讲的。但经过我回忆不管是面试还是和网友们交流都发现一个普遍的现象:
大部分新手开发都会去看多线程、但几乎都没有相关的实践。甚至有些都不知道多线程拿来在实际开发中有什么用。
为此我想基于这个简单的工具为这类朋友带来一个可实践、易理解的多线程案例。
至少可以让你知道:
- 为什么需要多线程?
- 怎么实现一个多线程程序?
- 多线程带来的问题及解决方案?
单线程统计
再谈多线程之前先来聊聊单线程如何实现。
本次的需求也很简单,只是需要扫描一个目录读取下面的所有文件即可。
所有我们的实现有以下几步:
- 读取某个目录下的所有文件。
- 将所有文件的路径保持到内存。
- 遍历所有的文件挨个读取文本记录字数即可。
先来看前两个如何实现,并且当扫描到目录时需要继续读取当前目录下的文件。
这样的场景就非常适合递归:
public List<String> getAllFile(String path){ File f = new File(path) ; File[] files = f.listFiles(); for (File file : files) { if (file.isDirectory()){ String directoryPath = file.getPath(); getAllFile(directoryPath); }else { String filePath = file.getPath(); if (!filePath.endsWith(".md")){ continue; } allFile.add(filePath) ; } } return allFile ; } }
读取之后将文件的路径保持到一个集合中。
需要注意的是这个递归次数需要控制下,避免出现栈溢出(
StackOverflow
)。
最后读取文件内容则是使用 Java8
中的流来进行读取,这样代码可以更简洁:
Stream<String> stringStream = Files.lines(Paths.get(path), StandardCharsets.UTF_8); List<String> collect = stringStream.collect(Collectors.toList());
接下来便是读取字数,同时要过滤一些特殊文本(比如我想过滤掉所有的空格、换行、超链接等)。
扩展能力
简单处理可在上面的代码中遍历 collect
然后把其中需要过滤的内容替换为空就行。
但每个人的想法可能都不一样。比如我只想过滤掉空格、换行、超链接
就行了,但有些人需要去掉其中所有的英文单词,甚至换行还得留着(就像写作文一样可以充字数)。
所有这就需要一个比较灵活的处理方式。
看过上文《利用责任链模式设计一个拦截器》应该很容易想到这样的场景责任链模式再合适不过了。
关于责任链模式
具体的内容就不在详述了,感兴趣的可以查看上文。
这里直接看实现吧:
定义责任链的抽象接口及处理方法:
public interface FilterProcess { /** * 处理文本 * @param msg * @return */ String process(String msg) ; }
处理空格和换行的实现:
public class WrapFilterProcess implements FilterProcess{ @Override public String process(String msg) { msg = msg.replaceAll("\\s*", ""); return msg ; } }
处理超链接的实现:
public class HttpFilterProcess implements FilterProcess{ @Override public String process(String msg) { msg = msg.replaceAll("^((https|http|ftp|rtsp|mms)?:\\/\\/)[^\\s]+",""); return msg ; } }
这样在初始化时需要将这些处理 handle
都加入责任链中,同时提供一个 API
供客户端执行即可。
这样一个简单的统计字数的工具就完成了。