开发者社区 问答 正文

java如何实现数据文件的自动采集?

根据指定的目录,从FTP服务器将不定时推送的新文件采集到对应的数据库中,并且不会重复采集。文件基本是用YYYYMMDDHH格式的文件名区分,提供一下程序或者思路参考学习下

展开
收起
蛮大人123 2016-03-26 15:22:44 3724 分享 版权
1 条回答
写回答
取消 提交回答
  • 我说我不帅他们就打我,还说我虚伪

    首先,分析你要采集的信息是什么,对应设计你的数据库;
    其次,编写文件内容处理的代码,解析文件的内容,生成解析后的数据,使用jdbc或者ORM框架完成数据入库;
    最后,使用FTP连接工具如FTPClient,定时从服务器指定目录下载文件,循环调用文件解析模块,并记录此次下载的时间。
    我觉得你可以直接是纯java后台应用就够了。你需要弄清楚文件解析规则,存储什么数据。

    2019-07-17 19:16:19
    赞同 展开评论
问答分类:
问答地址: