到位的一个同学的问题。
在台湾某学术网站,下载中/英等学术性pdf,里面都是专业的中英文翻译。所以目的就是通过相关数据处理,提取所有pdf内容,对中英文文档进行对比。

lyq 7705b0a70b 更新 'readme.md' 7 years ago
src ca15d9768c 完成 pdf批量转换为txt 7 years ago
.gitignore c27b0dc015 添加readme 7 years ago
pom.xml ca15d9768c 完成 pdf批量转换为txt 7 years ago
readme.md 7705b0a70b 更新 'readme.md' 7 years ago

readme.md

到位的一个同学的问题。

在台湾某学术网站,下载中/英等学术性pdf,里面都是专业的中英文翻译。所以目的就是通过相关数据处理,提取所有pdf内容,对中英文文档进行对比。甚至可以通过机器学习,让机器更好的翻译,而不是人工对每篇文章都提供中英文文档。

解决问题:

  • 1、部署爬虫,网站批量下载文档。
  • 2、批量读取所有pdf文档,对文档每一句进行划分,随机提取100条句子。

使用: 1、clone代码 2、设置main.java中的项目目录,输出文件。 3、运行main代码即可。