主题论文总结3:维基百科生成任务(持续更新ing...)

简介: 主题论文总结3:维基百科生成任务(持续更新ing...)
  1. 生成摘要
  • Re5:读论文 TWAG: A Topic-guided Wikipedia Abstract Generator_诸神缄默不语的博客-CSDN博客
  • 数据集:WikiSum

(1)提出数据集的:Generating wikipedia by summarizing long sequences.:提出了一个先抽取后生成的两阶段摘要生成模型,首先从网络资源中根据TF-IDF权重选择句子,然后将输入视作一个长序列,用transformer模型生成摘要。


(2)其他基于此数据集的研究

1)Generating summaries with topic templates and structured convolutional decoders.:用卷积(convolutional)encoder和分层(hierarchical)decoder,用Latent Dirichlet Allocation model (LDA)使decoder变得topic-aware。

2)Leveraging graph to improve abstractive multi-document summarization.

3)HierSumm Hierarchical transformers for multi-document summarization.:在抽取阶段用了一个learning-based model(我也不知道这是指啥),计算自然段间的learning-based model以建模其间依赖。


  1. 生成文章
  • 第一个做维基百科生成任务的论文:Automatically Generating Wikipedia Articles: A Structure-Aware Approach:用Integer Linear Programming (ILP)选择句子
  • Wikiwrite: generating wikipedia articles automatically.:评估被选句的coherence
  • WikiAsp: A Dataset for Multi-domain Aspect-based Summarization:探索Wikipedia的结构,构建aspect-based summarization dataset(手工打标aspects),用微调的RoBERTa模型识别输入自然段的aspects
  • Surfer100: Generating Surveys From Web Resources on Wikipedia-style:提到用预训练模型来做维基百科生成任务有个槽点在于预训练模型本来就是拿维基百科数据做的。对这一问题的解决方案就是用新生成的、预训练模型用来训练的数据之外的维基百科文章来做生成任务。


  1. 用Wikipedia的infoboxes的key-value pairs生成biography:An unsupervised approach to biography production using wikipedia.


  1. 关注女性传记生成:Generating Biographies on Wikipedia: The Impact of Gender Bias on the Retrieval-Based Generation of Women Biographies


相关文章
|
8月前
|
C++
24.【特殊函数篇==(十篇一章,持续更新~)】(一)
24.【特殊函数篇==(十篇一章,持续更新~)】
27 0
|
8月前
|
C语言
24.【特殊函数篇==(十篇一章,持续更新~)】(二)
24.【特殊函数篇==(十篇一章,持续更新~)】
19 0
|
9月前
|
Go
如何利用ChatPDF快速阅读英文论文,帮你写文章
如何利用ChatPDF快速阅读英文论文,帮你写文章
117 0
|
11月前
|
编译器 C语言 C++
【C++系列P1】带上这篇基础小宝典,进发C++!(持续更新ing~)
【C++系列P1】带上这篇基础小宝典,进发C++!(持续更新ing~)
|
12月前
|
机器学习/深度学习 数据挖掘 计算机视觉
Google新作 | 详细解读 Transformer那些有趣的特性(建议全文背诵)(二)
Google新作 | 详细解读 Transformer那些有趣的特性(建议全文背诵)(二)
73 0
|
12月前
|
机器学习/深度学习 数据可视化 计算机视觉
Google新作 | 详细解读 Transformer那些有趣的特性(建议全文背诵)(一)
Google新作 | 详细解读 Transformer那些有趣的特性(建议全文背诵)(一)
71 0
|
12月前
|
人工智能 自然语言处理 前端开发
Prompt工程师指南资料整合篇:Prompt最新前沿论文整理合集、工具和库推荐、数据集整合、推荐阅读内容等,超全面资料
Prompt工程师指南资料整合篇:Prompt最新前沿论文整理合集、工具和库推荐、数据集整合、推荐阅读内容等,超全面资料
|
机器学习/深度学习 数据采集 自然语言处理
【英文文本分类实战】之五——数据加载
【英文文本分类实战】之五——数据加载
|
机器学习/深度学习 自然语言处理 数据库
文本摘要数据集的整理、总结及介绍(持续更新ing...)
文本摘要数据集的整理、总结及介绍(持续更新ing...)
文本摘要数据集的整理、总结及介绍(持续更新ing...)
|
搜索推荐 vr&ar
预训练语言模型概述(持续更新ing...)
预训练语言模型概述(持续更新ing...)
预训练语言模型概述(持续更新ing...)