Led Large Book Summary Continued

由 pszemraj 开发

这是一个基于LED架构的大型书籍摘要生成模型，专门用于处理长文档摘要任务，特别是书籍内容的摘要生成。

文本生成

Transformers

支持多种语言

开源协议:Bsd-3-clause #长文档摘要 #书籍内容浓缩 #高精度ROUGE

下载量 92

发布时间 : 4/9/2023

模型介绍

内容详情

替代品

模型简介

该模型专注于长文档和书籍内容的摘要生成任务，基于LED（Longformer-Encoder-Decoder）架构优化，能够处理较长的输入文本并生成高质量的摘要。

模型特点

长文档处理能力

专门优化用于处理长文档和书籍内容，能够有效捕捉长距离依赖关系。

高质量摘要生成

在书籍摘要任务上表现优异，ROUGE-1得分达到31.2367。

多许可证支持

同时采用BSD-3-Clause和Apache-2.0许可证，提供灵活的使用选项。

模型能力

长文本摘要生成

书籍内容摘要

文档关键信息提取

使用案例

学术研究

科研论文摘要

为长篇科研论文生成简洁摘要，帮助研究人员快速了解论文核心内容。

出版行业

书籍内容摘要

为出版书籍生成内容摘要，用于营销或读者预览。

语言:

英语许可证:
bsd-3-clause
apache-2.0 库名称: transformers 标签:
长文档摘要
书籍摘要
书籍摘要数据集数据集:
kmfoda/booksum 评估指标:
rouge 流水线标签: 摘要生成小部件示例:
文本: 沿某一断层段的大地震并非随机间隔发生，因为破裂所需的应变能量需要时间积累。构造板块移动及其边界应变积累的速率大致均匀。因此，初步近似下，可以预期同一断层段的大破裂将以大致恒定的时间间隔发生。若后续主震在断层上的滑移量不同，则复发时间可能变化，周期性主震的基本概念需修正。对于大型板块边界破裂，长度和滑移量常有两倍差异。沿圣安德烈亚斯断层南段，复发间隔为145年，存在数十年波动。平均复发间隔的标准差越小，对未来主震的长期预测就能越精确。示例标题: 地震
文本: '一种典型的正向神经场算法。时空坐标输入神经网络，预测重建域中的值。随后，该域映射至传感器域，以传感器测量作为监督。类别与章节解决的问题包括：泛化（第2节）逆问题、不适定问题、可编辑性；对称性。混合表示（第3节）计算与内存效率、表示容量、可编辑性：前向映射（第4节）逆问题网络架构（第5节）频谱偏差、积分与导数。神经场操控（第6节）可编辑性、约束、正则化。表2：神经场工具箱的五类技术分别解决学习、推理与控制中的问题。（第3节）我们可通过可微分前向映射监督重建，变换或投影域（如基于2D图像的3D重建；第4节）借助适当网络架构选择，克服神经网络频谱偏差（模糊）并高效计算导数与积分（第5节）。最终，可操控神经场添加约束与正则化，实现可编辑表示（第6节）。这些技术共同构成解决神经场问题的“工具箱”。条件神经场包含三个组件：（1）编码器或推理函数€，给定观测0输出条件潜变量2，E(0)=2。2通常为低维向量，常称潜码或特征码。（2）映射函数4连接Z与神经场参数O：Y(z)=O；（3）神经场本身$。编码器€找到给定观测O最可能的z：argmaxz P(2/0)。解码器最大化逆条件概率，找到给定Z最可能的0：argmax P(Olz)。我们讨论不同编码方案及其最优性保证（第2.1.1节），全局与局部条件（第2.1.2节），及不同映射函数Y（第2.1.3节）2. 泛化假设需从部分或含噪点云估计合理3D表面形状。需在重建域定义合适的表面先验以泛化至部分观测。神经网络通过架构与参数0的函数空间表达先验，泛化受此函数空间归纳偏差影响（第5节）。' 示例标题: 科学论文
文本: '公平地说，理解《瑞克和莫蒂》需要极高的智商。其幽默极为微妙，若无扎实的理论物理基础，多数笑话会让普通观众摸不着头脑。瑞克的虚无主义世界观也巧妙融入角色塑造——其个人哲学深受《人民意志》等文献影响。粉丝们理解这些内涵，他们拥有真正欣赏这些笑话深度的智力，意识到这些笑话不仅有趣，更揭示了生命的深刻意义。因此，不喜欢《瑞克和莫蒂》的人确实是白痴——他们当然无法理解瑞克存在主义口头禅“Wubba Lubba Dub Dub”的幽默，这本身是对屠格涅夫俄国史诗《父与子》的隐晦引用。此刻我正窃笑想象那些愚钝的傻瓜在丹·哈蒙的天才智慧在他们电视屏幕上展开时困惑挠头的样子。多么可悲啊。😂

顺便一提，我确实有《瑞克和莫蒂》纹身。不，你不能看。这是专为女士准备的——且她们需证明智商与我相差不超过5点（最好更低）。无关个人，孩子😎' 示例标题: 瑞克与莫蒂
文本: 埃菲尔铁塔高324米（1,063英尺），约等同于81层建筑，是巴黎最高结构。其底座为边长125米（410英尺）的正方形。建造期间，它超越华盛顿纪念碑成为世界最高人造建筑，此称号保持41年直至1930年纽约克莱斯勒大厦竣工。它是首座达300米高度的建筑。1957年塔顶增设广播天线后，现比克莱斯勒大厦高5.2米（17英尺）。若不计发射器，埃菲尔铁塔是法国第二高独立结构，仅次于米约高架桥。示例标题: 埃菲尔铁塔参数: 最大长度: 64 最小长度: 8 禁止重复n元大小: 3 早停: 是重复惩罚: 3.5 编码器禁止重复n元大小: 4 束搜索数: 2 模型索引:
名称: pszemraj/led-large-book-summary-continued 结果:
- 任务: 类型: 摘要生成名称: 摘要生成数据集: 名称: kmfoda/booksum 类型: kmfoda/booksum 配置: kmfoda--booksum 拆分: 测试指标:
  - 类型: rouge 值: 31.2367 名称: ROUGE-1 已验证: 是验证令牌: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiOWI3NzQwMTUxOWRkOGVmZGYwZTkyODIxZmRhM2Y5N2FjYmM2MWEyMDNiN2JmODc3ODExNTAwZjhhZDJkNzNiYyIsInZlcnNpb24iOjF9.EYEvooI7WG94OinI4p5sNiuM1MAFVSYeb2ehv2lGe-B-qR1yvPVBBr7J3iI5UFegZsYciCLA6VRFUe8eQ8KNAg
  - 类型: rouge 值: 5.0148 名称: ROUGE-2 已验证: 是验证令牌: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiYzMxYjIzMWY2MTNkODczZWEzOGEzNjYxNzZjMTc0N2U3NmFhMWM5NWFiMzBjZDEwNTFkYjhhMGMwMjliY2JjOSIsInZlcnNpb24iOjF9.DmIc7iNjo5nm_T-uWehMCbcWjgY_WNGdRkiUXdzv96uFIRiVIoW03UspkGfzvjEiKRoa7OM403XZxNXuCjVJCQ
  - 类型: rouge 值: 15.7724 名称: ROUGE-L 已验证: 是验证令牌: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiNDUzNzNkYjUxMjE1MzZjMDhkNWE2MmZlMTg0OGM1NDc2M2JlZDJmNDI3M2YyZGM2NmY1ZDZlOWYxMzcyYmExZCIsInZlcnNpb24iOjF9.CVjivCusq1J_tiktqQ-pnsH6iOWdYrf5rwt9wlGoCgw4boXzDVivtHpe0MWlJ5L-XFY75SnrMXeunCBGOwONBQ
  - 类型: rouge 值: 28.494 名称: ROUGE-LSUM 已验证: 是验证令牌: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiYTY0MjI3NDNkYzI5ZjA1Nzg5MmE0MzY3OTZkM2U2ZWZkMDBjZjQzMjdjN2Q3Y2NiZjIwNzI1OWJhMzhjYzg4NiIsInZlcnNpb24iOjF9.A0iwWEti-OPFbi9TEpnEpC0rPCLP3Gw3Ns23Lz8e_zi4B_vlGrVW7weofzO8cuGVoC9kS-aJk2a5VGdXYh5KBw
  - 类型: 损失值: 4.777158260345459 名称: 损失已验证: 是验证令牌: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiZWZkNjdhNGNkNDUyYWNlNDgyNzkxNDdkNTZlOGQ0MmQ3ZGVjYjgwZTk2M2E4NjAwNWZkNGEzMTU2ZWFjMmFmMCIsInZlcnNpb24iOjF9.TTEWfYmpM4VPKn1Jukkwadj6C3HASvzTMJeTLHCHqd5Vr7s0X0PcIKvnyEVycwywFanfrgIg4Pyn0G_IVeYcBg
  - 类型: 生成长度值: 154.1908 名称: 生成长度已验证: 是验证令牌: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiMmI3YjZkNTZmMzNjMzMzODlhODFmNWFlNjNmODI0ZjE2ZWNjMzcxMWUyMGMzNzY2MDIzZWIwYTMxODk3M2Q3YiIsInZlcnNpb24iOjF9.nyUANcwiu-sb3vXMFIdzvdDPTBBhJOEQmdu25XSXRgwNSfugKDydAoHy2tdo9ZE8r32xxYDPoutER22APV4PCA