language:

• id datasets:
• allenai/c4

印尼语T5基础模型

本模型是基于印尼语mC4数据集（经过额外过滤处理）预训练的T5（文本到文本转换Transformer）模型。该模型仅为预训练版本，需经过微调才能应用于具体任务场景。

预训练详情

参照google/t5-v1_1-base标准训练100万步。

模型性能

待评估

局限性与偏差风险

由于训练数据内容偏差（涉及伦理问题/有害信息/倾向性内容），该语言模型在使用大规模语料库时可能产生具有偏差性（不道德/有害/带偏见）的输出结果。请注意该潜在风险，建议仅在不会造成损害的应用程序场景中谨慎使用。

致谢

感谢Tensorflow Research Cloud提供TPU v3-8计算资源支持。