开发者社区 > ModelScope模型即服务 > 自然语言处理 > 正文

【SPACE-T表格问答预训练模型-中文-通用领域-base】fine-tuning数据格式是啥?

数据格式不知道什么意思,也不知道怎么生成的,而且代码跑不通

展开
收起
嗷嗷狠 2023-03-04 20:13:02 1298 1
1 条回答
写回答
取消 提交回答
  • agg表示SELECT的聚合函数,序号和上图中的list的index对应,分别表示,求平均、求最大值、求最小值、计数、求和、比较、聚合、对比是否相同、环比、同比、趋势。

    sel表示SELECT的列序号,序号和header的index对应。

    action表示多轮对话中的转换,具体如上图中的定义。

    cond_conn_op表示WHERE的连接符,和上图中的index对应。

    conds表示WHERE的每一个条件,数组里的每一个item表示:1)列序号、2)操作符,和

    cond_ops这个的序号对应、3)值出现在question中的字符串(这个值如果为Null则表示没有WHERE条件)、4)值归一化后的字符串。

    history_sql表示历史SQL,和sql这个字段格式相同,只是用单轮的话可以置为None。

    wvi_corenlp表示WHERE条件中每个值对应question中的序号,如果只为-100表示没有对应到question。

    bert_knowledge:与question_tok等长,每一位表示question中的token是否和table schema有linking

    header_knowledge:与header等长,每一位表示该header是否和question中的token是否有linking

    image.png

    训练和测试代码是可以跑通的,如果跑不通可以升级下modelscope库试试看,如果还有问题的话,可以贴下报错代码我这里给您解答下

    2023-03-07 16:07:11
    赞同 1 展开评论 打赏

包含命名实体识别、文本分类、分词、关系抽取、问答、推理、文本摘要、情感分析、机器翻译等多个领域

热门讨论

热门文章

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载