AI 助理
备案控制台
开发者社区 ModelScope模型即服务 自然语言处理 正文

微调 embedding 模型及数据构造

现在我希望对embedding模型进行微调，

模型的选择是bge -cn 1.5那款，

我的业务目标是针对多个成对的长文本产品描述进行微调，每对产品描述经过先验知识已知描述B是可以满足描述A的，现在微调的目的就是希望后续的召回文档里可以尽可能的召回的更加准确（从我格式化的产品列表里）

我尝试多种构建的方法，比如llama index中微调要求的问答对，也尝试了直接长文本对长文本的构建，效果都不太尽如人意，所以在此求助，想看看针对这样产品匹配的微调，我的数据要怎么构建才能保证一个高泛用，且可靠的训练集合，从而有效的提高我的Embedding模型的性能以及召回的准确率。

感谢~

展开
收起
游客5quottg3wayl6 2024-07-30 11:28:46 140 分享 版权
0 条回答
写回答
取消 提交回答
相关问答
this xml file does not appear to have any style in
47991
10
0
请问下 我访问接口不通 什么原因 Provisional headers are shown
1738
0
0
通过www和不带www的网址输入最终都指向www.我的域名.com，求指教
124191
28
0
购买阿里国外的云服务器是否可以访问谷歌？
80486
47
0
OSS的endpoint如何查看
36234
6
0
sql server的用户名和密码怎么查啊？
35548
21
0
配置了安全组规则，端口还是无法访问
32264
25
0
设置域名解析如何指向我的服务器url包括端口号
17587
2
0
域名在腾讯云备案成功，解析到阿里云服务器，提示仍需备案？
59502
30
0
Connection reset by peer的常见原因及解决办法
3777
1
0
ModelScope模型即服务

自然语言处理

包含命名实体识别、文本分类、分词、关系抽取、问答、推理、文本摘要、情感分析、机器翻译等多个领域

我要提问

相关文章

  • Java 大视界 -- Java 大数据机器学习模型在自然语言处理中的对抗训练与鲁棒性提升（205）
  • “日志别再只会翻了，教它自己说话”——聊聊用 NLP 玩转日志分析
  • 《10分钟开发电商页！CodeBuddy自然语言转代码实测：程序员效率革命》
  • Java 大视界 -- Java 大数据机器学习模型在自然语言生成中的可控性研究与应用（229）
  • 从“写SQL”到“聊数据”：NL2SQL如何用自然语言解锁数据库？

    • 热门讨论

    热门文章

  • modelscope-funasr实时设别，mode:2pass 还是online，2个有啥不一样？
  • modelscope-funasr 热词如何设置？
  • 本地运行示例报错No module named 'deepspeed'
  • modelscope-funasr有说话人分离功能吗？
  • 请问微调开元模型qwe1.5b 和 7b 分别支持数据集的上下文长度是多少个汉字/token？
  • modelscope-funasr下载模型文件总是报错，怎么解决？
  • modelscope-funasr目前版本支持 实时多人对话语音识别吗？
  • modelscope-funasr模型可以国产化吗？可以部署在昇腾NPU上吗？
  • modelscope-funasr支持粤语么？
  • modelscope-funasr更新版本后 报这个错了，怎么解决 ？
    • 展开全部
  • FastAPI开发者福音！FastAPI-MCP：将FastAPI秒变MCP服务器的开源神器，无需配置自动转换！
  • 智胜未来：国内大模型+Agent应用案例精选，以及主流Agent框架开源项目推荐
  • Cline：29.7K Star！一文详解VSCode最强开源AI编程搭子：一键生成代码+自动跑终端+操控浏览器...
  • FireCrawl：开源 AI 网络爬虫工具，自动爬取网站及子页面内容，预处理为结构化数据
  • 自然语言生成代码一键搞定！Codex CLI：OpenAI开源终端AI编程助手，代码重构+测试全自动
  • LLM 大模型学习必知必会系列(二)：提示词工程-Prompt Engineering 以及实战闯关
  • KAG：增强 LLM 的专业能力！蚂蚁集团推出专业领域知识增强框架，支持逻辑推理和多跳问答
  • Qlib：华尔街颤抖！微软开源金融AI量化投资神器，助力智能投研
  • 让AI读懂K线图！ChatTS-14B：字节开源的时间序列理解和推理大模型，自然语言提问秒解趋势密码！
  • RAG+AI工作流+Agent：LLM框架该如何选择，全面对比MaxKB、Dify、FastGPT、RagFlow、Anything-LLM,以及更多推荐
    • 展开全部
    还有其他疑问?
    咨询AI助理