CSGHub 开源大模型资产管理平台

简介: CSGHub是一个开源的大模型资产管理平台,支持LLM及其应用的全生命周期管理。用户可通过Web界面、Git命令或Chatbot进行资产的上传、下载、存储、校验和分发。他们刚发不到了阿里云云市场

CSGHub是一个开源、可信的大模型资产管理平台,旨在帮助用户治理大型语言模型(LLM)及其应用生命周期中涉及的资产,如数据集、模型文件和代码等。用户可以通过Web界面、Git命令行或自然语言Chatbot等方式,对这些资产进行上传、下载、存储、校验和分发。此外,CSGHub还提供了微服务子模块和标准化的OpenAPIs,方便用户将其与现有系统集成。


CSGHub的核心功能包括统一管理LLM资产、支持HTTPS和SSH协议的Git命令以及Web界面操作、大模型能力扩展、权限和安全控制以及支持私有化部署。它提供了类似私有化Huggingface的功能,可以管理LLM资产,类似于OpenStack Glance管理虚拟机镜像、Harbor管理容器镜像以及Sonatype Nexus管理制品的方式。


技术设计方面,CSGHub整合了Git服务器、Git LFS(Large File Storage)协议和对象存储服务(OSS),提供了可靠的数据存储层和灵活的基础设施访问层。它还利用了Apache Arrow和DuckDB等开源项目,支持Parquet数据文件格式的预览,便于本地化数据集管理。


CSGHub的使命是为用户提供一个开源开放的、针对大模型原生设计的资产管理平台,支持私有化部署和离线运行,以创造一个安全、高效且可信赖的环境,让用户能够更好地管理和运用大模型核心资产数据。更多详细信息和最新消息可以通过访问CSGHub的开源项目页面或传神社区官方网站获取。



相关文章
|
SQL 分布式计算 数据管理
12款开源数据资产(元数据)管理平台选型分析(一)
12款开源数据资产(元数据)管理平台选型分析(一)
3979 2
|
11月前
|
自然语言处理 语音技术 开发者
开源上新|FunASR多语言离线文件转写软件包
开源上新|FunASR多语言离线文件转写软件包
|
语音技术 异构计算
FunASR项目支持实时语音识别
FunASR项目支持实时语音识别【1月更文挑战第7篇】
4125 1
|
人工智能 达摩院 自然语言处理
超好用的开源模型平台,ModelScope阿里达摩院
超好用的开源模型平台,ModelScope阿里达摩院
1025 1
|
存储 数据采集 数据管理
一体化元数据管理平台——OpenMetadata入门宝典
一体化元数据管理平台——OpenMetadata入门宝典
3039 0
|
缓存 Linux
CentOS7配置阿里yum源 超详细!!!
CentOS7配置阿里yum源 超详细!!!
31710 2
|
数据采集 人工智能 数据管理
12款开源数据资产(元数据)管理平台选型分析(二)
12款开源数据资产(元数据)管理平台选型分析(二)
2738 0
|
8月前
|
存储 数据采集 大数据
AllData数据中台技术架构升级演进
杭州奥零数据科技有限公司成立于2023年,专注于数据中台业务,维护开源项目AllData并提供商业版解决方案。AllData提供数据集成、存储、开发、治理及BI展示等一站式服务,支持AI大模型应用,助力企业高效利用数据价值。
AllData数据中台技术架构升级演进
|
9月前
|
存储 人工智能 自然语言处理
ChatMCP:基于 MCP 协议开发的 AI 聊天客户端,支持多语言和自动化安装 MCP 服务器
ChatMCP 是一款基于模型上下文协议(MCP)的 AI 聊天客户端,支持多语言和自动化安装。它能够与多种大型语言模型(LLM)如 OpenAI、Claude 和 OLLama 等进行交互,具备自动化安装 MCP 服务器、SSE 传输支持、自动选择服务器、聊天记录管理等功能。
2310 16
ChatMCP:基于 MCP 协议开发的 AI 聊天客户端,支持多语言和自动化安装 MCP 服务器