Skip to content

Latest commit

 

History

History
71 lines (43 loc) · 5.16 KB

README_zh.md

File metadata and controls

71 lines (43 loc) · 5.16 KB

加入微信 Slack 加入 OpenCSG Slack 加入 OpenCSG Discord

English日本語한국어

CSGHub

CSGHub 是一个开源平台,专为管理大语言模型(LLM)资产而设计,提供了高效管理 LLM 及其资产(如数据集、应用空间、代码等)的方式。用户可以通过网页界面、git 命令行、自然语言聊天机器人,或 CSGHub SDK 对 LLM 资产进行上传、下载、存储、校验和分发。

此外,CSGHub 提供微服务子模块和标准化 OpenAPI,以便与现有系统无缝集成。CSGHub 为大模型提供了友好的管理平台,并支持本地化部署,确保安全、离线运行。实际上,CSGHub 可以看作是 Huggingface 的私有化本地版本。

CSGHub

核心功能

  • 统一管理大模型资产
    提供一站式模型、数据集和代码的管理,支持存储、版本控制、修改和查询。支持超大文件的上传与下载,以及 Web 端在线编辑和预览,提升开发协作效率。

  • 灵活兼容的开发生态系统
    支持 HTTPS 和 SSH 协议,方便用户通过 Git 命令或网页界面进行操作。平台集成 Gradio 和 Streamlit 等热门 SDK,简化 AI 应用开发,并提供一键模型推理和微调服务,自动优化环境,确保高效部署和运行。

  • 大模型能力扩展
    支持全面的版本管理、模型格式转换和自动数据处理,以及 CSV、JSON 等常见数据格式的转换工具,并在 Web 端预览 Parquet 格式数据集,方便用户快速检查数据。

  • 应用空间与资产管理助手(Copilot)
    用户可通过应用空间展示模型能力,搭建应用原型,并进行灵活的增删改查操作。Copilot 助手简化资产管理,并提供私有化版本以支持企业本地部署。

  • 多源数据同步与推荐
    与 OpenCSG 社区集成,支持同步社区中模型和数据集,并根据业务场景提供个性化推荐,助力企业开发适配场景的 AI 方案。

  • 完善的权限与安全管控
    支持与企业用户系统集成、支持资产可见范围设置、外内部接口鉴权设计,并通过许可证合规性检查和溯源确保模型符合法律要求。

  • 支持私有化部署
    无需依赖云服务即可一键实现私有化部署,保障企业数据的自主控制和安全。

  • 一站式数据处理与智能标注系统
    提供可定制的数据处理 Pipeline,支持复杂数据清洗与转换,并利用并行处理加速任务。还具备智能标注系统,支持多用户协作和审核,确保数据质量。

  • 高可用与灾难恢复设计
    采用高可用系统架构,支持负载均衡和资源调度,确保高并发下的稳定性。通过冗余备份和快照技术实现灾难恢复,保障业务连续性。

详细信息请参见 CSGHub 详细介绍

快速开始

  • 想要快速探索的用户:可在 OpenCSG 网站上体验 CSGHub 的免费 SaaS 版本。参考该快速开始指南,通过 CSGHub SaaS 界面管理大模型和数据集,部署大模型应用。 更多信息与高级教程请参阅 OpenCSG 文档中心

  • 想要进一步实践的用户:若希望在本机环境(Linux/MacOS/Windows)上快速启动 CSGHub,可以使用 Docker 一键部署 CSGHub 实例,通过最简化的命令启动一个 all-in-one 的容器,即刻体验 CSGHub 核心功能。

  • 想要在 Kubernetes 上部署的用户:请参考 Helm Chart 安装指南进行部署。

路线图

了解 CSGHub 的未来规划,请查看路线图

版本公告

有关功能改进的信息,请参考版本公告

会议与贡献

我们诚邀您一起探索 OpenCSG 社区,在这里您将找到详细的社区指南,欢迎您成为社区的贡献者分享您的内容。

  • 了解如何加入社区会议,与其他成员互动并分享您的想法。
  • 请参阅贡献指南以了解如何为项目做出贡献。
  • 如果有任何疑问或问题,请联系我们以获得支持。
  • 请参考开发指南设置开发环境。