产品亮点
1、爱行精智云是一个基于云和AI科技,开源、真诚专业.简单高效.值得信赖的大模型资产、智能体和AI工具管理服务平台。
2、爱行精智云联合伙伴提供大模型、数据、算法、机器学习框架等产品助力AI开发,通过各类AI应用助力企业经营效率提升。
3、基于爱行精智云,可帮助用户治理LLM和LLM应用生命周期中涉及到的资产(数据集、模型文件、代码等)。
4、基于爱行精智云,用户可以通过Web界面、Git命令行或者自然语言Chatbot等方式,实现对模型文件、数据集、代码等资产的操作,包括上传、下载、存储、校验和分发;同时平台提供微服务子模块和标准化API,便于用户与自有系统集成。
5、支持资源同步功能,可以从远端AI社区拉取模型,数据集,代码等资产到本地。
6、支持对于托管的模型进行推理,微调,评测等操作。
7、精智按需:全链路企业服务;可提供定制解决方案并执行落地。
产品说明
爱行精智云® :基于云和AI科技的全维AGENTX® 智能体和AI工具管理服务平台。
一、爱行平台简介
爱行精智云是深圳爱行信息科技有限公司推出的AGENTX® 智能体和AI工具管理平台,致力于为用户带来针对大模型原生设计的、可私有化部署离线运行的资产管理平台。
爱行精智云的使命是为用户提供一个真诚专业.简单高效.值得信赖.共同富裕.开源开放的、针对大模型原生设计的工具资产管理平台,支持私有化部署和离线运行。我们的目标是为用户创造一个安全、高效且可信赖的环境,使其能够更好地管理和运用大模型核心资产数据。
爱行精智云实现了类似私有化Huggingface的功能,以类比OpenStack Glance管理虚拟机镜像、Harbor管理容器镜像以及Sonatype Nexus管理制品的方式,以开源软件的方式实现对LLM资产的安全、高效管理。
-
功能特点
爱行精智云平台的功能具有以下几个特点:
-
资产统一管理: 一站式Hub统一管理模型文件、数据集、大模型应用代码。
-
研发生态兼容: 提供多种SDK工具,同时支持兼容transform sdk,方便对接用户已有项目。支持HTTPS和SSH协议的Git命令和Web界面操作, 确保不同用户均可方便使用。
-
大模型能力扩展:原生支持版本化管理、模型格式转化、数据自动预处理、数据集预览等功能。
-
权限与安全: 支持与企业用户系统集成、支持资产可见范围设置、外内部接口鉴权设计,满足企业安全需求。
-
私有化部署支持: 无互联网依赖、无云厂商依赖等外部依赖,可一键启动私有化部署。
-
技术特点
在技术选型及技术方案上,爱行AGENTX®智能体平台具有以下几个特点:
-
AGENTX®整合了多源Git Server、Git LFS大文件存储协议和对象存储OSS等技术,提供可靠的数据存储层、灵活的基础设施接入层和高兼容的研发工具支持。
-
通过服务化的架构, 爱行AGENTX®提供AGENTX® Server后台服务和AGENTX® Web Service的管理界面,普通用户可以快速使用Docker compose或Kubernetes Helm Chart启动服务,实现生产级的资产管理。具备自研能力的用户可利用AGENTX® Server进行二次开发,将管理功能集成到外部系统或自定义高级功能。
-
AGENTX®借助Apache Arrow和DuckDB等优秀开源项目,支持Parquet数据文件格式的预览,便于算法研究人员和爱好者进行本地化数据集管理。
-
AGENTX®提供直观的Web界面和面向企业组织架构的权限设计,用户可通过Web UI实现版本控制管理、在线浏览和下载,也可以设置数据集和模型文件的可见范围,实现数据安全隔离,还可以对模型和数据集发起话题讨论。
二、爱行精智云-AGENTX®智能体平台功能模块
(一)资产管理
-
模型管理
-
提供模型存储功能,包括机器学习模型和大语言模型
-
提供新建、删除、修改和查询功能
-
提供模型版本控制功能,支持模型的迭代和优化
-
数据集管理
-
提供数据集存储功能
-
提供新建、删除、修改和查询功能
-
提供数据版本控制功能,确保数据变更可追溯
-
代码仓库管理
-
提供代码仓库存储功能
-
提供新建、删除、修改和查询功能
-
提供版本控制功能
-
大文件支持
-
支持超大规模(>100TB) 文件存储
-
支持大文件的上传、下载
-
Web端在线编辑
-
支持在Web端预览文本文件
-
支持在Web端上传、下载文件
-
支持在Web端在线编辑文件
-
数据集查看
-
支持在Web端预览查看Parquet格式的数据集,便于快速检查和分析
-
资产元数据管理
-
为各项资产提供详尽的分类标签,便于快速检索和管理
-
支持模型的任务、语言、框架、License标签管理
-
支持数据集的任务、语言、License标签管理
-
支持代码的License标签管理
-
AI应用
-
用户可以在应用空间内快速展示模型的能力,搭建并测试应用原型,提升开发效率
-
支持用户进行应用的新建、删除、修改和查询操作
-
集成了Gradio和Streamlit等流行的应用SDK,用户可以轻松地搭建交互式应用
-
一键启动模型推理服务
-
用户可以一键启动模型的推理服务,无需复杂的配置,简化部署流程
-
自动适配优化运行环境,确保模型推理服务的稳定性和高效性
-
提供的推理服务可以轻松集成到现有的应用中,加速应用的开发和上线
-
支持vllm,TGI等主流推理框架
-
一键启动模型微调训练
-
使用户能够一键开启针对特定数据集的模型微调训练任务
-
支持不同的训练参数自定义设置,为用户提供灵活的微调选项
-
集成训练监控功能,用户可以实时跟踪训练进度和性能指标
-
模型推理优化
-
针对特定模型,提供模型推理调优服务
-
针对企业的业务场景,提升模型在生产环境中的表现
-
根据不同企业和模型的具体需求,提供定制化的推理优化解决方案
-
数据格式转化
-
支持常见的数据格式转化,如将CSV、JSON等格式转换为模型训练或推理所需的数据格式
-
提供易于使用的转换工具,用户可以快速完成数据格式的转换工作
-
提供数据处理工具,完成从数据采集、清洗、标注到入库的一整套流程
-
资产Copilot
-
提供资产管理助手,辅助用户更便捷的使用CSGHub
-
私有化模型版资产Copilot
-
提供资产管理助手的私有化部署
-
多源数据同步
-
查看爱行-AGENTX®智能体社区源数据
-
启动AGENTX®之后可实时浏览查看爱行社区的模型及数据集,及时获取最新或者最热门的模型和数据集
-
可实时感知用户同步的模型数据源是否有更新
-
模型/数据集推荐
-
可根据企业实际的业务场景推荐模型
-
可根据微调模型的特点推荐模型和数据集
-
同步爱行-AGENTX®智能体社区模型
-
支持通过同步服务下载传神社区的模型(不同版本资源限制不同)
-
同步爱行-AGENTX®社区数据集
-
支持通过同步服务下载爱行-AGENTX®社区的数据集(不同版本资源限制不同)
-
安全合规
-
自定义资产元数据
-
允许用户自定义资产标签,为用户提供更灵活的资产标记和分类方法
-
通过自定义标签,增强资产检索的准确性和便捷性
-
模型和License合规性溯源与验证
-
对模型使用的许可证(License)进行合规性检查,确保所有使用的模型和库符合所需的授权条件
-
提供溯源功能,以确保模型及其组件的使用完全符合法律和规范要求
-
数据完整性校验机制
-
采用高效的数据完整性校验算法,确保数据在传输和存储过程中保持未被篡改。
-
及时检测并纠正可能出现的数据错误,确保数据的准确性
-
高可用
-
构建高可用的系统架构,确保服务在各种情况下均能稳定运行。
-
通过冗余备份机制,提高系统容错能力,避免单点故障导致的服务中断
-
实现负载均衡和动态资源调度,确保高并发情况下的服务响应速度和稳定性
-
灾难恢复
-
设计灾难恢复计划,确保在出现系统故障时可以快速恢复服务
-
通过定期备份和快照技术保护关键数据
-
制定详细的灾难恢复策略和步骤,降低灾难发生对业务连续性的影
售后支持范围
售后服务范围为产品使用方面的技术支持,售后支持时间范围为合同期范围内