智见未来 | AI企业深访——江苏博云科技股份有限公司:打造AI全栈平台,构建从异构算力调度到企业级智能体应用的全链路能力

在人工智能技术加速演进的大背景下,千行百业正经历前所未有的深度重塑。如何在充满不确定性的环境中探寻确定的增长路径,已成为产业各界共同聚焦的核心命题。
立足专业定位与行业使命,苏州赛迪产业研究中心深入人工智能领域头部企业开展实地调研与深度交流。我们期望以走访为纽带,搭建起领军企业与产业市场之间的信息桥梁,将一线真知灼见精准传递至行业各方。通过系列调研,我们力求向市场清晰呈现:头部人工智能企业当前的发展态势如何?其战略布局与演进逻辑是怎样的?在技术迭代与商业化落地中又面临哪些现实挑战?旨在通过这些源自产业实践一线的真实反馈,激发更深层次的行业思考。
同时,我们也将系统整合访谈成果与产业洞察,编制发布《2026年人工智能领域年度发展趋势报告》。该报告旨在为政府研判、企业战略规划及产业投资提供决策参考,助力各方在人工智能浪潮中明晰方向、找准定位,共谋高质量发展。

江苏博云科技股份有限公司(以下简称“博云”)成立于2012年,是国家高新技术企业,国家级专精特新重点小巨人企业,是国内领先的人工智能基础设施(AI Infra)解决方案提供商。博云为企业级客户提供面向人工智能开发的软件基础设施,打通并融合智算、超算、通算硬件设备,覆盖从“AI原生开发”、“AI应用运行时管理”到“算力资源管理与运营”的业务场景,为不同行业客户快速部署人工智能应用提供专业化的Al+行业解决方案,以支持AI应用在生产环境中的实施和运营。
1. 池化与切分技术是破局算力孤岛与利用率低的关键。GPU被各业务团队烟囱式独占,单卡常被一个推理服务全占,导致平均利用率较低。通过算力池化与切分技术,可将GPU利用率提升至60%以上,实现“碎片化小算力”向“池化大算力”的聚合。
2. 高级调度策略是保障AI训练资源高效利用的核心能力。Gang Scheduling(成组调度)避免分布式训练死锁,潮汐调度应对训练与推理的波峰波谷,Binpack装箱调度提升资源利用率,多策略组合是AI Infra调度层的核心竞争力。
3. 国产化AI全栈是长期战略方向,"安全、合规、可控"将成为基础设施建设的硬约束。全栈国产化(CPU→算力卡→网卡→辅助芯片)将成为基础设施建设的关键,安全合规可控将成为持续投入方向,信创合规要求将倒逼国产AI Infra加速成熟。
4. AI Infra正从“自用”走向“对外售卖”,算力运营化是平台厂商的新增长曲线。从“自用”走向“对外售卖”是趋势,平台需要计量计费、配额、模型/算力网关、SLA等服务能力。算力运营化不仅是大模型厂商的需求,也是传统行业客户降本增效的核心诉求。
5. Agentic AI正从规则引擎时代跨越至“感知——思考——行动”闭环时代,工程化能力是决胜关键。2023年前是规则引擎/RPA阶段,2023-2025年是LLM API调用阶段,2025年后将实现记忆+规划+工具+闭环执行。未来Harness Engineering的关键在于可观测性、可重放、可评估、可治理。
下文是访谈实录,有删节。
一、产品
博云的产品线主要沿着“云原生底座→智算底座→智能体应用层”逐层演进,目前在AIOS体系下形成三层结构:
①基础设施层(先进算力管理引擎ACE):基于博云在容器云与Kubernetes(开源容器编排系统)等领域的多年经验积累,面向GPU/NPU/DCU/PPU等异构加速卡的统一调度、池化与虚拟化。
②AI训推平台层(模型训推平台BMP):在先进算力管理引擎ACE提供的算力底座之上,覆盖数据标注→算法开发→训练/微调→评估/压缩/转换→在线/批量推理→AI应用的全链路工具链。
③智能体应用层(AI原生智能体平台BoClaw等):在模型训推平台BMP输出的模型/API之上,构建智能体编排、技能商城与行业应用。
博云AIOS主要面向以下典型场景:一是算力应用场景,包括智算中心/算力运营中心(多租户、跨数据中心、对外售卖算力与模型)以及超算+智算混合场景(数值计算、有限元仿真、基因组学分析+LLM训推混跑);二是行业应用场景,涉及金融(智能投顾、客服、风控、合规、OCR)、政务(公文、海关、人才、教学)、能源、工业(工艺参数寻优、质检)、教育科研、医疗(影像/基因/临床研究)、具身智能等多个领域;三是本地部署场景,主要是大模型一体机,如银行的“910B训练一体机+310P推理一体机”分体方案、教育K12心理研究一体机等。
基于上述核心应用场景,博云主要解决以下核心问题:
①算力孤岛与利用率低:GPU被各业务/团队烟囱式独占,单卡常被一个推理服务全占。典型案例中曾出现GPU平均利用率仅15%的情况(如西南某大学教学科研场景,通过部署先进算力管理引擎ACE切分能力后,GPU平均利用率提升至60%);
②异构卡难以统一调度:英伟达全系+昇腾/海光DCU/天数智芯/寒武纪/登临/沐曦/阿里PPU(含光800系列AI加速器)等并存,缺少统一调度与监控层;
③大模型训推工程化门槛高:从数据准备到分布式推理(vLLM虚拟大型语言模型/MindIE昇腾推理引擎)需要打通工具链、镜像、网络(IB无限带宽/RoCE基于融合以太网的远程直接内存访问/RDMA远程直接内存访问)、存储与权限;
④超算+智算割裂:传统Slurm(开源集群管理与作业调度系统)作业调度系统/PBS(便携式批处理系统)/LSF(负载共享设施集群)与Kubernetes集群无法统一,应用部署靠手工、版本混乱、资源弹性差;
⑤多租户、配额、计费、监控、告警缺位:缺少面向算力运营的体系化能力;
⑥AI国产化与软硬协同:需要“一云多芯”统一调度,向上屏蔽底层差异、向下做适配。
BoClaw是博云“Claw类智能体”产品矩阵的统称,对应的官方产品名为BoAgent(企业版/个人版/政务版),定位为“面向企业的AI原生智能体平台/Agent OS”。它把LLM、技能、记忆、工具、安全合规体系打包成可在企业内私有化部署的一整套生产力底座,与下AIOS(ACE+BMP)共同构成博云AI全栈。

这款产品主要有四大差异化核心优势:
一是企业级私有可信部署,实现完全本地化部署,数据不出域;支持国产化全栈(HopeOS/麒麟/OpenEuler+鲲鹏/飞腾+昇腾/海光);与AIOS/ACE/BMP一栈式衔接,从算力调度到Agent应用层端到端可控;
二是经评测认证的五层安全防护体系,包括用户访问层、API网关层、应用安全层、数据安全层、模型安全层五层体系,同时沙箱采用E2B/QEMU/Kubernetes三运行时,并配合FoLib制品库做依赖托管,能够断网可用;
三是企业级管控能力,涵盖统一租户管理、模型网关、日志管理等11大管理模块;
四是AI原生+Agentic范式,能够完成长程复杂任务,平台层支持MCP协议、多Agent协作、技能(Skill)插件化,BoAgent Code终端CLI进一步支持子Agent调度,与BMP训推平台、ACE算力底座、FoLib制品库形成“算力+模型+智能体+技能”一体化协同。
主要从三个维度进行优化完善,在端能力维度,桌面端持续完善多Workspace管理、定时任务、技能中心(本地/精选/社区)、场景应用、记忆管理、IM工具/邮箱/制品库/沙箱设置等模块;Web SaaS端主要对23项功能持续迭代,三栏IDE实时执行可视化是重点投入方向;手机端主要是语音对话、拍照识别、待办审批、企业SSO、离线缓存持续完善;BoBot CLI主要是MCP协议生态扩展、守护进程、远程会话、桥接模式、技能插件化;在平台与生态维度,持续拓展MCP生态,对技能市场进行改善治理,打造多Agent协作能力,并在金融、工业、政务、销售与服务、研发与运维、通用办公等领域持续沉淀场景应用模板;在底座协同维度,与模型训推平台BMP微调流水线打通,让Agent在生产中的反馈直接驱动垂直模型迭代;与先进算力管理引擎ACE打通;与昇腾/国产卡的端到端推理优化;持续深化安全体系,特别是面向金融、能源、政务的合规适配。
AIOS(ACE/BMP)部署模式:
①客户私有化本地部署:管理节点+算力节点两段式架构,资源充裕时分离部署,资源紧张时合并部署;支持单机或集群高可用;操作系统、CPU、GPU兼容国内外多产品系列;
②算力一体机:本地部署+租用;
③租用+私有化混合:在先进算力管理引擎ACE中本地资源与租用智算主机统一纳管,支持费用统计与研发预算规划;
④跨数据中心:统一管理与运维;
⑤算力运营平台:面向智算中心、运营商、产业园,对外售卖算力+模型服务。
BoAgent(BoClaw)部署模式:
部署原则支持完全私有化部署、数据不出域、断网可用。

二、技术
围绕“Agent/AI工作负载”,主要有以下技术优化:
①异构设备插件层:基于Kubernetes Device Plugin扩展,自动注册GPU/NPU/DCU/PPU设备并做集群级配额;
②池化与远程调用:在CUDA Runtime/Driver层或DPU上拦截API,实现跨主机GPU池化与远程调用,把“碎片化的小算力”聚合成“大任务可用的池化算力”,反过来也能“大卡切小”;
③高级调度策略:基于Volcano等做Gang Scheduling(成组调度)、Binpack(装箱调度)、DRF(主资源公平调度)、FIFO(先进先出调度)、亲和/反亲和、任务拓扑、SLA(服务水平协议调度)、抢占、回填、混部、潮汐调度、真实负载重调度,避免分布式训练资源死锁;
④作业生命周期统一:通过VCJob等扩展,把PyTorch、TensorFlow、PaddlePaddle、MindSpore、MPI、Horovod、DeepSpeed、Spark、Flink、Ray等框架的作业一并纳入容器化管理;
⑤镜像供应链优化:分级镜像仓库(个人/项目/公共)、镜像预热到目标节点(消除冷启动)、Dockerfile/归档/任务保存为镜像,让任务启动更快、协作更顺畅、资源更省钱;
⑥高性能网络:支持RoCE/RDMA/IB多种高性能网络协议,对接DPU与主流智能网卡,支持TCP/IP协议栈卸载、OVS卸载、加解密卸载;
⑦容器+虚拟机+裸金属混合:渲染、仿真等不能跑在容器里的工作负载由管理引擎统一调度,支持虚拟机挂载GPU、批量开关机、固定IP;
⑧HPC+Kubernetes混合调度:通过Kubernetes容器镜像到Slurm容器镜像的转换,把Slurm作业和Kubernetes作业纳入同一视图,用户在容器化IDE中即可向两套调度器提交作业;
⑨微隔离+多租户安全:网络微隔离、加密存储、RBAC跨租户切换、审计日志,满足行业合规要求;
⑩Ray集群原生集成:深度集成Ray集群,满足弹性需求。
在网络与存储层,包括网络(智能网卡卸载、网络吞吐能力等)、存储(本地存储、商业存储、NFS协议栈优化、Ceph原生集成、PB级容量扩展)等。
在数据层,包括多源数据接入(CSV/TSV、SQL、图像、音频、视频、PDF、JSON、日志)、数据集版本管理(私有/项目/公共三级)、多模态标注(图片分类/检测/分割/OCR、文本分类/NER(命名实体识别)、音频识别/分类、视频分类/对象跟踪/时间分割)、自动/预/协同标注、数据清洗(图片清洗+文本清洗);
在开发运维层,包括在线IDE(Jupyter/VSCode/PyCharm/IDEA/WebStorm/ComfyU)模板化拉起、算法仓+Git库双向同步、可视化建模(拖拽Workflow+内置算子+自定义算子)、镜像全生命周期管理(构建/扫描/分发/预热/纳管第三方Registry)、多维度监控告警(集群/节点/加速卡/Pod/容器;GPU温度、功率、风扇、利用率、显存、IB网络等)、AutoML自动调参+Tensorboard训练过程可视化;
在调度层,包括异构加速卡统一纳管、GPU切分、虚拟化、池化、远程调用、高阶调度策略、弹性收缩、多租户配额等;
在训推层,包括模型训练、大模型微调、模型推理、模型治理(模型仓库、模型市场、版本管理、单模型/多模型评估等)、AI模型网关(智能路由、健康检查、Token/RPM(每分钟可处理的API请求次数)/并发限流、API Key、统一鉴权与审计);
在智能体应用层,包括Prompt工程、知识库RAG、应用广场、MCP Server注册与调用、多模态对话、联网搜索等。
三、市场
①BMP/AIOS层:模型市场已预置DeepSeek、通义千问、ChatGLM、豆包、文心等开源大模型,并适配客户自研模型(如3B/7B/13B/72B)。AI模型网关支持版本一键切换、A/B测试、金丝雀发布、灰度发布;与英伟达、昇腾MindIE、海光、天数等做异构推理动态择优。
②BoAgent层:AIGW模型网关原生接入13+主流模型(GPT系列/Claude系列/DeepSeek/通义千问/GLM等),支持智能路由(负载均衡/故障转移)、上下文窗口13K~256K、模型类型标识(对话/推理)、组织级与部门级模型分配;客户可按业务场景灵活切换不同厂商的模型。
BoAgent的Skill体系主要来源三个方面,一是本地技能,即用户已下载或导入的技能,可通过zip/文件夹一键添加;二是精选技能(Skills Hub),官方筛选的高质量技能(文档处理/数据分析/自动化/信息检索),实现一键安装;三是社区技能,通过社区贡献,系统按下载量与收藏数综合排行,发现热门高质量技能。同时,通过审批发布工作流、策略管控进行平台治理。在商业模式上对应“Skills Hub商城——开发、上线和分享Skills”,结合BoAgent Code让企业IT与开发者自定义并上架技能,沉淀为可复用资产。
公司的战略定位是国产化AI全栈平台与全场景价值赋能服务商,沿“全栈+全场景+国产化+生态”四条路径推进。在产品矩阵上,打造容器云/DevOps/云管、AIOS(ACE+BMP)、BoAgent(BoClaw)、OPC平台/行业方案四层产品矩阵;在生态体系上,打造战略生态伙伴(算力/硬件层)、产品生态伙伴(模型层)、方案生态伙伴(智能体层,联合发布行业版、共建区域算力中心)、渠道生态伙伴(渠道销售、产品代理、ISV、硬件合作,联合打造AI盒子、一体机等)。
在长期策略上,一是重点发展全栈自主可控+信创合规,把“安全、合规、可控”作为持续投入方向;二是与高校/CCF/中科院等开展联合课题研究、产品研发;三是沿着“基础平台→基本应用→生产应用→平台升级→办公深化→生产深度集成”的六步实施路径,与客户共同成长;四是通过OPC模式承接政府需求、孵化创业团队,让平台具备持续运转能力。
四、未来趋势
①异构国产化加速:CPU→算力卡→网卡→辅助芯片的“全栈国产化”将成为基础设施建设的关键;
②软硬协同下沉:计算/网络/缓存能力持续从CPU下沉到GPU、DPU、智能网卡,调度层必须适配这种趋势;
③超算+智算融合:单一Slurm或单一Kubernetes都无法满足新负载,混合调度成为必选;
④细粒度池化+远程化:从“一卡一应用”走向“1%算力级”的池化与远程化,让算力具备类公用基础设施的供给形态;
⑤运营化:从“自用”走向“对外售卖”,平台需要计量计费、配额、模型/算力网关、SLA等服务。
目前,Agentic AI范式持续演进,在2023年以前,主要是规则引擎/RPA,固定逻辑,缺乏应变;2023年到2025年期间,主要是LLM Function Calling/API调用,能联网但任务链短、缺长程规划;2025年以后,Agentic AI开始涌现,实现记忆+规划+工具+闭环执行,形成“感知——思考——行动”闭环,自主完成复杂任务,但AI Token消耗呈指数级增长。未来Harness Engineering将从“训练为王”走向“推理+Agent工程为王”,打通Prompt、RAG、Agent、微调四级阶梯,MCP Server标准化也将成为Agent连接外部工具的核心协议。同时,Agent Harness的工程化关键是可观测性、可重放、可评估、可治理。
如有合作或调研需求,敬请联系
俞老师 18217170451
时老师 13262558180


赛迪工业和信息化研究院集团(苏州)有限公司(简称苏州赛迪)是工信部赛迪研究院在长三角设立的唯一综合性分支机构,致力于打造区域一流的高端智库与产业服务平台。苏州赛迪聚焦“数字化”与“信创”两大主线,构建“产业研究—产业赋能—产业集聚”一体化服务体系,面向政府与产业提供政策咨询、产业规划、评估认证、供需对接等全链条服务。依托中国软件评测中心,建有2个国家重点实验室和1个公共服务平台,具备从芯片到系统的测试验证能力,通过CMA/CNAS双认证。苏州赛迪策划举办“赛迪长三角高质量发展巡回讲堂”“工控大会”“产业链供需对接会”等高端活动,助力地方构建产业生态、培育新质生产力,推动科技创新与经济高质量发展。
电话:0512-66583022
地址:苏州吴中经济开发区越溪街道吴中大道1421号

扫码关注公众号了解更多
苏州赛迪原创 | 转载请注明来源 | 欢迎分享朋友圈