CANN/ge:创建AI CPU KFC任务API
2026/9/10 3:58:33 网站建设 项目流程

CreateAicpuKfcTask

【免费下载链接】geGE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力,并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge

产品支持情况

全量芯片支持。

头文件/库文件

  • 头文件:#include <graph/kernel_launch_info.h>
  • 库文件:libregister.so

功能说明

创建一个AI CPU的KFC Task。

函数原型

static KernelLaunchInfo CreateAicpuKfcTask(const gert::ExeResGenerationContext *context, const char *so_name, const char *kernel_name)

参数说明

参数输入/输出说明
context输入GenerateTask函数的入参,保存了算子的基础信息。
so_name输入AI CPU算子打包的so名称。
kernel_name输入AI CPU算子的入口函数名称。

返回值说明

返回创建出的AI CPU KFC Task信息。

约束说明

调用示例

graphStatus Mc2GenTaskCallback(const gert::ExeResGenerationContext *context, std::vector<std::vector<uint8_t>> &tasks) { ... // 创建AI CPU任务 auto aicpu_task = KernelLaunchInfo::CreateAicpuKfcTask(context, "libccl_kernel.so", "RunAicpuKfcSrvLaunch"); // 获取attach流 auto stream_infos = context->GetAttachedStreamInfos(); GE_ASSERT_TRUE(!stream_infos.empty()); const int64_t attach_stream_id = stream_infos[0].stream_id; // 往AI CPU KFC的任务中添加信息 aicpu_task->SetStreamId(attach_stream_id); ... }

【免费下载链接】geGE(Graph Engine)是面向昇腾的图编译器和执行器,提供了计算图优化、多流并行、内存复用和模型下沉等技术手段,加速模型执行效率,减少模型内存占用。 GE 提供对 PyTorch、TensorFlow 前端的友好接入能力,并同时支持 onnx、pb 等主流模型格式的解析与编译。项目地址: https://gitcode.com/cann/ge

创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

需要专业的网站建设服务?

联系我们获取免费的网站建设咨询和方案报价,让我们帮助您实现业务目标

立即咨询