SOLA 应用示例
SOLA 应用示例分为编程与多媒体示例和服务部署示例。
编程与多媒体
编程与多媒体示例用于学习 SOLA Runtime API、部署模型和运行多媒体处理程序:
示例 |
支持的模型 |
适用场景 |
|---|---|---|
BERT |
SOLA Runtime API 学习、模型部署入门、多媒体处理 |
服务部署
服务部署示例用于在墨芯计算卡上部署模型推理服务:
服务 |
支持的模型 |
适用场景 |
|---|---|---|
Qwen1.5-7B-Chat-w8a8 (int8) |
大语言模型推理和并发测试 |
|
BGE-M3 |
文本向量生成、候选文档重排及相关评测 |