上一篇《Senparc.AI 系列教程(一):概要》中简要介绍了 Senparc.AI 所支撑的底层能力,本篇将介绍如何使用 Senparc.AI 打通 AI 算力,使用不同类型的大模型完成对话或者文本生成任务。

准备工作

  Senparc.AI 已经全部开源,地址:https://github.com/Senparc/Senparc.AI,相关的程序包已经全部打包到 Nuget,因此只需要引用相关包即可接通基础能力。

  为了方便大家学习和应用,在源码中我们已经提供了基于命令行的演示(相关方法同样适用于网站等任何其他系统),代码位置位于 /Samples/Senparc.AI.Samples.Consoles,打开 Senparc.AI.sln 解决方案也可以直接看到响应示例和所有源码:

  运行后即可测试大模型对话、补全、图片生成、向量化、RAG、function-calling、MCP 等常见功能:

 

  例如进行 Chat 对话(可以通过不同颜色区分 Stream 流式输出过程中的 Token):  

  可以看到 AI 回答问题还是有幻觉的问题(如 GitHub 地址有错误)。

开始创建应用

第一步:创建一个空项目

  为了方便演示和更直观地查看原始输出内容,我们使用 Console 项目,您也可以举一反三使用 MVC、RazorPage、WPF、Blazor、WinForm 等其他类型项目。

  使用 VS / VS Code 创建一个 Console 空项目,或使用命令行:

dotnet new console -n SenparcAiTest

第二步:设置 appsettings.json

  创建或修改 appsettings.json 文件:

{
"Logging": {
"IncludeScopes": false,
"LogLevel": {
"Default": "Warning"
}
},
//CO2NET 设置
"SenparcSetting": {
"IsDebug": true,
},
//Senparc.AI 设置
"SenparcAiSetting": {
"IsDebug": true,
"AiPlatform": "DeepSeek", //注意修改为自己平台对应的枚举值
"VectorDB": {
"Type": "InMemory",
"ConnectionString": ""
},
"DeepSeekKeys": {
"Endpoint": "https://api.deepseek.com",
"ApiKey": "<Your DeepSeek Key>",
"ModelName": {
"Chat": "deepseek-chat",
"TextCompletion": "deepseek-chat"
}
}
}
}

  上述配置以 DeepSeek 为例,AiPlatform 为默认选用大模型平台,DeepSeekKeys 节点中配置 DeepSeek 模型信息,其中 ModelName 中指定同一个平台下不同类型大模型所对应的模型名称。

  目前还支持的其他类型还包括:

  • NeuCharAI
  • OpenAI
  • AzureOpenAI
  • HuggingFace
  • FastAPI
  • Ollama
  • DeepSeek

  当 AiPlatform 选中了任意一个模型平台,系统会自动从 “<AiPlatform>Keys”名称节点下读取相关配置信息。

第三步:安装 Nuget 依赖包

  为了能够读取 appsettings.json,我们需要引用一个官方包:Microsoft.Extensions.Configuration.Json,以及 Senparc.AI 的核心模块包:Senparc.AI.Kernel:

dotnet add package Microsoft.Extensions.Configuration.Json
dotnet add package Senparc.AI.Kernel

第四步:配置 Program.cs

  清除 Program.cs 原有内容,输入启动准备代码:

using Microsoft.Extensions.Configuration;
using Microsoft.Extensions.DependencyInjection;
using Senparc.AI.Kernel;
using Senparc.CO2NET;
using Senparc.CO2NET.RegisterServices; var configBuilder = new ConfigurationBuilder();
configBuilder.AddJsonFile("appsettings.json", false, false);
Console.WriteLine("完成 appsettings.json 添加"); var config = configBuilder.Build();
Console.WriteLine("完成 ServiceCollection 和 ConfigurationBuilder 初始化"); var services = new ServiceCollection(); services.AddSenparcGlobalServices(config)
.AddSenparcAI(config); var serviceProvider = services.BuildServiceProvider(); IRegisterService register = RegisterService.Start()
.UseSenparcGlobal()
.UseSenparcAI();

  上述代码是使用 Senparc.AI 的通用启动代码,任何系统都只需要完成一次,重点是 AddSenparcAI() 和 UseSenparcAI() 两个方法,将自动完成所有 Senparc.AI 的相关准备工作(包括大模型信息映射)。

第五步:编写 AI 代码

  以对话(Chat)为例,最精简的单轮对话(或直接执行任务),可以在 Program.cs 中继续输入以下代码:

 1 // Chat 对话
2
3 //定义 SemanticAiHandler 实例
4 SemanticAiHandler semanticAiHandler = new SemanticAiHandler(null);
5
6 //配置模型参数
7 var parameter = new PromptConfigParameter()
8 {
9 MaxTokens = 2000,
10 Temperature = 0.7,
11 TopP = 0.5,
12 };
13
14 //获取 IWantToRun 实例
15 var systemMessage = "你是一位专业的AI助手,擅长回答各种问题。请确保你的回答准确且有帮助。";
16 var iWantToRun = semanticAiHandler.ChatConfig(parameter,
17 userId: "Jeffrey",
18 maxHistoryStore: 10,
19 chatSystemMessage: systemMessage);
20
21 Console.WriteLine();
22 Console.WriteLine("==== 对话开始 ====");
23 while (true)
24 {
25 //开始对话
26 Console.WriteLine("人类:");
27 var inputPrompt = Console.ReadLine() ?? "你好";
28
29 var result = await semanticAiHandler.ChatAsync(iWantToRun, inputPrompt);
30
31 Console.WriteLine("AI 回答:\n" + result.OutputString);
32 Console.WriteLine();
33 }

  可以看到,核心代码是 16 行(定义 IWantToRun 对象)以及 29 行请求模型结果,非常简洁。

  运行效果:

延伸功能

  更多延伸功能,可以参考源码中的示例,注释已经比较完整,相关示例包含:

  • 如 Stream(流式)输出
  • Completion(补全)
  • RAG / 知识库
  • 向量数据库操作
  • 图片生成(Text to Image)
  • Planner
  • Plguin(function-calling 和 MCP)
  • 等等

进阶小贴士

  1. 可以通过 Senparc.AI.Config.SenparcAiSetting 获取 appsettings.json 中的 SenparcAiSetting 节点的信息。
  2. 可以使用 Senparc.AI.Config.SenparcAiSetting.AiPlatform 可以读取或者设置当前系统默认的模型平台。
  3. 如果你想在系统中同时配置和使用多个平台(甚至同一个平台的不同账号或模型配置),可以在 appsettings.json 下 SenparcAiSetting 节点下添加一个 Item 节点,如:
     1     "Items": {
    2 "AzureDallE3": {
    3 "AiPlatform": "AzureOpenAI",
    4 "AzureOpenAIKeys": {
    5 "ApiKey": "<My AzureOpenAI Keys>",
    6 "AzureEndpoint": "<My AzureOpenAI DallE3 Endpoint>",
    7 "AzureOpenAIApiVersion": "2022-12-01",
    8 "ModelName": {
    9 "TextToImage": "dall-e-3"
    10 }
    11 }
    12 },23 "OtherModels": {
    24 "AiPlatform": "<AiPlatform>"
    25 //任意数量的 *Keys 配置
    26 }
    27 }

    在代码中索引 Key 的方式找到对应配置,如:

    var senparcAiSetting = ((SenparcAiSetting)Senparc.AI.Config.SenparcAiSetting)["AzureDallE3"];//获取 AzureDallE3 模型配置

交流群

  欢迎加 QQ 群踊跃交流:553198593

  如果你希望本博客系列深入讲解哪方面的内容,或对上述内容有任何疑问,也欢迎留言!

Senparc.AI 系列教程(二):配置大模型,开始开发应用的更多相关文章

  1. C#微信公众号开发系列教程二(新手接入指南)

    http://www.cnblogs.com/zskbll/p/4093954.html 此系列前面已经更新了两篇博文了,都是微信开发的前期准备工作,现在切入正题,本篇讲解新手接入的步骤与方法,大神可 ...

  2. Android Studio系列教程二--基本设置与运行

    Android Studio系列教程二--基本设置与运行 2014 年 11 月 28 日 DevTools 本文为个人原创,欢迎转载,但请务必在明显位置注明出处! 上面一篇博客,介绍了Studio的 ...

  3. JVM 系列(二)内存模型

    02 JVM 系列(二)内存模型 一.JVM 内存区域 JVM 会将 Java 进程所管理的内存划分为若干不同的数据区域.这些区域有各自的用途.创建/销毁时间: 一. 线程私有区域 线程私有数据区域生 ...

  4. CRL快速开发框架系列教程二(基于Lambda表达式查询)

    本系列目录 CRL快速开发框架系列教程一(Code First数据表不需再关心) CRL快速开发框架系列教程二(基于Lambda表达式查询) CRL快速开发框架系列教程三(更新数据) CRL快速开发框 ...

  5. 黄聪:Microsoft Enterprise Library 5.0 系列教程(二) Cryptography Application Block (高级)

    原文:黄聪:Microsoft Enterprise Library 5.0 系列教程(二) Cryptography Application Block (高级) 本章介绍的是企业库加密应用程序模块 ...

  6. 黄聪:Microsoft Enterprise Library 5.0 系列教程(二) Cryptography Application Block (初级)

    原文:黄聪:Microsoft Enterprise Library 5.0 系列教程(二) Cryptography Application Block (初级) 企业库加密应用程序模块提供了2种方 ...

  7. Fastify 系列教程二 (中间件、钩子函数和装饰器)

    Fastify 系列教程: Fastify 系列教程一 (路由和日志) Fastify 系列教程二 (中间件.钩子函数和装饰器) 中间件 Fastify 提供了与 Express 和 Restify ...

  8. webpack4 系列教程(二): 编译 ES6

    今天介绍webpack怎么编译ES6的各种函数和语法.敲黑板:这是webpack4版本哦, 有一些不同于webpack3的地方. >>> 本节课源码 >>> 所有课 ...

  9. Fastify 系列教程二 (中间件、钩子函数和装饰器)

    Fastify 系列教程: Fastify 系列教程一 (路由和日志) Fastify 系列教程二 (中间件.钩子函数和装饰器) Fastify 系列教程三 (验证.序列化和生命周期) Fastify ...

  10. WPF系列教程——(二)使用Prism实现MVVM设计模式 - 简书

    原文:WPF系列教程--(二)使用Prism实现MVVM设计模式 - 简书 本文假设你已经知道MVVM设计模式是什么,所以直接进入正题,今天我们就用Prism来实现WPF的MVVM设计模式,百度上关于 ...

随机推荐

  1. js格式化货币方法

    闲来无事自己基于原生js方法封装了一个可用于常见货币格式化的方法,具体方法封装如下: /** * 格式化人民币金额 * @param number num 数字金额 * @param string s ...

  2. spring的控制反转DI---基于注解实现

    首先在pom.xml里面导入依赖: <dependencies> <!--要使用spring需要添加4个包但是maven会把他的几个依赖包同时下好--> <depende ...

  3. 阿里微服务解决方案-Alibaba Cloud之负载均衡(Feign)(五)

    一.基于 Feign 的负载均衡 OpenFeign 提供的负载均衡很简单,只需要将相同服务的名称保持一致,并在 Feign Client 的Service中指定名称即可. 例如:希望将端口号8000 ...

  4. C#实现语音预处理:降噪、静音检测、自动增益(附Demo源码)

    无论是在音视频录制系统,还是音视频通话系统.或视频会议系统中,对从麦克风采集到的说话的声音数据进行预处理,都是是非常必要的. 语音数据预处理主要包括:​​降噪(Noise Reduction).静音检 ...

  5. Flinkx Logminer性能探测&优化之路

    数栈是云原生-站式数据中台PaaS,我们在github和gitee上有一个有趣的开源项目:FlinkX,FlinkX是一个基于Flink的批流统一的数据同步工具,既可以采集静态的数据,也可以采集实时变 ...

  6. ChatGPT学习之旅 (4) Prompt花式用法

    大家好,我是Edison. 上一篇:Prompt进阶用法 AI时代的处世法则,能动口,尽量不动手!今天,我们再了解一些Prompt的花式用法,让GPT更懂你! 先试探,再深入 很多时候,欲速则不达,慢 ...

  7. golang+vue3开发的一个im应用

    这是一個开源的前后端分离的IM网页应用. 简单的功能 支持微博登录 端对端消息推送.图片发送.表情包 语音功能 视频功能 支持离线消息推送 创建群聊 群聊消息推送 好友功能 响应式的前端界面支持pc与 ...

  8. centos7导入很大的数据库脚本

    前提因为远程桌面,图形化界面实在是太慢了 所以将压缩数据库文件传入到服务器某个目录下aggs_court.sql.gz解压gunzip aggs_court.sql.gz进入数据库:mysql -p@ ...

  9. qt 鼠标右键菜单

    解决方案: 重写 MainWindow::contextMenuEvent(QContextMenuEvent *event)函数即可 void MainWindow::contextMenuEven ...

  10. virtual studio 未找到pdb 解决方案

    参照 百度知道