Semantic
Semantic Kernel(语义内核)秋季路线图
Semantic Kernel 是一个开源的 SDK,它允许开发人员将大型语言模型(LLM)与传统的编程语言进行混合使用。 微软Semantic Kernel团队 在博客上正式公布了Semantic Kernel 项目秋季发展路线图[1]。这家公司的设计和AI副总裁John Maeda在官方博客中写 ......
【Semantic Kernel】6、通过容器使用SK
``` { var collection = new ServiceCollection(); //Registering Kernel collection.AddTransient((serviceProvider) => { return Kernel.Builder .WithOpenAIT ......
【Semantic Kernel】5、ITextCompletion、IChatCompletion
# ChatGPT ``` //chatGPT { var chatGPT = kernel.GetService(); var chatHistory = chatGPT.CreateNewChat("你是图书管理员"); Console.WriteLine("请提问:"); while (tru ......
【Semantic Kernel】4、记忆(Memory)
# 为什么需要Memory LLM对自然语言的理解和掌握在知识内容的解读和总结方面提供了强大的能力。 但是由于训练数据本身来自于公共领域,也就注定了无法在一些小众或者私有的领域能够足够的好的应答。 因此如何给`LLM `提供足够多的信息上下文,就是如今的`LLM AI应用`可以充分发挥能力的地方了。 ......
【Semantic Kernel】3、本机函数(Native Function)
# 基础定义 最基本的Native Function定义只需要在方法上添加 `SKFunction `的特性即可。 ``` using Microsoft.SemanticKernel.SkillDefinition; using Microsoft.SemanticKernel.Orchestra ......
Multi-Modal Attention Network Learning for Semantic Source Code Retrieval 解读
# Multi-Modal Attention Network Learning for Semantic Source Code Retrieva Multi-Modal Attention Network Learning for Semantic Source Code Retrieval,题 ......
【Semantic Kernel 】 2、Semantic Function
如果把提示词也算作一种代码的话,那么`Semantic Function`所带来的将会是全新编程方式,自然语言编程。 通常情况下一段`prompt`就可以构成一个`Semantic Function`,如此这般简单,如果我们提前可以组织好一段段prompt的管理方式,甚至可以不需要写任何的代码,就可 ......
【Semantic Kernel】1、入门
Semantic Kernel 是一种轻量级应用开发框架,用于快速开发融合 LLM AI的现代应用。 # 名词解释 LLM:大语言模型 Prompt: 理解了LLM的作用之后,如何才能构造出与LLM相结合的应用程序呢? 首先我们需要把LLM AI的能力和原生代码的能力区分开来,在SK中LLM的能力称 ......
在GPT-4时代使用Semantic Kernel构建AI Copilot问答 以及 Semantic Kernel文档更新
Semantic Kernel是一个开源SDK,可让您轻松地将OpenAI,Azure OpenAI和Hugging Face等AI服务与C#和Python等传统编程语言相结合。通过这样做,您可以创建结合两全其美的 AI 应用程序。 Semantic Kernel 团队在博客上发布了2篇文章:Sem ......
什么是 SAP UI5 的 Semantic Object 语义对象
在 SAP UI5 中,注解(Annotation)是用于丰富元数据,提供额外的语义信息,以便实现更加智能和用户友好的应用程序。注解有助于将用户界面逻辑与底层数据模型分离。这使得用户界面能够根据元数据自动生成,从而提高了开发效率。注解可以在 OData 元数据文件或 XML 文件中定义。 在这个例子 ......
什么是 SAP UI5 的 Semantic Object 语义对象
在 SAP UI5 中,注解(Annotation)是用于丰富元数据,提供额外的语义信息,以便实现更加智能和用户友好的应用程序。注解有助于将用户界面逻辑与底层数据模型分离。这使得用户界面能够根据元数据自动生成,从而提高了开发效率。注解可以在 OData 元数据文件或 XML 文件中定义。 在这个例子 ......
Incrementer:Transformer for Class-Incremental Semantic Segmentation with Knowledge Distillation Focusing on Old Class论文阅读笔记
## 摘要 目前已有的连续语义分割方法通常基于卷积神经网络,需要添加额外的卷积层来分辨新类别,且在蒸馏特征时没有对属于旧类别/新类别的区域加以区分。为此,作者提出了基于Transformer的网络incrementer,在学习新类别时只需要往decoder中加入对应的token。同时,作者还提出了对 ......
[CVPR23 Highlight] Side Adapter Network for Open-Vocabulary Semantic Segmentation论文阅读笔记
** ## 摘要 本文提出了一个用于开放词汇语义分割的新框架SAN,将语义分割任务建模为区域识别问题,提取mask proposals并使用CLIP对mask进行识别。SAN可以重新利用CLIP的特征,因此其本身可以非常轻量;同时网络可以端到端地进行训练,从而使SAN适应冻结的CLIP模型。本文方法 ......
CLIP-S^4:Language-Guided Self-Supervised Semantic Segmentation论文阅读笔记
## 摘要 作者提出了CLIP-S4,借助自监督像素表示学习和V-L模型实现各种语义分割任务,不需要使用任何像素级别标注以及未知类的信息。作者首先通过对图像的不同增强视角进行像素-分割对比学习来学习像素嵌入。之后,为进一步改善像素嵌入并实现基于自然语言的语义分割,作者设计了由V-L模型指导的嵌入一致 ......
Learning Affinity from Attention: End-to-End Weakly-Supervised Semantic Segmentation with Transformers概述
0.前言 相关资料: arxiv github 论文解读 论文基本信息: 领域:弱监督语义分割 发表时间: CVPR 2022(2022.3.5) 1.针对的问题 目前主流的弱监督语义分割方法通常首先训练分类模型,基于类别激活图(CAM)或其变种生成初始伪标签;然后对伪标签进行细化作为监督信息训练一 ......
使用 Semantic Kernel 实现 Microsoft 365 Copilot 分析
3月16日,微软发布了微软365 Copilot[1]。 Microsoft 365 Copilot 将您现有的 Word、Excel、PowerPoint、Outlook 和 Teams 与大型语言模型 (LLM) 的强大功能以及来自 Microsoft Graph 和 Microsoft 365 ......
LangChain vs Semantic Kernel
每当向他人介绍 Semantic Kernel, 会得到的第一个问题就是 Semantic Kernel 类似于LangChain吗,或者是c# 版本的LangChain吗? 为了全面而不想重复的回答这个问题,因此我写下这篇文章。在 ChatGPT 之前,构建 集成AI的应用程序的主要分为两个步骤: ......
[论文速览] Word-As-Image for Semantic Typography
Pre title: Word-As-Image for Semantic Typography accepted: Arxiv 2023 paper: https://arxiv.org/abs/2303.01818 code: https://github.com/WordAsImage/Wor ......
Semantic Kernel 入门系列 ❤️🔥
Semantic Kernel 是一种轻量级应用开发框架,用于快速开发融合 LLM AI的现代应用。 此系列文章,将会从传统软件开发者的角度,逐步认识Semantic Kernel,并了解其核心概念和基本的使用方法。 🛸LLM降临的时代 🪄LLM的魔法 🔥Kernel 内核和🧂Skills ......
Semantic Kernel 入门系列:📅 Planner 计划管理
Semantic Kernel 的一个核心能力就是实现“目标导向”的AI应用。 目标导向 “目标导向”听起来是一个比较高大的词,但是却是实际生活中我们处理问题的基本方法和原则。 顾名思义,这种方法的核心就是先确定目标,然后在寻找实现目标的方法和步骤。这对于人来说的是很自然的事情,但是对于机器则不然。 ......
Semantic Kernel 工具箱: Semantic Kernel Tools
2023年4月13日,Microsoft发布了一个 Semantic Kernel 的 VS Code 插件,Semantic Kernel Tools,用于进行Semantic Function的开发和调试工作。 Semantic Kernel Tools的安装只需要VS Code即可,不需要额外 ......
Semantic Kernel 入门系列:🍋Connector连接器
当我们使用Native Function的时候,除了处理一些基本的逻辑操作之外,更多的还是需要进行外部数据源和服务的对接,要么是获取相关的数据,要么是保存输出结果。这一过程在Semantic Kernel中可以被归类为Connector。 Connector更像是一种设计模式,并不像Function ......
Semantic Kernel 入门系列:🥑Memory内存
了解的运作原理之后,就可以开始使用Semantic Kernel来制作应用了。 Semantic Kernel将embedding的功能封装到了Memory中,用来存储上下文信息,就好像电脑的内存一样,而LLM就像是CPU一样,我们所需要做的就是从内存中取出相关的信息交给CPU处理就好了。 内存配置 ......
Semantic Kernel 入门系列:🥑突破提示词的限制
无尽的上下文 LLM的语言理解和掌握能力在知识内容的解读和总结方面提供了强大的能力。 但是由于训练数据本身来自于公共领域,也就注定了无法在一些小众或者私有的领域能够足够的好的应答。 因此如何给LLM 提供足够多的信息上下文,就是如今的LLM AI应用可以充分发挥能力的地方了。 我们默认可以想到的是在 ......
Semantic Kernel 入门系列:💾Native Function
语义的归语义,语法的归语法。 基础定义 最基本的Native Function定义只需要在方法上添加 SKFunction 的特性即可。 using Microsoft.SemanticKernel.SkillDefinition; using Microsoft.SemanticKernel.Or ......
Semantic Kernel 入门系列:💬Semantic Function
如果把提示词也算作一种代码的话,那么语义技能所带来的将会是全新编程方式,自然语言编程。 通常情况下一段prompt就可以构成一个Semantic Function,如此这般简单,如果我们提前可以组织好一段段prompt的管理方式,甚至可以不需要写任何的代码,就可以构造出足够多的技能来。 使用文件夹管 ......
Semantic Kernel 入门系列:🔥Kernel 内核和🧂Skills 技能
理解了LLM的作用之后,如何才能构造出与LLM相结合的应用程序呢? 首先我们需要把LLM AI的能力和原生代码的能力区分开来,在Semantic Kernel(以下简称SK),LLM的能力称为 semantic function ,代码的能力称为 native function,两者平等的称之为fu ......
语义通信论文阅读(2):Semantic Communications: Overview, Open Issues, and Future Research Directions
(语义通信论文阅读:Semantic Communications: Overview, Open Issues, and Future Research Directions) 语义通信:概述、开放问题和未来研究方向 文章刊源:IEEE Wireless Communication(1区,IF=1 ......
Semantic Kernel 入门系列:🪄LLM的魔法
ChatGPT 只是LLM 的小试牛刀,让人类能够看到的是机器智能对于语言系统的理解和掌握。 如果只是用来闲聊,而且只不过是将OpenAI的接口封装一下,那么市面上所有的ChatGPT的换皮应用都差不多。这就像是买了个徕卡镜头的手机,却只用来扫二维码一样。 由于微软的财大气粗,在OpenAI取得进展 ......