Azure 机器学习:使用 Azure 机器学习 CLI、SDK 和 REST API 训练模型
目录 环境准备克隆示例存储库 示例案例在云中训练1.连接到工作区PythonAzure CLIREST API 2. 创建用于训练的计算资源4. 提交训练作业PythonAzure CLIREST API 注册已训练的模型PythonAzure CLIREST API 环境准备 Azure 订阅。 如果没有 Azure 订阅,请在开始操作前先创建一个免费帐户。 试用免费版或付费版 Azure 机器学习。A...
Azure 机器学习 - 搜索中的检索增强 (RAG)
目录 一、Azure AI 信息检索系统介绍二、采用 Azure AI 搜索的 RAG 方法三、适合 Azure AI 搜索的自定义 RAG 模式四、Azure AI 搜索中的可搜索内容五、Azure AI 搜索中的内容检索构建查询响应按相关性排名适用于 RAG 方案的 Azure AI 搜索查询的示例代码 六、集成代码和 LLM七、如何开始使用 一、Azure AI 信息检索系统介绍 决定使用哪种信息检...
Azure Machine Learning - Azure AI 搜索中的矢量搜索
Azure AI 搜索中的矢量搜索是什么? 矢量搜索是一项新功能,用于从搜索索引为矢量嵌入编制索引,以及存储和检索矢量嵌入。 可以使用它来助力相似性搜索、多模式搜索、推荐引擎或实现检索增强生成 (RAG) 体系结构的应用程序。 下图显示了矢量搜索的索引编制和查询工作流。 在索引编制端,可以准备包含嵌入的源文档。 尽管集成矢量化目前是作为公共预览版提供的,但正式版 Azure AI 搜索不会生成嵌入。 如果...
Azure Machine Learning - 什么是 Azure AI 搜索?
一、什么是Azure AI搜索 信息检索是任何显示文本和矢量的应用程序的基础。 常见方案包括目录或文档搜索、数据浏览,以及越来越多的基于专有基础数据的聊天式搜索形式。 创建搜索服务时,将使用以下功能: 通过搜索索引进行[全文]和[矢量搜索]的搜索引擎丰富的索引,[集成了数据分块和矢量化(预览版)]、针对文本的[词法分析],以及用于内容提取和转换的[可选 AI 扩充]用于[矢量查询]、文本搜索、混合搜索、模...
Azure Machine Learning - Azure AI 搜索中的集成数据分块和嵌入
下面是负责集成矢量化的组件清单: 基于索引器的索引编制支持的数据源。一个用于指定矢量字段的索引,以及一个分配到矢量字段的矢量化器定义。一个用于为数据分块提供文本拆分技能的技能组,以及一个矢量化技能(AzureOpenAiEmbedding 技能,或指向外部嵌入模型的自定义技能)。(可选)用于将分块数据推送到次要索引的索引投影(也在技能组中定义)一个嵌入模型,部署在 Azure OpenAI 上或通过 HT...
Azure Machine Learning - Azure可视化图像分类操作实战
理训练迭代 一、数据准备 一组用于训练分类模型的图像。 可以使用 GitHub 上的一组示例图像。 或者,可以根据下面的提示选择你自己的图像。 二、创建自定义视觉资源 若要使用自定义视觉服务,需要在 Azure 中创建“自定义视觉训练和预测”资源。 为此,在 Azure 门户中填写创建自定义视觉页上的对话框窗口,以创建“训练和预测”资源。 三、创建新项目 在 Web 浏览器中,导航到自定义影像服务网页,然后...
Azure 机器学习 - 机器学习中的企业安全和治理
描审核和管理合规性 按用户帐户或组限制对资源和操作的访问限制传入和传出的网络通信加密传输中的数据和静态数据扫描漏洞应用和审核配置策略 限制对资源和操作的访问 Microsoft Entra ID 是 Azure 机器学习的标识服务提供程序。 它允许你创建和管理用于向 Azure 资源进行_身份验证_的安全对象(用户、组、服务主体和托管标识)。 如果 Microsoft Entra ID 已配置为使用多重身份...
Azure 机器学习 - 使用受保护工作区时的网络流量流
目录 环境准备入站和出站要求方案:从工作室访问工作区方案:从工作室使用 AutoML、设计器、数据集和数据存储方案:使用计算实例和计算群集方案:使用联机终结点入站通信出站通信 方案:使用 Azure Kubernetes 服务方案:使用 Azure 机器学习管理的 Docker 映像 环境准备 本文假设采用以下配置: Azure 机器学习工作区使用专用终结点来与 VNet 通信。工作区使用的 Azure ...
Azure 机器学习 - 有关为 Azure 机器学习配置 Kubernetes 群集的参考
目录 受支持的 Kubernetes 版本和区域建议的资源计划ARO 或 OCP 群集的先决条件禁用安全增强型 Linux (SELinux)ARO 和 OCP 的特权设置 收集的日志详细信息Azure 机器学习作业与自定义数据存储连接支持的 Azure 机器学习排斥和容许最佳实践 通过 HTTP 或 HTTPS 将其他入口控制器与 Azure 机器学习扩展集成先决条件通过 HTTP 公开服务通过 HTT...
Azure 机器学习 - 使用自动化机器学习训练计算机视觉模型的数据架构
对象检测实例分段 在线评分和可解释性 (XAI) 的数据格式支持的可解释性方法:输入格式 (XAI)输出格式 (XAI)图像分类(二进制/多类)多标签图像分类对象检测实例分段 一、用于训练的数据架构 Azure 机器学习的图像 AutoML 要求以 JSONL(JSON 行)格式准备输入图像数据。 本部分介绍多类图像分类、多标签图像分类、对象检测和实例分段的输入数据格式或架构。 我们还将提供最终训练或验证 ...