- 1 特征工程是什么?有这么一句话在业界广泛流传:数据和特征决定了机器学习的上限,而模型和算法只是逼近这个上限而已。那特征工程到底是什么呢?顾名思义,其本质是一项工程活动,目的是最大限度地从原始数据中提取特征以供算法和模型使用。通过总结和归纳,人们认为特征工程包括以下方面:2 数据预处理 通过特征提取,我们能得到未经处理的特征,这时的特征可能有以下问题:不属于同一量纲:即特征的规格不一... 1 特征工程是什么?有这么一句话在业界广泛流传:数据和特征决定了机器学习的上限,而模型和算法只是逼近这个上限而已。那特征工程到底是什么呢?顾名思义,其本质是一项工程活动,目的是最大限度地从原始数据中提取特征以供算法和模型使用。通过总结和归纳,人们认为特征工程包括以下方面:2 数据预处理 通过特征提取,我们能得到未经处理的特征,这时的特征可能有以下问题:不属于同一量纲:即特征的规格不一...
- 【Python训练营】Python每日一练----第12天:日期问题 【Python训练营】Python每日一练----第12天:日期问题
- 信息包括语音和文字等,在自然和社会中广泛存在。1. 信息熵香农:信息是用来消除随机不确定性的东西。小概率事件能够比大概率事件提供更多的信息。如果用f(p)代表信息量,则f(p)应该满足以下条件:它应该是概率函数的递减函数。当p=1时,f(p)=0;两个独立事件的联合信息量等于它们的分别的信息量之和。信息量可以定义为:一条信息的信息量与其不确定性具有直接关系。信息熵是香农提出来的,来自于热力学... 信息包括语音和文字等,在自然和社会中广泛存在。1. 信息熵香农:信息是用来消除随机不确定性的东西。小概率事件能够比大概率事件提供更多的信息。如果用f(p)代表信息量,则f(p)应该满足以下条件:它应该是概率函数的递减函数。当p=1时,f(p)=0;两个独立事件的联合信息量等于它们的分别的信息量之和。信息量可以定义为:一条信息的信息量与其不确定性具有直接关系。信息熵是香农提出来的,来自于热力学...
- 目录摘要安装所需的库导入需要的库定义下载数据函数和解压函数设置数据集保存路径下载数据集切分训练集、验证集和测试集定义函数以预处理掩码定义一个功能以可视化图像及其标签训练和预测的图像大小方法1.将所有图像和蒙版调整为固定大小(例如256x256像素)。定义一个PyTorch数据集类定义训练辅助方法定义训练和验证方法定义训练参数训练模型预测图像标签并可视化这些预测方法1的完整代码(亲测可运行)... 目录摘要安装所需的库导入需要的库定义下载数据函数和解压函数设置数据集保存路径下载数据集切分训练集、验证集和测试集定义函数以预处理掩码定义一个功能以可视化图像及其标签训练和预测的图像大小方法1.将所有图像和蒙版调整为固定大小(例如256x256像素)。定义一个PyTorch数据集类定义训练辅助方法定义训练和验证方法定义训练参数训练模型预测图像标签并可视化这些预测方法1的完整代码(亲测可运行)...
- 深度学习中的图像分割图像分割就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。它是由图像处理到图像分析的关键步骤。现有的图像分割方法主要分以下几类:基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。从数学角度来看,图像分割是将数字图像划分成互不相交的区域的过程。图像分割的过程也是一个标记过程,即把属于同一区域的像素赋予相同的编... 深度学习中的图像分割图像分割就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。它是由图像处理到图像分析的关键步骤。现有的图像分割方法主要分以下几类:基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。从数学角度来看,图像分割是将数字图像划分成互不相交的区域的过程。图像分割的过程也是一个标记过程,即把属于同一区域的像素赋予相同的编...
- 针对有一定AI基础的AI初学者,ModelArts基于业界的主流引擎提供了预置算法,无需关注模型开发过程,直接使用预置算法对已有数据进行训练,并快速部署为服务。预置算法可用于物体类别和位置、图像分类等场景。 本次实验提供了一个花卉图像分类应用的样例,帮助您快速熟悉使用ModelArts预置算法构建模型的过程。此样例针对预置的花卉图像数据集,对已有图像数据进行标注,然后使用预置的... 针对有一定AI基础的AI初学者,ModelArts基于业界的主流引擎提供了预置算法,无需关注模型开发过程,直接使用预置算法对已有数据进行训练,并快速部署为服务。预置算法可用于物体类别和位置、图像分类等场景。 本次实验提供了一个花卉图像分类应用的样例,帮助您快速熟悉使用ModelArts预置算法构建模型的过程。此样例针对预置的花卉图像数据集,对已有图像数据进行标注,然后使用预置的...
- 接着啃书第三章 接着啃书第三章
- 当前文章就利用华为云提供的AI人脸识别接口+红外测温传感器MLX90614ESF(DCI)+瑞芯微RK3399完成AI人脸测温一体机设计,方便测量来往人员的体温,减轻防疫防控工作人员的负担。 当前文章就利用华为云提供的AI人脸识别接口+红外测温传感器MLX90614ESF(DCI)+瑞芯微RK3399完成AI人脸测温一体机设计,方便测量来往人员的体温,减轻防疫防控工作人员的负担。
- 初入机器学习,无论是在书本上,还是在学习平台上,第一个介绍的就是监督学习,那么什么是监督学习呢?监督——顾名思义,把你“看着学习”,说的直白一点就是让你的计算机明白一种规律,并且按照这种规律进行大量的学习,最后通过该规律进行预测或者分类。生活中有垃圾分类,也有物品的好坏分类,在这个世界上凡事存在的东西,我们都会给它定义一个属性,人也不例外,有好人坏人之称,也有穷人富人之别,一个事物可以被定... 初入机器学习,无论是在书本上,还是在学习平台上,第一个介绍的就是监督学习,那么什么是监督学习呢?监督——顾名思义,把你“看着学习”,说的直白一点就是让你的计算机明白一种规律,并且按照这种规律进行大量的学习,最后通过该规律进行预测或者分类。生活中有垃圾分类,也有物品的好坏分类,在这个世界上凡事存在的东西,我们都会给它定义一个属性,人也不例外,有好人坏人之称,也有穷人富人之别,一个事物可以被定...
- MLsys不能算是一种方向,而是一种思路。比如对于system研究者来说,可以把ML作为我们开发的系统要适配的一种benchmark,就像transaction对于数据库、某种文件场景对于File System的意义一样。这样一想可做的空间就宽广多了。下面简单推荐一些坑比较少得方向,希望大家可以适应这个潮流。 MLsys不能算是一种方向,而是一种思路。比如对于system研究者来说,可以把ML作为我们开发的系统要适配的一种benchmark,就像transaction对于数据库、某种文件场景对于File System的意义一样。这样一想可做的空间就宽广多了。下面简单推荐一些坑比较少得方向,希望大家可以适应这个潮流。
- 导读:华为云ModelArts是面向开发者的一站式AI开发平台,为机器学习与深度学习提供海量数据预处理及半自动化标注、大规模分布式Training、自动化模型生成,及端-边-云模型按需部署能力,帮助用户快速创建和部署模型,管理全周期AI工作流。流程简单易懂,在零基础的情况下短短1个多小时就完成了包含服务搭建的整个训练过程。只能说是非常给力的华为云,并且在华为云的官方群里面也会有很多大佬帮... 导读:华为云ModelArts是面向开发者的一站式AI开发平台,为机器学习与深度学习提供海量数据预处理及半自动化标注、大规模分布式Training、自动化模型生成,及端-边-云模型按需部署能力,帮助用户快速创建和部署模型,管理全周期AI工作流。流程简单易懂,在零基础的情况下短短1个多小时就完成了包含服务搭建的整个训练过程。只能说是非常给力的华为云,并且在华为云的官方群里面也会有很多大佬帮...
- 目录创建服务上传测试文档添加标签选择训练内容开始训练部署使用效果AI Gallery-开发者社区ModelArts-自动学习——智能文本分类创建服务填写必填项创建桶和文件夹可以参考【华为云ModelArts完整流程引导——贴心的细致-帮你1小时完成整个训练过程_红目香薰-CSDN博客】 上传测试文档添加分析文件的时候要注意以下文件类型。那么想去弄个小说试试。 我这里准备了个文档啊,... 目录创建服务上传测试文档添加标签选择训练内容开始训练部署使用效果AI Gallery-开发者社区ModelArts-自动学习——智能文本分类创建服务填写必填项创建桶和文件夹可以参考【华为云ModelArts完整流程引导——贴心的细致-帮你1小时完成整个训练过程_红目香薰-CSDN博客】 上传测试文档添加分析文件的时候要注意以下文件类型。那么想去弄个小说试试。 我这里准备了个文档啊,...
- 目录摘要Albumentations 的 pip 安装基准测试结果Spatial-level transforms(空间层次转换)支持的列表简单的使用案例详细使用案例VerticalFlip 围绕X轴垂直翻转输入。Blur模糊输入图像HorizontalFlip 围绕y轴水平翻转输入Flip水平,垂直或水平和垂直翻转输入。Transpose, 通过交换行和列来转置输入。RandomCro... 目录摘要Albumentations 的 pip 安装基准测试结果Spatial-level transforms(空间层次转换)支持的列表简单的使用案例详细使用案例VerticalFlip 围绕X轴垂直翻转输入。Blur模糊输入图像HorizontalFlip 围绕y轴水平翻转输入Flip水平,垂直或水平和垂直翻转输入。Transpose, 通过交换行和列来转置输入。RandomCro...
- 目录摘要导入所需的库下载数据集并解压缩设置下载数据集的目录下载数据集并解压切分训练集、验证集和测试集定义一个可视化图像及其标签的函数定义一个PyTorch数据集类使用Albumentations定义训练和验证数据集的转换函数定义训练辅助方法定义训练参数训练和验证训练模型预测图像标签并可视化这些预测完整代码摘要本示例说明如何使用Albumentations 对图像进行分类。 我们将使用``... 目录摘要导入所需的库下载数据集并解压缩设置下载数据集的目录下载数据集并解压切分训练集、验证集和测试集定义一个可视化图像及其标签的函数定义一个PyTorch数据集类使用Albumentations定义训练和验证数据集的转换函数定义训练辅助方法定义训练参数训练和验证训练模型预测图像标签并可视化这些预测完整代码摘要本示例说明如何使用Albumentations 对图像进行分类。 我们将使用``...
- 目录摘要一、简介3. EfficientNetV2 架构设计3.1. 回顾 EfficientNet3.2.了解训练效率3.3.训练感知 NAS 和扩展4. 渐进式学习4.1.动机4.2. 具有自适应正则化的渐进式学习5. 主要结果5.1. ImageNet ILSVRC20125.2. ImageNet21k5.3. 迁移学习数据集6. 消融研究6.1. 与 EfficientNet 的... 目录摘要一、简介3. EfficientNetV2 架构设计3.1. 回顾 EfficientNet3.2.了解训练效率3.3.训练感知 NAS 和扩展4. 渐进式学习4.1.动机4.2. 具有自适应正则化的渐进式学习5. 主要结果5.1. ImageNet ILSVRC20125.2. ImageNet21k5.3. 迁移学习数据集6. 消融研究6.1. 与 EfficientNet 的...
上滑加载中
推荐直播
-
华为云软件开发生产线(CodeArts)4月新特性解读
2025/05/30 周五 16:30-17:30
Enki 华为云高级产品经理
不知道产品的最新特性?没法和产品团队建立直接的沟通?本期直播产品经理将为您解读华为云软件开发生产线4月发布的新特性,并在直播过程中为您答疑解惑。
回顾中 -
基于昇腾的皮肤病理多模态大模型研发
2025/06/05 周四 19:00-20:00
崔笑宇 华为开发者布道师-高校教师
本期直播聚焦昇腾AI平台在皮肤病理多模态大模型研发中的全流程技术突破,通过基于国产基座模型QwenV2.5进行微调,融入思维链数据优化推理能力,深度融合病理图像、临床文本及专家语音等多模态数据,构建覆盖“认知行为-逻辑推理-决策生成”全流程的皮肤病理大模型。
回顾中
热门标签