- 1.Paddle模型性能分析工具Profiler:定位瓶颈点、优化程序、提升性能 1.Paddle模型性能分析工具Profiler:定位瓶颈点、优化程序、提升性能
- 在数据增强、蒸馏剪枝下ERNIE3.0分类模型性能提升 在数据增强、蒸馏剪枝下ERNIE3.0分类模型性能提升
- 近年来随着深度学习的发展,模型参数的数量飞速增长。为了训练这些参数,需要更大的数据集来避免过拟合。然而,对于大部分NLP任务来说,构建大规模的标注数据集非常困难(成本过高),特别是对于句法和语义相关的任务。相比之下,大规模的未标注语料库的构建则相对容易。为了利用这些数据,我们可以先从其中学习到一个好的表示,再将这些表示应用到其他任务中。最近的研究表明,基于大规模未标注语料库的预训练模型(Pretr 近年来随着深度学习的发展,模型参数的数量飞速增长。为了训练这些参数,需要更大的数据集来避免过拟合。然而,对于大部分NLP任务来说,构建大规模的标注数据集非常困难(成本过高),特别是对于句法和语义相关的任务。相比之下,大规模的未标注语料库的构建则相对容易。为了利用这些数据,我们可以先从其中学习到一个好的表示,再将这些表示应用到其他任务中。最近的研究表明,基于大规模未标注语料库的预训练模型(Pretr
- 对于标注样本充足的场景可以直接使用预训练模型微调实现文本多分类,对于尚无标注或者标注样本较少的任务场景我们推荐使用小样本学习,以取得比微调方法更好的效果。 下边通过新闻分类的例子展示如何使用小样本学习来进行文本分类。 对于标注样本充足的场景可以直接使用预训练模型微调实现文本多分类,对于尚无标注或者标注样本较少的任务场景我们推荐使用小样本学习,以取得比微调方法更好的效果。 下边通过新闻分类的例子展示如何使用小样本学习来进行文本分类。
- 快递单信息抽取【二】基于ERNIE1.0至ErnieGram + CRF预训练模型 快递单信息抽取【二】基于ERNIE1.0至ErnieGram + CRF预训练模型
- Paddlenlp之UIE模型实战实体抽取任务【打车数据、快递单】 Paddlenlp之UIE模型实战实体抽取任务【打车数据、快递单】
- theme: smartblue持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第17天,点击查看活动详情 Spark Day14:Structured Streaming 01-[了解]-上次课程内容回顾继续讲解:StructuredStreaming,以结构化方式处理流式数据,底层分析引擎SparkSQL引擎。0、数据源(Source) 支持4种数据源:TCP So... theme: smartblue持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第17天,点击查看活动详情 Spark Day14:Structured Streaming 01-[了解]-上次课程内容回顾继续讲解:StructuredStreaming,以结构化方式处理流式数据,底层分析引擎SparkSQL引擎。0、数据源(Source) 支持4种数据源:TCP So...
- theme: smartblue持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第17天,点击查看活动详情 Spark Day13:Structured Streaming 01-[了解]-上次课程内容回顾主要讲解2个方面内容:SparkStreaming中偏移量管理和StructuredStreaming快速入门1、SparkStreaming中偏移量管理 - 统计类... theme: smartblue持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第17天,点击查看活动详情 Spark Day13:Structured Streaming 01-[了解]-上次课程内容回顾主要讲解2个方面内容:SparkStreaming中偏移量管理和StructuredStreaming快速入门1、SparkStreaming中偏移量管理 - 统计类...
- theme: smartblue持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第13天,点击查看活动详情 Logistics_Day09:实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 物流项目数据实时ETL转换开发(存储Kudu数据库)部分功能:消费Kafka数据及ETL转换(JSON->Bean对象),项目开发环境搭建(初始化)。主要讲解如何对实... theme: smartblue持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第13天,点击查看活动详情 Logistics_Day09:实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 物流项目数据实时ETL转换开发(存储Kudu数据库)部分功能:消费Kafka数据及ETL转换(JSON->Bean对象),项目开发环境搭建(初始化)。主要讲解如何对实...
- 08-[掌握]-实时ETL开发之数据转换Bean及测试任务:==编写代码,解析JSON字符串为MessageBean对象,属于实时ETL转换第一步。==1)、如何解析JSON字符串为JavaBean对象呢???使用阿里巴巴JSON库:fastJson,既能解析JSON为Bean对象,又能转换Bean对象为JSON字符串为什么使用fastJson解析?? fastJson解析Json字符串时... 08-[掌握]-实时ETL开发之数据转换Bean及测试任务:==编写代码,解析JSON字符串为MessageBean对象,属于实时ETL转换第一步。==1)、如何解析JSON字符串为JavaBean对象呢???使用阿里巴巴JSON库:fastJson,既能解析JSON为Bean对象,又能转换Bean对象为JSON字符串为什么使用fastJson解析?? fastJson解析Json字符串时...
- Logistics_Day08:实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾主要讲解2个方面内容:搭建物流项目环境(Maven Project)和结构化流程序(测试)1、搭建物流项目环境 - Windows系统开发环境初始化 设置HADOOP_HOME:指向在windows下编译HADOOP,bin目录winutils.exe和hadoop.dll 设置hadoop.d... Logistics_Day08:实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾主要讲解2个方面内容:搭建物流项目环境(Maven Project)和结构化流程序(测试)1、搭建物流项目环境 - Windows系统开发环境初始化 设置HADOOP_HOME:指向在windows下编译HADOOP,bin目录winutils.exe和hadoop.dll 设置hadoop.d...
- 06-[掌握]-项目初始化之导入数据生成器模块任务:将项目模拟生成数据 模块导入至MavenProject工程中,具体步骤如下所述:1)、解压【logistics-generate.zip】模块到Maven Project目录【D:\Logistics_New\itcast-logistics-parent】下2)、显示导入模块到Maven Project工程中选择,前面解压的模块,点击一... 06-[掌握]-项目初始化之导入数据生成器模块任务:将项目模拟生成数据 模块导入至MavenProject工程中,具体步骤如下所述:1)、解压【logistics-generate.zip】模块到Maven Project目录【D:\Logistics_New\itcast-logistics-parent】下2)、显示导入模块到Maven Project工程中选择,前面解压的模块,点击一...
- Logistics_Day07:实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 主要讲解:Kudu 存储引擎,类似HBase数据库,存储数据,诞生目的:取代HDFS和HBase,既能够实现随机读写数据,又能够批量加载分析。1)、针对海量数据随机读写,实现HBase数据库功能2)、针对海量数据批量加载,尤其列式存储Parquet Kudu框架诞生之初,考虑与... Logistics_Day07:实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 主要讲解:Kudu 存储引擎,类似HBase数据库,存储数据,诞生目的:取代HDFS和HBase,既能够实现随机读写数据,又能够批量加载分析。1)、针对海量数据随机读写,实现HBase数据库功能2)、针对海量数据批量加载,尤其列式存储Parquet Kudu框架诞生之初,考虑与...
- Logistics_Day06:Kudu 的操作命令 03-[掌握]-Java 操作 Kudu之创建Maven Project 首先使用Java Client API操作Kudu数据库,DDL操作(创建表、删除表及修改表)和DML操作(CRUD)。创建Maven Project设置GAV如下图所示:创建Maven Module模块,用于编写Java API 操作Kudu,模块GAV设置... Logistics_Day06:Kudu 的操作命令 03-[掌握]-Java 操作 Kudu之创建Maven Project 首先使用Java Client API操作Kudu数据库,DDL操作(创建表、删除表及修改表)和DML操作(CRUD)。创建Maven Project设置GAV如下图所示:创建Maven Module模块,用于编写Java API 操作Kudu,模块GAV设置...
- 07-[掌握]-项目初始化之构建公共模块任务:对项目公共模块进行初始化操作,包含创建表,导入工具类等等。针对物流项目来说,涉及2个系统,物流系统Logistics:48张表和CRM系统:3张表,每张表数据都会封装到JavaBean对象中。==对于数据库中51张表来说:id字段作为表主键,remark字段作为备注说明,cdt和udt分别表示数据创建时间和最后更新数据。==公共模块创建包完成以... 07-[掌握]-项目初始化之构建公共模块任务:对项目公共模块进行初始化操作,包含创建表,导入工具类等等。针对物流项目来说,涉及2个系统,物流系统Logistics:48张表和CRM系统:3张表,每张表数据都会封装到JavaBean对象中。==对于数据库中51张表来说:id字段作为表主键,remark字段作为备注说明,cdt和udt分别表示数据创建时间和最后更新数据。==公共模块创建包完成以...
上滑加载中
推荐直播
-
香橙派AIpro的远程推理框架与实验案例
2025/07/04 周五 19:00-20:00
郝家胜 -华为开发者布道师-高校教师
AiR推理框架创新采用将模型推理与模型应用相分离的机制,把香橙派封装为AI推理黑盒服务,构建了分布式远程推理框架,并提供多种输入模态、多种输出方式以及多线程支持的高度复用框架,解决了开发板环境配置复杂上手困难、缺乏可视化体验和资源稀缺课程受限等痛点问题,真正做到开箱即用,并支持多种笔记本电脑环境、多种不同编程语言,10行代码即可体验图像分割迁移案例。
即将直播 -
鸿蒙端云一体化应用开发
2025/07/10 周四 19:00-20:00
倪红军 华为开发者布道师-高校教师
基于鸿蒙平台终端设备的应用场景越来越多、使用范围越来越广。本课程以云数据库服务为例,介绍云侧项目应用的创建、新建对象类型、新增存储区及向对象类型中添加数据对象的方法,端侧(HarmonyOS平台)一体化工程项目的创建、云数据资源的关联方法及对云侧数据的增删改查等操作方法,为开发端云一体化应用打下坚实基础。
即将直播
热门标签