课程介绍
注意0:欲购买此课程,获取安全购买链接,索要正版授权学习平台账号,务必加咨询QQ:2536379620
注意1:由于编码原因,试听课程视频画面清晰度不如最终购买的视频。最终购买视频的画面清晰度可参见以下两张图。图1 图2
注意2:正版良心视频,购买后有机会和原作者直接短暂技术交流。
课程简介 :主要讲解当下非常火,应用于NLP领域的语言模型技术BERT,课程由免费内容和收费内容两部分组成,免费内容主要是讲解TransFormer技术,并且通过机器翻译案例,代码层面实现TransFormer EncoderDncoder的所有技术细节,收费内容主要讲解如何通过TransFormerEncoder构建BERT语言模型,在此基础上实现情感分析,句子对分类等下游应用任务。
课程目标:帮助童鞋们,快速上手BERT。
适用人群: 适合已有TensorFlow2.0开发知识的童鞋或者熟悉Keras开发的童鞋
特别提示 : 购买确认收货之后,通知老师发送代码。本课程是《TensorFlow1.X升级到TensorFlow 2 .X》兄弟篇,学习此课程之前必须要学习《TensorFlow1.X升级到TensorFlow 2.X》,其相关先验知识有利于童鞋们听懂此课程。
课程大纲
01
BERT简介
【录播】课程简介(4分钟) 暂无试看
【录播】BERT简介(13分钟)
【录播】BERT架构(13分钟)
02
向量层是怎么来的?
【录播】位置向量(17分钟)
【录播】向量层代码讲解(19分钟)
03
注意力机制
【录播】注意力机制的数学思想(13分钟)
【录播】SelfAttention解决了什么问题?(4分钟)
【录播】SelfAttention计算细节(12分钟)
【录播】Multi-Head-Attention起什么作用?(13分钟)
【录播】AttentionMask(5分钟)
【录播】Multi_head_Attention代码讲解(26分钟)
04
Transformer_Encoder讲解
【录播】Transformer_Encoder讲解(8分钟)
【录播】TransFormer_Encoder_Layer代码讲解(14分钟)
05
Transformer架构讲解
【录播】Transformer架构讲解(6分钟)
【录播】TransFormer_decoder_layer代码讲解(11分钟)
【录播】TransForme_encoder_dncoder讲解(14分钟)
【录播】Transformer类代码讲解(7分钟)
【录播】机器翻译(24分钟)
06
BERT预训练及下游任务
【录播】BERT预训练(11分钟)
【录播】BERT下游任务及相关改进版(19分钟)
【录播】代码讲解特征向量提取对比BERT与ALBERT(22分钟)
【录播】代码讲解MLM对比BERT与ALBERT(10分钟)
07
BERT实战情感分析
【录播】情感分析代码讲解之初始化(13分钟)
【录播】情感分析代码讲解加载数据(10分钟)
【录播】建立分词器代码讲解(8分钟)
【录播】代码讲解BERT模型初始化(9分钟)
【录播】代码讲解BERT模型向量层(16分钟)
【录播】代码讲解BERT模型定义TransFormer(11分钟)
【录播】代码讲解BERT模型构建多头关注(13分钟)
【录播】代码讲解BERT模型构建堆叠多层(8分钟)
【录播】代码讲解加载BERT模型权重(7分钟)
【录播】讲解情感分析模型如何构建在BERT模型之上(6分钟)
08
BERT实战情感分析(续)
【录播】代码讲解情感分析模型生成数据并训练模型(11分钟)
【录播】模型训练结果演示(8分钟)
【录播】代码讲解句子对分类任务(7分钟)
09
BERT预训练
【录播】代码讲解RoBERTa数据生成主流程(9分钟)
【录播】代码讲解RoBERTa数据生成细节(10分钟)
【录播】代码讲解RoBERTa训练数据加载过程(8分钟)
【录播】代码讲解RoBERTa训练过程(13分钟)