README 1 命令语法 2 描述/概览 3 详细说明 4 流的选择（指定） 5 选项 6 例子 7 语法 8 表达式计算/求值 9 OpenCL选项 10 编码选项 11 解码器 12 视频解码 13 音频解码 14 字幕解码 15 编码 16 音频编码器 17 视频编码器 18 字幕编码器 19 比特流滤镜（过滤器） 20 格式选项 21 分离器（解复用） 2 描述/概览 3 详细说明 4 流的选择（指定） 5 选项 技巧/提示（原版已废弃） 6 例子 7 语法 8 表达式计算/求值 9 OpenCL选项 10 编码选项 11 解码器 12 视频解码 13 音频解码 14 字幕解码 15 编码 16 音频编码器 17 视频编码器 18 字幕编码器 19 比特流滤镜（过滤器） 20 格式选项 21 分离器（解复用） 库（含分离器）读取输入文件，分离出各类编码的数据包（流），当有 多个输入文件时， ffmpeg 试图跟踪最低时间戳实现任意输入流同步。编码数据包（除非是指定为流 式拷贝，相关内容请参考特性描述对流式拷贝的说明）通过解码器解码出非压缩的数据帧（raw视 频/PCM格式音频…），这些数据帧可以被滤镜进一步处理（下面会讲到）。经过滤镜处理的数据被重 新编码为新的数据包（流），然后经过混合器混合（例如按一定顺序和比例把音频数据包和视频数据

训练模型 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 362 9.6 编码器‐解码器架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 364 9.6.1 编码器 . . . . . . . . . . . . . . . . . . 364 9.6.2 解码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 365 9.6.3 合并编码器和解码器 . . . . . . . . . . . . . . . . . . . . . . . 编码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 367 9.7.2 解码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 369 9.7.3 损失函数

生成式摘要的深度学习网络基本结构 l 编码器/解码器结构，都是神经网络结构 l 输入的原文经过编码器编码变成向量 l 解码器从向量里面提取关键信息，组合成生成式摘要 深度学习内部注意力机制的引入 l 内部注意力机制在解码器里面做 l 关注已生成词，解决长序列摘要生成时，个别字词重复出现的问题 Bi_LSTM Bi_LSTM Bi_LSTM RNN RNN 解码器内部注意力机制 输入序列 输入序列 输入序列 输入序列。。。 编码器 解码器 摘要序列。。。 摘要序列 Rouge指标优化 Reward 文本摘要候选集 生成 更新模型 反馈 增强学习优化 深度学习模型 评分 强化学习和深度学习相结合的学习方式 l 最优化词的联合概率分布：MLE（最大似然），有监督学习。在这里生成候选的摘要集。 l ROUGE指标评价：不可导，无法采用梯度下降的方式训练，考虑强化学习，鼓励reward高的模型，通过 给与反馈来更新模型。最终训练得到表现最好的模型。 生成式摘要 Bi_LSTM Bi_LSTM Bi_LSTM RNN RNN Rouge指标优化 Reward 文本摘要候选集 生成 解码器内部注意力机制 编码器 解码器 深度学习摘要生成式模型 输入序列 输入序列 输入序列。。。 摘要序列。。。 摘要序列 更新模型 评分 返回 增强学习优化模块 最优摘要结果 生成式摘要 知识图谱关系抽取：联合学习方法

)、PCM系列(DM)、 RM(DM)、RTP/RTSP(DM)、SRT(DM)、TG2/TGP(M)、 WAV(DM)、VMD(D)等等 FFmpeg Encoder/Decoder • 编解码器： • V:AMV(E)、AVS(D)、BMP/GIF/JPEG/TIFF/PNG(E)、H261/ H263/H264(DE)、MPEG1/2/4/4v1/4v2/4v3(DE)、PGM(E)、 数据：字节流数据包。 FFmpeg KS [编解码] AVCodec编解码器的实现功能类对象。 主要保存的是：函数接⼜实现、常量。 AVCodecContext编解码器的数据类对象。 主要保存的是：数据、动态接⼜等。 AVCodecParameters编解码器的数据类对象。 主要保存的是：数据、动态接⼜等。 FFmpeg KS [流/容器] . 其他等 FFmpeg KS [编解码接⼜] • FFmpeg编解码抽象AVCodec核⼼成员： init 初始化 open 打开编解码器 decode/encode 编解码操作 flush/update 编解码刷新 close 关闭编解码器 FFmpeg KS [容器接⼜] • FFmpeg封装层AVFotmat核⼼成员： 输⼊：read_header、read_probe、

是默认的播 放和管理音乐、播放列表的程序，有些像 Microsoft Windows 媒体播放器。您可以 用 Brasero 制作音频光盘。 要在 Ubuntu 上播放 mp3 文件，您需要安装一个解码器包。因为许可证限制的原 因，Ubuntu 不会默认安装它。某些版本的 Microsoft Windows 中默认支持播放 mp3 文件。 Windows 7 有两个多媒体程序：Windows 媒体播放器(简称 持。如果希望播放这些格式，需要安装附加的多媒体解码器。多媒体解码器是一种小 软件，它使您可以用特定的格式观看视频或欣赏音乐。虽然 Ubuntu 默认包含很了多 解码器，但您可能还是需要安装其他解码器，毕竟文件格式之多，对其全部支持是不 现实的。 在 Ubuntu 中播放多媒体文件是由 Gstreamer 多媒体框架处理的。GStreamer 本 身并不提供任何多媒体编解码器，而是依赖于打包成插件的编解码器，以执行记录和 播 播放功能的。安装这些解码器最方便的方法是安装“ubuntu-restricted-extras” 包。它也包含很多其它的受限软件，它们可能需要许可证。 也有些应用程序不使用 Gstreamer 框架，如 VLC、MPlayer、Xine 等。 可以使用新立得软件包管理器或者命令行界面来安装那些可以从软件仓库中获得的多 媒体解码器。 小提示： 可以直接在电影播放器中安装解码器。当电影播放器检测到它不能播放的格式时，会

struct --- 将字节串解读为打包的二进制数据 . . . . . . . . . . . . . . . . . . . . . . . . . . . 141 7.2 codecs --- 编解码器注册和相关基类 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 146 8 数据类型 163 8.1 datetime MIME 处理包 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 961 20.2 json --- JSON 编码和解码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1015 20.3 mailcap --- Mailcap UnicodeError 具有一些描述编码或解码错误的属性。例如 err.object[err.start:err.end] 会给出导致编解码器失败的特定无效输入。 encoding 引发错误的编码名称。 reason 描述特定编解码器错误的字符串。 object 编解码器试图要编码或解码的对象。 start object 中无效数据的开始位置索引。 end object 中无效数据的末尾位置索引（不含）。

Transformer的工作流程 04 BERT 4 1.Transformer介绍 为什么需要用transformer 其实在之前我们使用的是RNN（或者是其的单向或者双向变种LSTM/GRU等） 来 作为编解码器。RNN模块每次只能够吃进一个输入token和前一次的隐藏状态，然 后得到输出。它的时序结构使得这个模型能够得到长距离的依赖关系，但是这也 使得它不能够并行计算，模型效率十分低。 在没有transformer的时候，我们 通常来说，Seq2Seq任务最常见的是使用Encoder+Decoder的模式，先将一个序 列编码成一个上下文矩阵，在使用Decoder来解码。当然，我们仅仅把context vector作为编码器到解码器的输入。 7 1.Transformer介绍 Attention注意力机制 在介绍什么是注意力机制之前， 先让大家看一张图片。当大家看 到下面图片，会首先看到什么内 容？当过载信息映入眼帘时，我 件部分也是由相同数量 （与编码器对应）的解 码器（decoder）组成 的。 17 2.Transformer的工作流程 所有的编码器在结构上都是相同 的，但它们没有共享参数。每个 解码器都可以分解成两个子层。 18 2.Transformer的工作流程 从编码器输入的句子首先会经过一个自注意力（self-attention）层，这层帮助编码器在对每 个单词编码时关注输入句子的其他单词。

struct --- 将字节串解读为打包的二进制数据 . . . . . . . . . . . . . . . . . . . . . . . . . 135 i 7.2 codecs --- 编解码器注册和相关基类 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 140 8 数据类型 157 8.1 datetime MIME 处理包 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 907 20.2 json --- JSON 编码和解码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 958 20.3 mailcap --- Mailcap UnicodeError 具有一些描述编码或解码错误的属性。例如 err.object[err.start:err. end] 会给出导致编解码器失败的特定无效输入。 encoding 引发错误的编码名称。 reason 描述特定编解码器错误的字符串。 object 编解码器试图要编码或解码的对象。 start object 中无效数据的开始位置索引。 end object 中无效数据的末尾位置索引（不含）。

struct --- 将字节串解读为打包的二进制数据 . . . . . . . . . . . . . . . . . . . . . . . . . . . 149 7.2 codecs --- 编解码器注册和相关基类 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 154 8 数据类型 171 8.1 datetime 处理包 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1021 19.2 json --- JSON 编码和解码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1076 19.3 mailcap --- Mailcap UnicodeError 具有一些描述编码或解码错误的属性。例如 err.object[err.start:err.end] 会给出导致编解码器失败的特定无效输入。 encoding 引发错误的编码名称。 reason 描述特定编解码器错误的字符串。 object 编解码器试图要编码或解码的对象。 start object 中无效数据的开始位置索引。 end object 中无效数据的末尾位置索引（不含）。

struct —将字节串解读为打包的二进制数据 . . . . . . . . . . . . . . . . . . . . . . . . . . . . 139 7.2 codecs —编解码器注册和相关基类 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 144 8 数据类型 161 8.1 datetime MIME 处理包 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 913 19.2 json —JSON 编码和解码器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 967 19.3 mailcap —Mailcap UnicodeError 具有一些描述编码或解码错误的属性。例如 err.object[err.start:err.end] 会给出导致编解码器失败的特定无效输入。 encoding 引发错误的编码名称。 reason 描述特定编解码器错误的字符串。 object 编解码器试图要编码或解码的对象。 start object 中无效数据的开始位置索引。 end object 中无效数据的末尾位置索引（不含）。