TextInputFormat 父类(TextInputFormat本身含义为把每一行解析成键值对) FileInputFormat 父类 InputFormat源码 ...

首先我们来看一下jieba分词的流程图： 结巴中文分词简介 1）支持三种分词模式： 精确模式：将句子最精确的分开，适合文本分析 全模式：句子中所有可以成词的词语都扫描出来，速度快， ...

一、Masked LM get_masked_lm_output函数用于计算「任务#1」的训练 loss。输入为 BertModel 的最后一层 sequence_output 输出（[batch_ ...

简介 Transformers是一个用于自然语言处理（NLP）的Python第三方库，实现Bert、GPT-2和XLNET等比较新的模型，支持TensorFlow和PyTorch。本文介对这个库进行部分代码解读，目前文章只针对Bert，其他模型看心情。 github：https ...

一般tars客户端使用方式: 我们用客户端进行tars rpc调用时候，一般如下面这样写: 方式一、 //直连方式 TC_Endpoint ep; AdminFPrx pAdminPrx; ...

NodeServer的Node.tar部分功能流程 isValid(sIP) 判断指定的sIP是否有效 一个很重要的函数，1分钟内新增一次有效ip列表(为啥设计成新增而不是更新模式？)。这里可认为是有效的ip有3种: NodeServer当前节点的ip； 配置在/tars/node< ...

自己看读完pytorch封装的源码后，自己又重新写了一边（模仿其书写格式）， 一些问题在代码中说明。 ...

一、LDR（Load Register 加载寄存器）将存储器地址所指地址处连续的4个字节（1个字）的数据传送到目的寄存器中（pseudo-instruction loads a register w ...