目录 Sample is not differentiable Reparameterization trick Too Complex Sample is not differentiable 现在我们得到的不是一个向量，得到的是一个分布，而分布是无法使用梯度下降的 Reparameterization trick Too Complex ...
2019-06-23 16:06 0 1003 推荐指数：
摘要：常规的神经网络权重是一个确定的值，贝叶斯神经网络（BNN）中，将权重视为一个概率分布。BNN的优化常常依赖于重参数技巧（reparameterization trick），本文对该优化方法进行概要介绍。 论文地址：http://proceedings.mlr.press/v37 ...
本博客已经迁往http://www.kemaswill.com/, 博客园这边也会继续更新, 欢迎关注~ 在机器学习领域, kernel trick是一种非常有效的比较两个样本(对象)的方法. 给定两个对象$x_i, x_j \in \mathcal{X}$, 用$k(x_i, x_j ...
\(\rm{Slope\ trick}\) 并不是一个特别的 \(\rm{algorithm}\)，只是一个朴素维护折线的方式 一类题目中要维护一类特殊的分段函数，满足函数连续，每段都是一次函数，斜率为整数 从一道ABC题目开始 ABC217H 设 \(dp_{i,j}\) 表示经过前 ...
适用于一类dp值关于下标的函数是连续函数，分段函数，凸函数，每一段需要是一次函数，需要是整数斜率。常见于一些最小调整代价题，因为经常会有\(|x-y|\)这种典型符合上述要求的函数出现，而且这类dp通 ...
最近读RNNLM的源代码，发现其实现矩阵乘法时使用了一个trick，这里描述一下这个trick。 首先是正常版的矩阵乘法（其实是矩阵乘向量） 就是最简单的for循环，逐行逐列遍历。 接下来是RNNLM中实现的trick版本 对比普通版，trick版把遍历行的for循环分成了8份 ...
目录 1. 前言 2. 详解 3. 总结 4. 参考资料 1. 前言 Slope Trick，是一种优化 DP 的方式，这个方式目前好像并不盛行，但是以前好像还挺流行的（？），网上讲 Slope Trick 的博客好像也不多 ...
(re-parameterization)，都可以试试Gumbel-Softmax Trick。 这篇文章是学习以下链接之后的个人理解 ...
0x00 前言 本文源于实战场景，以下所有测试均基于Fastadmin前台模版getshell漏洞环境 环境： Win10 Phpstudy 2018 ...
