一、MCMC 简介 1. Monte Carlo 蒙特卡洛 　　蒙特卡洛方法（Monte Carlo）是一种通过特定分布下的随机数（或伪随机数）进行模拟的方法。典型的例子有蒲丰投针、定积分计算等等，其基础是大数定律。 蒙特卡洛方法有哪些优缺点如下： 优点：计算准确性由采样的均匀程度 ...

MCMC方法在贝叶斯统计中运用很多，MIT发布的EMCEE是实现的比较好的。介绍页面在下面。源代码中examples里的代码可以帮助理解各种功能，特别是line.py 列出了最小二乘法，最大似然法和MCMC方法进行线性拟合的测试结果。 此方法最重要的问题是需要会按照自己的需要改写似然函数 ...

1.随机重排序 使用take()随机排序 如： df.take([54]) #采取索引为54的数据 可以借助np.random.permutation()函数随机排序 permut ...

StratifiedKFold用法类似Kfold，但是他是分层采样，确保训练集，测试集中各类别样本的比例与原始数据集中相同。 例子： import numpy as np from skle ...

1、基本概念 （1）桶表是对某一列数据进行哈希取值以将数据打散，然后放到不同文件中存储。 （2）在hive分区表中，分区中的数据量过于庞大时，建议使用桶。 （3）在分桶时，对指定字段的值进行hash运算得到hash值，并使用hash值除以桶的个数做取余运算得到的值进行分桶，保证 ...

最近由于需要大概研究了一下MYSQL的随机抽取实现方法。举个例子，要从tablename表中随机提取一条记录，大家一般的写法就是：SELECT * FROM tablename ORDER BY RAND() LIMIT 1。 但是，后来我查了一下MYSQL的官方手册，里面针对 ...

A、抽样原则 A1、基本概念和 OC(operating characteristic) curve 对于全检测下：在（样本数N，不良品p）情况下，基于二项分布，OC曲线确定。 对于抽样检测，其概率分布一般采用如下方式选择： 决定某一批产品的质量（缺陷水平）的是被抽出来检验 ...

在mysql中带了随机取数据的函数，在mysql中我们会有rand()函数，很多朋友都会直接使用，如果几百条数据肯定没事，如果几万或百万时你会发现，直接使用是错误的。下面我来介绍随机取数据一些优化方法。 SELECT * FROM table_name ORDER BY rand ...