概率统计Python计算:双因素等重复试验方差分析

2024-08-22 22:48

本文主要是介绍概率统计Python计算:双因素等重复试验方差分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在这里插入图片描述
双因素等重复试验的数据模型 X X X是一个结构为 r × s × t r\times s\times t r×s×t的3-维矩阵(张量),其中 X i j k X_{ijk} Xijk取自于总体指标 N ( μ i j , σ 2 ) N(\mu_{ij},\sigma^2) N(μij,σ2) i = 1 , 2 , ⋯ , r , j = 1 , 2 , ⋯ , s , k = 1 , 2 , ⋯ , t i=1,2,\cdots,r,j=1,2,\cdots,s,k=1,2,\cdots,t i=1,2,,r,j=1,2,,s,k=1,2,,t。记 X ‾ = 1 r s t ∑ i = 1 r ∑ j = 1 s ∑ k = 1 t X i j k X ‾ i j = 1 t ∑ k = 1 t X i j k , i = 1 , 2 , ⋯ ; r , j = 1 , 2 , ⋯ , s X ‾ i ⋅ = 1 s t ∑ j = 1 s ∑ k = 1 t X i j k = 1 s ∑ j = 1 s X ‾ i j , i = 1 , 2 , ⋯ , r X ‾ ⋅ j = 1 r t ∑ i = 1 r ∑ k = 1 t X i j k = 1 r ∑ i = 1 r X ‾ i j , j = 1 , 2 ⋯ , s S T = ∑ i = 1 r ∑ j = 1 s ∑ k = 1 t ( X i j k − X ‾ ) 2 \overline{X}=\frac{1}{rst}\sum_{i=1}^r\sum_{j=1}^s\sum_{k=1}^{t}X_{ijk}\\\overline{X}_{ij}=\frac{1}{t}\sum_{k=1}^tX_{ijk},i=1,2,\cdots;r,j=1,2,\cdots,s\\\overline{X}_{i\cdot}=\frac{1}{st}\sum_{j=1}^s\sum_{k=1}^tX_{ijk}=\frac{1}{s}\sum_{j=1}^s\overline{X}_{ij},i=1,2,\cdots,r\\ \overline{X}_{\cdot j}=\frac{1}{rt}\sum_{i=1}^r\sum_{k=1}^tX_{ijk}=\frac{1}{r}\sum_{i=1}^r\overline{X}_{ij},j=1,2\cdots,s\\ S_T=\sum_{i=1}^r\sum_{j=1}^s\sum_{k=1}^t(X_{ijk}-\overline{X})^2 X=rst1i=1rj=1sk=1tXijkXij=t1k=1tXijk,i=1,2,;r,j=1,2,,sXi=st1j=1sk=1tXijk=s1j=1sXij,i=1,2,,rXj=rt1i=1rk=1tXijk=r1i=1rXij,j=1,2,sST=i=1rj=1sk=1t(XijkX)2
其中, X ‾ \overline{X} X为样本总均值, X ‾ i ⋅ \overline{X}_{i\cdot} Xi为因素水平 A i A_i Ai对应的样本均值, X ‾ ⋅ j \overline{X}_{\cdot j} Xj为因素水平 B j B_j Bj对应的样本均值, X ‾ i j \overline{X}_{ij} Xij为组合因素样本均值, S T S_T ST样本总变差
S E = ∑ i = 1 r ∑ j = 1 s ∑ k = 1 t ( X i j k − X ‾ i j ) 2 S_E=\sum\limits_{i=1}^r\sum\limits_{j=1}^s\sum\limits_{k=1}^t(X_{ijk}-\overline{X}_{ij})^2 SE=i=1rj=1sk=1t(XijkXij)2,称为误差平方和 S A = s t ∑ i = 1 r ( X ‾ i ⋅ − X ‾ ) 2 S_A=st\sum\limits_{i=1}^{r}(\overline{X}_{i\cdot}-\overline{X})^2 SA=sti=1r(XiX)2,称为因素 A A A的效应平方和 S B = r t ∑ j = 1 s ( X ‾ ⋅ j − X ‾ ) 2 S_B=rt\sum\limits_{j=1}^s(\overline{X}_{\cdot j}-\overline{X})^2 SB=rtj=1s(XjX)2,称为效应 B B B的平方和 S A B = t ∑ i = 1 r ∑ j = 1 s ( X ‾ i j − X ‾ i ⋅ − X ‾ ⋅ j + X ‾ ) 2 S_{AB}=t\sum\limits_{i=1}^r\sum\limits_{j=1}^s(\overline{X}_{ij}-\overline{X}_{i\cdot}-\overline{X}_{\cdot j}+\overline{X})^2 SAB=ti=1rj=1s(XijXiXj+X)2,称为因素 A A A B B B的交互效应平方和
与单因素试验模型中样本总变差 S T S_T ST的分解类似,双因素等重复试验的样本总变差 S T S_T ST可分解为
S T = S E + S A + S B + S A B . S_T=S_E+S_A+S_B+S_{AB}. ST=SE+SA+SB+SAB.
下列代码定义双因素等重复试验的样本总变差 S T S_T ST的分解函数。

def dfeDecompose(X):(r,s,t)=X.shape									#模型数据结构X_bar=X.mean(axis=2)							#组合因素样本均值Xi_bar=X_bar.mean(axis=1).reshape(r,1)			#A因素水平样本均值Xj_bar=X_bar.mean(axis=0).reshape(1,s)			#B因素水平样本均值Xt_bar=X.mean()									#样本总均值ST=((X-Xt_bar)**2).sum()						#样本总变差SA=s*t*((Xi_bar-Xt_bar)**2).sum()				#A效应平方和SB=r*t*((Xj_bar-Xt_bar)**2).sum()				#B效应平方和SAB=t*((X_bar-Xi_bar-Xj_bar+Xt_bar)**2).sum()	#交互效应平方和SE=ST-SA-SB-SAB									#误差平方和return r, s, t, SA, SB, SAB, SE

第2行从X的结构中读取其宽度r,长度s和深度t。第3行计算因素水平 A i A_i Ai B j B_j Bj组合对应的样本均值 X ‾ i j \overline{X}_{ij} Xij 1 ≤ i ≤ r , 1 ≤ j ≤ s 1\leq i\leq r,1\leq j\leq s 1ir,1js)为X_bar。它是由参数X表示的张量按下标 k k k方向计算样本均值:X.mean(axis=2)所得,这是一个 r × s r\times s r×s的矩阵。第4行由X_bar按下标 j j j的方向计算因素水平 A i A_i Ai对应的样本均值 X ‾ i ⋅ \overline{X}_{i\cdot} Xi为Xi_bar,设置为一个 r × 1 r\times1 r×1的矩阵。相仿地,第5行由X_bar按下标 i i i的方向计算因素水平 B j B_j Bj对应的样本均值 X ‾ ⋅ j \overline{X}_{\cdot j} Xj为Xj_bar,设置为一个 1 × s 1\times s 1×s的矩阵。第6行计算总样本均值 X ‾ \overline{X} X为Xt_bar,这是一个实数。第7行计算总变差平方 S T = ∑ i = 1 r ∑ j = 1 s ∑ k = 1 t ( X i j k − X ‾ ) 2 S_T=\sum\limits_{i=1}^r\sum\limits_{j=1}^s\sum\limits_{k=1}^t(X_{ijk}-\overline{X})^2 ST=i=1rj=1sk=1t(XijkX)2为ST。第8行计算因素 A A A的效应平方和 S A = s t ∑ i = 1 r ( X ‾ i ⋅ − X ‾ ) 2 S_A=st\sum\limits_{i=1}^{r}(\overline{X}_{i\cdot}-\overline{X})^2 SA=sti=1r(XiX)2为SA。第9行计算因素 B B B的效应平方和 S B = r t ∑ j = 1 s ( X ‾ ⋅ j − X ‾ ) 2 S_B=rt\sum\limits_{j=1}^s(\overline{X}_{\cdot j}-\overline{X})^2 SB=rtj=1s(XjX)2为SB。第10行计算因素的交互效应平方和 S A B = t ∑ i = 1 r ∑ j = 1 s ( X ‾ i j − X ‾ i ⋅ − X ‾ ⋅ j + X ‾ ) 2 S_{AB}=t\sum\limits_{i=1}^r\sum\limits_{j=1}^s(\overline{X}_{ij}-\overline{X}_{i\cdot}-\overline{X}_{\cdot j}+\overline{X})^2 SAB=ti=1rj=1s(XijXiXj+X)2为SAB,正因为我们将Xi_bar和Xj_bar设置成了 r × 1 r\times1 r×1 1 × s 1\times s 1×s的矩阵,所以此处的表达式才几乎和数学表达式一样简洁。利用算得的数据 r r r s s s t t t S A S_A SA S B S_B SB S A B S_{AB} SAB S E S_E SE计算假设
H 01 : μ i ⋅ − μ = 0 , i = 1 , 2 , ⋯ , r H 02 : μ ⋅ j − μ = 0 , j = 1 , 2 , ⋯ , s H 03 : μ i j − μ i ⋅ − μ ⋅ j + μ = 0 , i = 1 , 2 , ⋯ , r , j = 1 , 2 , ⋯ , s H_{01}:\mu_{i\cdot}-\mu=0,i=1,2,\cdots,r\\ H_{02}:\mu_{\cdot j}-\mu=0,j=1,2,\cdots,s\\ H_{03}:\mu_{ij}-\mu_{i\cdot}-\mu_{\cdot j}+\mu=0,i=1,2,\cdots,r,j=1,2,\cdots,s H01:μiμ=0,i=1,2,,rH02:μjμ=0,j=1,2,,sH03:μijμiμj+μ=0,i=1,2,,r,j=1,2,,s
其中,令 μ = 1 r s ∑ i = 1 r ∑ j = 1 s μ i j \mu=\frac{1}{rs}\sum\limits_{i=1}^r\sum\limits_{j=1}^s\mu_{ij} μ=rs1i=1rj=1sμij μ i ⋅ = 1 s ∑ j = 1 s μ i j \mu_{i\cdot}=\frac{1}{s}\sum\limits_{j=1}^s\mu_{ij} μi=s1j=1sμij μ ⋅ j = 1 r ∑ i = 1 r μ i j \mu_{\cdot j}=\frac{1}{r}\sum\limits_{i=1}^r\mu_{ij} μj=r1i=1rμij。接受 H 01 H_{01} H01意味着因素A对试验没有显著影响;接受 H 02 H_{02} H02,意味着因素B对试验结果没有显著影响;接受 H 03 H_{03} H03意味因素A和B对试验结果没有交互影响。
下列代码定义在显著水平 α \alpha α下检验假设 H 01 H_{01} H01 H 02 H_{02} H02 H 03 H_{03} H03的函数。

def dfeTest(r, s, t, SA, SB, SAB, SE, alpha):F=(r*s*(t-1))*SA/SE/(r-1)				#H01检验统计量值accept1=ftestR(F, r-1, r*s*(t-1), alpha)F=(r*s*(t-1))*SB/SE/(s-1)				#H02检验统计量值accept2=ftestR(F, s-1,r*s*(t-1), alpha)F=(r*s*(t-1)*SAB)/((r-1)*(s-1)*SE)		#H03检验统计量值accept3=ftestR(F, (r-1)*(s-1), r*s*(t-1), alpha)return accept1, accept2, accept3

第2行设置假设 H 01 H_{01} H01的检验统计量值 S A / ( r − 1 ) S E / r s ( t − 1 ) \frac{S_A/(r-1)}{S_E/rs(t-1)} SE/rs(t1)SA/(r1)~ F ( r − 1 , r s ( t − 1 ) ) F(r-1,rs(t-1)) F(r1,rs(t1)),第3行调用函数ftestR计算假设 H 01 H_{01} H01的右侧检验。第4行设置 H 02 H_{02} H02的检验统计量值 S B / ( s − 1 ) S E / ( r s ( t − 1 ) ) \frac{S_B/(s-1)}{S_E/(rs(t-1))} SE/(rs(t1))SB/(s1)~ F ( s − 1 , r s ( t − 1 ) ) F(s-1,rs(t-1)) F(s1,rs(t1)),第5行计算假设 H 02 H_{02} H02右侧的检验。第6行设置 H 03 H_{03} H03的检验统计量值 S A B / ( r − 1 ) ( s − 1 ) S E / ( r s ( t − 1 ) ) \frac{S_{AB}/(r-1)(s-1)}{S_E/(rs(t-1))} SE/(rs(t1))SAB/(r1)(s1)~ F ( ( r − 1 ) ( s − 1 ) , r s ( t − 1 ) ) F((r-1)(s-1), rs(t-1)) F((r1)(s1),rs(t1)),第7行计算假设 H 03 H_{03} H03的右侧检验。
例1一火箭使用四种燃料,三种推进器作射程试验。每种燃料与每种推进器的组合各发射火箭两次,得射程(单位:海里)如下:

推进器 B 1 B_1 B1推进器 B 2 B_2 B2推进器 B 3 B_3 B3
燃料 A 1 A_1 A158.2,52.656.2,41.265.3,60.8
燃料 A 2 A_2 A249.1,42.854.1,50.551.6,48,4
燃料 A 3 A_3 A360.1,58.370.9,73.239.2,40.7
燃料 A 4 A_4 A475.8,71.558.2,51.048.7,41.4

假定火箭对应第 i i i种燃料,第 j j j种推进器的射程服从 N ( μ i j , σ 2 ) N(\mu_{ij},\sigma^2) N(μij,σ2) 1 ≤ i ≤ 4 1\leq i\leq4 1i4 1 ≤ j ≤ 3 1\leq j\leq3 1j3。希望通过对试验数据的分析,判断选择最佳的燃料与推进器的搭配( α = 0.05 \alpha=0.05 α=0.05)。
解: 下列代码计算本例。

alpha=0.05
X=np.array([[[58.2, 52.6],[56.2, 41.2],[65.3, 60.8]],[[49.1, 42.8],[54.1, 50.5],[51.6, 48.4]],[[60.1, 58.3],[70.9, 73.2],[39.2, 40.7]],[[75.8, 71.5],[58.2, 51.0],[48.7, 41.4]]])
r, s, t, SA, SB, SAB, SE=dfeDecompose(X)
H0=dfeTest(r, s, t, SA, SB, SAB, SE, alpha)
print(H0)

第1~5行按题面设置数据。第6行调用函数dfeDecompose分解样本总变差,得到数据 r r r s s s t t t S A S_A SA S B S_B SB S A B S_{AB} SAB S E S_E SE。第7行调用函数dfeTest计算假设 H 01 H_{01} H01 H 02 H_{02} H02 H 03 H_{03} H03的检验。运行程序,输出

(False, False, False)

表示拒绝假设 H 01 H_{01} H01 H 02 H_{02} H02 H 03 H_{03} H03,燃料、推进器以及两者的组合都显著影响火箭的射程。由表观察可见燃料4和推进器1的组合有利于射程。
写博不易,敬请支持:
如果阅读本文于您有所获,敬请点赞、评论、收藏,谢谢大家的支持!
代码诚可贵,原理价更高。若为AI学,读正版书好
返回《导引》

这篇关于概率统计Python计算:双因素等重复试验方差分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1097614

相关文章

python: 多模块(.py)中全局变量的导入

文章目录 global关键字可变类型和不可变类型数据的内存地址单模块(单个py文件)的全局变量示例总结 多模块(多个py文件)的全局变量from x import x导入全局变量示例 import x导入全局变量示例 总结 global关键字 global 的作用范围是模块(.py)级别: 当你在一个模块(文件)中使用 global 声明变量时,这个变量只在该模块的全局命名空

hdu1496(用hash思想统计数目)

作为一个刚学hash的孩子,感觉这道题目很不错,灵活的运用的数组的下标。 解题步骤:如果用常规方法解,那么时间复杂度为O(n^4),肯定会超时,然后参考了网上的解题方法,将等式分成两个部分,a*x1^2+b*x2^2和c*x3^2+d*x4^2, 各自作为数组的下标,如果两部分相加为0,则满足等式; 代码如下: #include<iostream>#include<algorithm

hdu4865(概率DP)

题意:已知前一天和今天的天气概率,某天的天气概率和叶子的潮湿程度的概率,n天叶子的湿度,求n天最有可能的天气情况。 思路:概率DP,dp[i][j]表示第i天天气为j的概率,状态转移如下:dp[i][j] = max(dp[i][j, dp[i-1][k]*table2[k][j]*table1[j][col] )  代码如下: #include <stdio.h>#include

poj2406(连续重复子串)

题意:判断串s是不是str^n,求str的最大长度。 解题思路:kmp可解,后缀数组的倍增算法超时。next[i]表示在第i位匹配失败后,自动跳转到next[i],所以1到next[n]这个串 等于 n-next[n]+1到n这个串。 代码如下; #include<iostream>#include<algorithm>#include<stdio.h>#include<math.

poj3261(可重复k次的最长子串)

题意:可重复k次的最长子串 解题思路:求所有区间[x,x+k-1]中的最小值的最大值。求sa时间复杂度Nlog(N),求最值时间复杂度N*N,但实际复杂度很低。题目数据也比较水,不然估计过不了。 代码入下: #include<iostream>#include<algorithm>#include<stdio.h>#include<math.h>#include<cstring

【Python编程】Linux创建虚拟环境并配置与notebook相连接

1.创建 使用 venv 创建虚拟环境。例如,在当前目录下创建一个名为 myenv 的虚拟环境: python3 -m venv myenv 2.激活 激活虚拟环境使其成为当前终端会话的活动环境。运行: source myenv/bin/activate 3.与notebook连接 在虚拟环境中,使用 pip 安装 Jupyter 和 ipykernel: pip instal

【机器学习】高斯过程的基本概念和应用领域以及在python中的实例

引言 高斯过程(Gaussian Process,简称GP)是一种概率模型,用于描述一组随机变量的联合概率分布,其中任何一个有限维度的子集都具有高斯分布 文章目录 引言一、高斯过程1.1 基本定义1.1.1 随机过程1.1.2 高斯分布 1.2 高斯过程的特性1.2.1 联合高斯性1.2.2 均值函数1.2.3 协方差函数(或核函数) 1.3 核函数1.4 高斯过程回归(Gauss

poj 1113 凸包+简单几何计算

题意: 给N个平面上的点,现在要在离点外L米处建城墙,使得城墙把所有点都包含进去且城墙的长度最短。 解析: 韬哥出的某次训练赛上A出的第一道计算几何,算是大水题吧。 用convexhull算法把凸包求出来,然后加加减减就A了。 计算见下图: 好久没玩画图了啊好开心。 代码: #include <iostream>#include <cstdio>#inclu

uva 1342 欧拉定理(计算几何模板)

题意: 给几个点,把这几个点用直线连起来,求这些直线把平面分成了几个。 解析: 欧拉定理: 顶点数 + 面数 - 边数= 2。 代码: #include <iostream>#include <cstdio>#include <cstdlib>#include <algorithm>#include <cstring>#include <cmath>#inc

uva 11178 计算集合模板题

题意: 求三角形行三个角三等分点射线交出的内三角形坐标。 代码: #include <iostream>#include <cstdio>#include <cstdlib>#include <algorithm>#include <cstring>#include <cmath>#include <stack>#include <vector>#include <