【ML学习笔记】4:机器学习中的数学基础4(线性变换的矩阵描述)

2023-12-09 14:58

本文主要是介绍【ML学习笔记】4:机器学习中的数学基础4(线性变换的矩阵描述),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

线性空间

线性空间即向量空间,如果空间中有一个原点O,那么空间中的所有点都可以用向量来表示,这些向量及其运算构成的即是向量空间。

基是线性空间里的一组向量,使得该线性空间中任何一个向量都可以唯一表示成这组基的线性组合。
这里写图片描述则(a,b)就是P点在这个线性空间下以X向量和Y向量为基的坐标。

要成为基要满足一些条件,首先这些向量要属于这个线性空间:
这里写图片描述
并且这些向量v1…vk线性无关,而且k=n,那么这些向量构成该线性空间下的一组基。

显然基不唯一,如何选择基(选择坐标系)是一个比较值得推敲的事情,选取一组好的基可以将问题简化(基的选择要取决于要研究的问题)。

线性映射

线性映射的本质就是保持线性结构的映射,如果V和W是两个实线性空间,如果从V到W的映射T:V->W满足:
这里写图片描述
那么T就是一个线性映射。所谓保持线性结构,看的也就是加法和乘法。

到自身的线性映射T:V->V叫线性变换。

线性变换的矩阵描述

假设V和W分别为n维和m维的线性空间,那么一定存在:
这里写图片描述
分别是V和W的一组基,也就是说V和W上的所有向量都可以分别由这两组基内向量的线性组合唯一表示。
T,α,β可以唯一决定一个矩阵:
这里写图片描述
我们只需要关注前面一个线性空间里的基内向量在T上的变换,因为T是从V到W的变换,而前面一个线性空间里的基内向量又都属于V,所以得到的向量一定属于线性空间W,那么就一定能用W上的基β的线性组合唯一表示!所以这个矩阵里的每个元素Aij这样来定义:
这里写图片描述
展开来看(反着推看起来顺一些),这个矩阵有这样的性质:
这里写图片描述
往往记为:
这里写图片描述
在不产生误解的情况下,还可以简记为:
这里写图片描述
显然这个矩阵和基的选取有密不可分的关系。从这个式子中可以看出,矩阵可以理解为线性映射在特定基下的一种定量描述

针对换基的矩阵变换公式

如果存在矩阵P和矩阵Q,分别是V和W里基的变换矩阵(新的基中每一个向量都是原来基中向量的线性组合),使变换后的基(仍然是那个线性空间的基)满足:
这里写图片描述
也就是说存在这样的矩阵:
这里写图片描述
从而:
这里写图片描述
(左边两块相等,是因为前面说了线性映射是保持加法和乘法的)
把P移过去,也就是:
这里写图片描述
和前面线性变换的矩阵描述得到的式子比较一下,发现这块东西其实就是以α,β为基的线性变换T的描述矩阵,也就得到了:
这里写图片描述
也就是说可以直接用这两个基的变换矩阵去得到新的两个基的线性变换的描述矩阵。

线性映射和算法的关联

比如一个求斐波那契数的问题,就可以用线性映射来表示,因为斐波那契数列满足:
这里写图片描述
则相邻的两对斐波那契数组成的向量满足这样的线性映射:
这里写图片描述
也就是说这个问题可以转换成矩阵的乘法问题,而且可以用这样的映射求如此远的斐波那契数:
这里写图片描述

这篇关于【ML学习笔记】4:机器学习中的数学基础4(线性变换的矩阵描述)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/474101

相关文章

HarmonyOS学习(七)——UI(五)常用布局总结

自适应布局 1.1、线性布局(LinearLayout) 通过线性容器Row和Column实现线性布局。Column容器内的子组件按照垂直方向排列,Row组件中的子组件按照水平方向排列。 属性说明space通过space参数设置主轴上子组件的间距,达到各子组件在排列上的等间距效果alignItems设置子组件在交叉轴上的对齐方式,且在各类尺寸屏幕上表现一致,其中交叉轴为垂直时,取值为Vert

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

【前端学习】AntV G6-08 深入图形与图形分组、自定义节点、节点动画(下)

【课程链接】 AntV G6:深入图形与图形分组、自定义节点、节点动画(下)_哔哩哔哩_bilibili 本章十吾老师讲解了一个复杂的自定义节点中,应该怎样去计算和绘制图形,如何给一个图形制作不间断的动画,以及在鼠标事件之后产生动画。(有点难,需要好好理解) <!DOCTYPE html><html><head><meta charset="UTF-8"><title>06

学习hash总结

2014/1/29/   最近刚开始学hash,名字很陌生,但是hash的思想却很熟悉,以前早就做过此类的题,但是不知道这就是hash思想而已,说白了hash就是一个映射,往往灵活利用数组的下标来实现算法,hash的作用:1、判重;2、统计次数;

零基础学习Redis(10) -- zset类型命令使用

zset是有序集合,内部除了存储元素外,还会存储一个score,存储在zset中的元素会按照score的大小升序排列,不同元素的score可以重复,score相同的元素会按照元素的字典序排列。 1. zset常用命令 1.1 zadd  zadd key [NX | XX] [GT | LT]   [CH] [INCR] score member [score member ...]

【机器学习】高斯过程的基本概念和应用领域以及在python中的实例

引言 高斯过程(Gaussian Process,简称GP)是一种概率模型,用于描述一组随机变量的联合概率分布,其中任何一个有限维度的子集都具有高斯分布 文章目录 引言一、高斯过程1.1 基本定义1.1.1 随机过程1.1.2 高斯分布 1.2 高斯过程的特性1.2.1 联合高斯性1.2.2 均值函数1.2.3 协方差函数(或核函数) 1.3 核函数1.4 高斯过程回归(Gauss

uva 10014 Simple calculations(数学推导)

直接按照题意来推导最后的结果就行了。 开始的时候只做到了第一个推导,第二次没有继续下去。 代码: #include<stdio.h>int main(){int T, n, i;double a, aa, sum, temp, ans;scanf("%d", &T);while(T--){scanf("%d", &n);scanf("%lf", &first);scanf

uva 10025 The ? 1 ? 2 ? ... ? n = k problem(数学)

题意是    ?  1  ?  2  ?  ...  ?  n = k 式子中给k,? 处可以填 + 也可以填 - ,问最小满足条件的n。 e.g k = 12  - 1 + 2 + 3 + 4 + 5 + 6 - 7 = 12 with n = 7。 先给证明,令 S(n) = 1 + 2 + 3 + 4 + 5 + .... + n 暴搜n,搜出当 S(n) >=

uva 11044 Searching for Nessy(小学数学)

题意是给出一个n*m的格子,求出里面有多少个不重合的九宫格。 (rows / 3) * (columns / 3) K.o 代码: #include <stdio.h>int main(){int ncase;scanf("%d", &ncase);while (ncase--){int rows, columns;scanf("%d%d", &rows, &col

【生成模型系列(初级)】嵌入(Embedding)方程——自然语言处理的数学灵魂【通俗理解】

【通俗理解】嵌入(Embedding)方程——自然语言处理的数学灵魂 关键词提炼 #嵌入方程 #自然语言处理 #词向量 #机器学习 #神经网络 #向量空间模型 #Siri #Google翻译 #AlexNet 第一节:嵌入方程的类比与核心概念【尽可能通俗】 嵌入方程可以被看作是自然语言处理中的“翻译机”,它将文本中的单词或短语转换成计算机能够理解的数学形式,即向量。 正如翻译机将一种语言