IDL只能通过调用envi的二次接口做图像的变换,但是对于普通的数据没有提供函数。根据主成分变换的原理,用IDL写出来了,这样就不用每次再去用matlab的princomp去做了。主成分变化的基本过程:
(1)把原始数据中每个样本用一个向量表示,然后把所有样本组合起来构成一个矩阵。当然了,为了避免样本的单位的影响,样本集需要标准化。
(2)求该矩阵的协防差矩阵
(3)求步骤2中得到的协方差矩阵的特征值和特征向量。
(4)将求出的特征向量按照特征值的大小进行组合形成一个映射矩阵。
(5)用步骤4的映射矩阵对标准化后的原始数据进行映射。
 
IDL代码:
;+
; :AUTHOR: Cao zhigang
; :Copyright:CAS-NIGLAS
; :email:zhigang_niglas@163.com
; :blog:blog.sina.com.cn/ahnucao
;-
 
 
PRO PRINCOMP,IN_DATA = in_data,LOADINGS = loadings,SCORES = scores,LATENT = latent
 
  ; Principal component analysis (PCA) on data
  ; 
  ; IN_DATA: n*p matrix as input,n-observations, p-variables.
  ; LOADINGS is a p-by-p matrix
  ; LATENT: a vector containing the eigenvalues of the covariance matrix of IN_DATA
  ; SCORES: the principal component scores
 
  ; Attention: the structure of array in IDL is: col * row, must transpose the matrix according to actual situation.
  ;
  ;
  ; To determin the deminsions of in_data
 
  IF N_ELEMENTS(SIZE(in_data,/dimension)) NE 2 THEN BEGIN
    PRINT,'Input data must be 2-d form.'
    RETURN
  ENDIF
  ;
  ; Get the col and row
  ;
  dims = SIZE(in_data,/dimensions)
  col = dims[0]
  row = dims[1]
  ;------------------------PCA----------------------------------------------
  ;
  ;1. Normalize the data,i.e., to minus the mean of every column
 
  avg = FLTARR(col)
  avg = MEAN(in_data,dimension = 2); Get the mean values of every column
 
  nor_data = FLTARR(col,row)
  ; Normalize
  FOR i=0,col-1 DO BEGIN
    nor_data[i,*] = in_data[i,*] - avg[i]
  ENDFOR
 
  ;2 Get covariance matrix
  cov = IMSL_COVARIANCES(TRANSPOSE(nor_data))
 
  ;3 Calc eigvalues and eig-vector by IMSL Advanced Math and Statistics
  eig = IMSL_EIG(cov,vector = eig_matrix)
  ; 
  scores = nor_data##FLOAT(eig_matrix)
  ;
  latent = FLOAT(eig)
  loadings =FLOAT(eig_matrix)
END
 
测试:
 
PRO TEST_PRINCOMP
  ;
  x1 = [2.5,0.5,2.2,1.9,3.1,2.3,2,1,1.5,1.1]
  x2 = [2.4,0.7,2.9,2.2,3.0,2.7,1.6,1.1,1.6,0.9]
  x = [[x1],[x2]]
  PRINCOMP,in_data = TRANSPOSE(x),loadings = loadings,scores= scores,latent= latent
  HELP,loadings,scores,latent
  PRINT,loadings,STRING(13b)
  PRINT,scores,STRING(13b)
  PRINT,latent,STRING(13b)
END
输出结果:
0.677873     0.735179
     0.735179    -0.677873
 
 
     0.827970     0.175115
     -1.77758    -0.142857
     0.992198    -0.384375
     0.274210    -0.130417
      1.67580     0.209498
     0.912949    -0.175282
   -0.0991096     0.349825
     -1.14457   -0.0464174
    -0.438046   -0.0177647
     -1.22382     0.162675
 
 
      1.28403    0.0490834
和matlab的结果对比,基本一样。但是大量数据的测试还未进行。

IDL实现主成分变化(PCA)的更多相关文章

  1. 【笔记】求数据的对应主成分PCA(第一主成分)

    求数据的第一主成分 (在notebook中) 将包加载好,再创建出一个虚拟的测试用例,生成的X有两个特征,特征一为0到100之间随机分布,共一百个样本,对于特征二,其和特征一有一个基本的线性关系(为什 ...

  2. IDL 实现PCA算法

    在多元统计分析中,主成分分析(Principal components analysis,PCA)是一种分析.简化数据集的技术.主成分分析经常用于减少数据集的维数,同时保持数据集中的对方差贡献最大的特 ...

  3. 13机器学习实战之PCA(1)

    降维技术 对数据进行降维有如下一系列的原因: 使得数据集更容易使用 降低很多算法的计算开销 去除噪音 使得结果易懂 在以下3种降维技术中, PCA的应用目前最为广泛,因此本章主要关注PCA. 主成分分 ...

  4. Spark2 oneHot编码--标准化--主成分--聚类

    1.导入包 import org.apache.spark.sql.SparkSession import org.apache.spark.sql.Dataset import org.apache ...

  5. 机器学习:PCA(人脸识别中的应用——特征脸)

    一.思维理解 X:原始数据集: Wk:原始数据集 X 的前 K 个主成分: Xk:n 维的原始数据降维到 k 维后的数据集: 将原始数据集降维,就是将数据集中的每一个样本降维:X(i) . WkT = ...

  6. 机器学习(七) PCA与梯度上升法 (上)

    一.什么是PCA 主成分分析 Principal Component Analysis 一个非监督学的学习算法 主要用于数据的降维 通过降维,可以发现更便于人类理解的特征 其他应用:可视化:去噪 第一 ...

  7. PCA 在手写数字数据集上的应用

    在 skilearn 的手写数据集中,每个数据点都是 0 到 9 之间手写数字的一张 8*8 灰度图像.用 PCA 将其降维到二维,并可视化数据点,如下: 1.digits 数据演示: from sk ...

  8. 4.pca与梯度上升法

    (一)什么是pca pca,也就是主成分分析法(principal component analysis),主要是用来对数据集进行降维处理.举个最简单的例子,我要根据姓名.年龄.头发的长度.身高.体重 ...

  9. 【笔记】求数据前n个主成分以及对高维数据映射为低维数据

    求数据前n个主成分并进行高维数据映射为低维数据的操作 求数据前n个主成分 先前的将多个样本映射到一个轴上以求使其降维的操作,其中的样本点本身是二维的样本点,将其映射到新的轴上以后,还不是一维的数据,对 ...

随机推荐

  1. bbc 大数据

    http://video.sina.com.cn/v/b/107900125-2192582404.html

  2. JSP 2秒跳转到首页

    <%@ page contentType="text/html;charset=utf-8" pageEncoding="utf-8"%><h ...

  3. [BZOJ 1042] [HAOI2008] 硬币购物 【DP + 容斥】

    题目链接:BZOJ - 1042 题目分析 首先 Orz Hzwer ,代码题解都是看的他的 blog. 这道题首先使用DP预处理,先求出,在不考虑每种硬币个数的限制的情况下,每个钱数有多少种拼凑方案 ...

  4. Ext.js form 表单提交问题

    var form = new Ext.form.FormPanel({ labelAlign : 'right', border : false, bodyStyle : 'background-co ...

  5. Content related to smartcards (and RFID/NFC)

    Introduction Add your content here. ISO/IEC 7816 Contact Cards Hardware EMV payment cards Orange Cas ...

  6. soap协议

    定义: 简单对象访问协议是交换数据的一种协议规范,是一种轻量的.简单的.基于XML(标准通用标记语言下的一个子集)的协议,它被设计成在WEB上交换结构化的和固化的信息. 协议中的几个关键词术语: SO ...

  7. 后缀数组:HDU1043 Longest Common Substring

    Longest Common Substring Time Limit: 8000/4000 MS (Java/Others)    Memory Limit: 65536/32768 K (Java ...

  8. 【二分】NEERC15 L Landscape Improved(2015-2016 ACM-ICPC)(Codeforces GYM 100851)

    题目链接: http://codeforces.com/gym/100851 题目大意: 一个宽度为N的网格图,i上有h[i]高的方块.现在你有W个方块,问怎么放使得最终的最高点最高. 只要一个格子的 ...

  9. 综合查询员工和datetime.now和datetime.today区别

    一:综合查询图 二:EmployeeListWindow.cs代码 using System; using System.Collections.Generic; using System.Compo ...

  10. Delphi WEB APP DEBUGGER是如何使用的

      WEB APP DEBUGGER是怎么使用的最近在写一个WEBSERVICE的程序,怎么设置使用,WEBAPPDEBUGGER这个工具呢,让别人在调用我的WEBSERVICE的时候我可以调试的?谢 ...