JAL-2397 scale PCA by PID to alignment width to match SeqSpace
[jalview.git] / src / jalview / analysis / PCA.java
index 4441eeb..5d2e7e7 100755 (executable)
 /*
- * Jalview - A Sequence Alignment Editor and Viewer (Version 2.7)
- * Copyright (C) 2011 J Procter, AM Waterhouse, J Engelhardt, LM Lui, G Barton, M Clamp, S Searle
+ * Jalview - A Sequence Alignment Editor and Viewer ($$Version-Rel$$)
+ * Copyright (C) $$Year-Rel$$ The Jalview Authors
  * 
  * This file is part of Jalview.
  * 
  * Jalview is free software: you can redistribute it and/or
  * modify it under the terms of the GNU General Public License 
- * as published by the Free Software Foundation, either version 3 of the License, or (at your option) any later version.
- * 
+ * as published by the Free Software Foundation, either version 3
+ * of the License, or (at your option) any later version.
+ *  
  * Jalview is distributed in the hope that it will be useful, but 
  * WITHOUT ANY WARRANTY; without even the implied warranty 
  * of MERCHANTABILITY or FITNESS FOR A PARTICULAR 
  * PURPOSE.  See the GNU General Public License for more details.
  * 
- * You should have received a copy of the GNU General Public License along with Jalview.  If not, see <http://www.gnu.org/licenses/>.
+ * You should have received a copy of the GNU General Public License
+ * along with Jalview.  If not, see <http://www.gnu.org/licenses/>.
+ * The Jalview Authors are detailed in the 'AUTHORS' file.
  */
 package jalview.analysis;
 
-import java.io.*;
+import jalview.analysis.scoremodels.PIDModel;
+import jalview.api.analysis.DistanceScoreModelI;
+import jalview.api.analysis.ScoreModelI;
+import jalview.api.analysis.SimilarityParamsI;
+import jalview.api.analysis.SimilarityScoreModelI;
+import jalview.datamodel.AlignmentView;
+import jalview.math.MatrixI;
 
-import jalview.datamodel.*;
-import jalview.datamodel.BinarySequence.InvalidSequenceTypeException;
-import jalview.math.*;
-import jalview.schemes.ResidueProperties;
-import jalview.schemes.ScoreMatrix;
+import java.io.PrintStream;
 
 /**
  * Performs Principal Component Analysis on given sequences
- * 
- * @author $author$
- * @version $Revision$
  */
 public class PCA implements Runnable
 {
-  Matrix m;
-
-  Matrix symm;
+  boolean jvCalcMode = true;
 
-  Matrix m2;
+  MatrixI symm;
 
   double[] eigenvalue;
 
-  Matrix eigenvector;
-
-  StringBuffer details = new StringBuffer();
-
-  /**
-   * Creates a new PCA object.
-   * By default, uses blosum62 matrix to generate sequence similarity matrices
-   * @param s
-   *          Set of amino acid sequences to perform PCA on
-   */
-  public PCA(String[] s)
-  {
-    this(s, false);
-  }
-  
-  /**
-   * Creates a new PCA object.
-   * By default, uses blosum62 matrix to generate sequence similarity matrices
-   * @param s
-   *          Set of sequences to perform PCA on
-   *          @param nucleotides if true, uses standard DNA/RNA matrix for sequence similarity calculation.
-   */
-  public PCA(String[] s, boolean nucleotides)
-  {
-
-    BinarySequence[] bs = new BinarySequence[s.length];
-    int ii = 0;
-
-    while ((ii < s.length) && (s[ii] != null))
-    {
-      bs[ii] = new BinarySequence(s[ii],nucleotides);
-      bs[ii].encode();
-      ii++;
-    }
-
-    BinarySequence[] bs2 = new BinarySequence[s.length];
-    ii = 0;
+  MatrixI eigenvector;
 
-    String sm=nucleotides ? "DNA" : "BLOSUM62";
-    ScoreMatrix smtrx=ResidueProperties.getScoreMatrix(sm);
-    details.append("PCA calculation using "+sm+" sequence similarity matrix\n========\n\n");
-    
-    while ((ii < s.length) && (s[ii] != null))
-    {
-      bs2[ii] = new BinarySequence(s[ii], nucleotides);
-      if (smtrx != null)
-      {
-        try
-        {
-          bs2[ii].matrixEncode(smtrx);
-        } catch (InvalidSequenceTypeException x)
-        {
-          details.append("Unexpected mismatch of sequence type and score matrix. Calculation will not be valid!\n\n");
-        }
-      }
-      ii++;
-    }
+  StringBuilder details = new StringBuilder(1024);
 
-    // System.out.println("Created binary encoding");
-    // printMemory(rt);
-    int count = 0;
+  private AlignmentView seqs;
 
-    while ((count < bs.length) && (bs[count] != null))
-    {
-      count++;
-    }
-
-    double[][] seqmat = new double[count][bs[0].getDBinary().length];
-    double[][] seqmat2 = new double[count][bs2[0].getDBinary().length];
-    int i = 0;
-
-    while (i < count)
-    {
-      seqmat[i] = bs[i].getDBinary();
-      seqmat2[i] = bs2[i].getDBinary();
-      i++;
-    }
-
-    // System.out.println("Created array");
-    // printMemory(rt);
-    // System.out.println(" --- Original matrix ---- ");
-    m = new Matrix(seqmat, count, bs[0].getDBinary().length);
-    m2 = new Matrix(seqmat2, count, bs2[0].getDBinary().length);
-
-  }
-
-  /**
-   * Returns the matrix used in PCA calculation
-   * 
-   * @return java.math.Matrix object
-   */
+  private ScoreModelI scoreModel;
+  
+  private SimilarityParamsI similarityParams;
 
-  public Matrix getM()
+  public PCA(AlignmentView s, ScoreModelI sm, SimilarityParamsI options)
   {
-    return m;
+    this.seqs = s;
+    this.similarityParams = options;
+    this.scoreModel = sm;
+    
+    details.append("PCA calculation using " + sm.getName()
+            + " sequence similarity matrix\n========\n\n");
   }
 
   /**
@@ -148,7 +71,7 @@ public class PCA implements Runnable
    */
   public double getEigenvalue(int i)
   {
-    return eigenvector.d[i];
+    return eigenvector.getD()[i];
   }
 
   /**
@@ -167,9 +90,9 @@ public class PCA implements Runnable
    */
   public float[][] getComponents(int l, int n, int mm, float factor)
   {
-    float[][] out = new float[m.rows][3];
+    float[][] out = new float[getHeight()][3];
 
-    for (int i = 0; i < m.rows; i++)
+    for (int i = 0; i < getHeight(); i++)
     {
       out[i][0] = (float) component(i, l) * factor;
       out[i][1] = (float) component(i, n) * factor;
@@ -190,9 +113,9 @@ public class PCA implements Runnable
   public double[] component(int n)
   {
     // n = index of eigenvector
-    double[] out = new double[m.rows];
+    double[] out = new double[getHeight()];
 
-    for (int i = 0; i < m.rows; i++)
+    for (int i = 0; i < out.length; i++)
     {
       out[i] = component(i, n);
     }
@@ -214,12 +137,12 @@ public class PCA implements Runnable
   {
     double out = 0.0;
 
-    for (int i = 0; i < symm.cols; i++)
+    for (int i = 0; i < symm.width(); i++)
     {
-      out += (symm.value[row][i] * eigenvector.value[i][n]);
+      out += (symm.getValue(row, i) * eigenvector.getValue(i, n));
     }
 
-    return out / eigenvector.d[n];
+    return out / eigenvector.getD()[n];
   }
 
   public String getDetails()
@@ -230,55 +153,62 @@ public class PCA implements Runnable
   /**
    * DOCUMENT ME!
    */
+  @Override
   public void run()
   {
-    details.append("PCA Calculation Mode is "+(jvCalcMode ? "Jalview variant" : "Original SeqSpace")+"\n");
-    Matrix mt = m.transpose();
-
-    details.append(" --- OrigT * Orig ---- \n");
-    if (!jvCalcMode)
-    {
-      eigenvector = mt.preMultiply(m); // standard seqspace comparison matrix
-    }
-    else
-    {
-      eigenvector = mt.preMultiply(m2); // jalview variation on seqsmace method
-    }
-
     PrintStream ps = new PrintStream(System.out)
     {
+      @Override
       public void print(String x)
       {
         details.append(x);
       }
 
+      @Override
       public void println()
       {
         details.append("\n");
       }
     };
 
-    eigenvector.print(ps);
+    // long now = System.currentTimeMillis();
+    try
+    {
+      details.append("PCA Calculation Mode is "
+              + (jvCalcMode ? "Jalview variant" : "Original SeqSpace")
+              + "\n");
 
-    symm = eigenvector.copy();
+      eigenvector = computeSimilarity(seqs);
 
-    eigenvector.tred();
+      details.append(" --- OrigT * Orig ---- \n");
+      eigenvector.print(ps, "%8.2f");
 
-    details.append(" ---Tridiag transform matrix ---\n");
-    details.append(" --- D vector ---\n");
-    eigenvector.printD(ps);
-    ps.println();
-    details.append("--- E vector ---\n");
-    eigenvector.printE(ps);
-    ps.println();
+      symm = eigenvector.copy();
+
+      eigenvector.tred();
+
+      details.append(" ---Tridiag transform matrix ---\n");
+      details.append(" --- D vector ---\n");
+      eigenvector.printD(ps, "%15.4e");
+      ps.println();
+      details.append("--- E vector ---\n");
+      eigenvector.printE(ps, "%15.4e");
+      ps.println();
 
-    // Now produce the diagonalization matrix
-    eigenvector.tqli();
+      // Now produce the diagonalization matrix
+      eigenvector.tqli();
+    } catch (Exception q)
+    {
+      q.printStackTrace();
+      details.append("\n*** Unexpected exception when performing PCA ***\n"
+              + q.getLocalizedMessage());
+      details.append("*** Matrices below may not be fully diagonalised. ***\n");
+    }
 
     details.append(" --- New diagonalization matrix ---\n");
-    eigenvector.print(ps);
+    eigenvector.print(ps, "%8.2f");
     details.append(" --- Eigenvalues ---\n");
-    eigenvector.printD(ps);
+    eigenvector.printD(ps, "%15.4e");
     ps.println();
     /*
      * for (int seq=0;seq<symm.rows;seq++) { ps.print("\"Seq"+seq+"\""); for
@@ -286,12 +216,68 @@ public class PCA implements Runnable
      * 
      * ps.print(","+component(seq, ev)); } ps.println(); }
      */
+    // System.out.println(("PCA.run() took "
+    // + (System.currentTimeMillis() - now) + "ms"));
   }
 
-  boolean jvCalcMode = true;
+  /**
+   * Computes a pairwise similarity matrix for the given sequence regions using
+   * the configured score model. If the score model is a similarity model, then
+   * it computes the result directly. If it is a distance model, then use it to
+   * compute pairwise distances, and convert these to similarity scores.
+   * 
+   * @param av
+   * @return
+   */
+  MatrixI computeSimilarity(AlignmentView av)
+  {
+    MatrixI result = null;
+    if (scoreModel instanceof SimilarityScoreModelI)
+    {
+      result = ((SimilarityScoreModelI) scoreModel).findSimilarities(av,
+              similarityParams);
+      if (scoreModel instanceof PIDModel)
+      {
+        /*
+         * scale % identities to width of alignment for backwards
+         * compatibility with Jalview 2.10.1 SeqSpace PCA calculation 
+         */
+        result.multiply(av.getWidth() / 100d);
+      }
+    }
+    else if (scoreModel instanceof DistanceScoreModelI)
+    {
+      /*
+       * find distances and convert to similarity scores
+       * reverseRange(false) preserves but reverses the min-max range
+       */
+      result = ((DistanceScoreModelI) scoreModel).findDistances(av,
+              similarityParams);
+      result.reverseRange(false);
+    }
+    else
+    {
+      System.err
+              .println("Unexpected type of score model, cannot calculate similarity");
+    }
+
+    return result;
+  }
 
   public void setJvCalcMode(boolean calcMode)
   {
     this.jvCalcMode = calcMode;
   }
+
+  /**
+   * Answers the N dimensions of the NxN PCA matrix. This is the number of
+   * sequences involved in the pairwise score calculation.
+   * 
+   * @return
+   */
+  public int getHeight()
+  {
+    // TODO can any of seqs[] be null?
+    return seqs.getSequences().length;
+  }
 }