Merge branch 'patch/JAL-4311_import_pLDDT_scores_from_nonAlphaFold_sources' into...
[jalview.git] / src / jalview / ws / datamodel / alphafold / PAEContactMatrix.java
index af8dfc3..dcd2022 100644 (file)
 package jalview.ws.datamodel.alphafold;
 
+import java.io.File;
+import java.io.FileInputStream;
+import java.io.IOException;
 import java.util.Iterator;
 import java.util.List;
 import java.util.Map;
 
+import org.json.simple.JSONObject;
+
 import jalview.datamodel.ContactListI;
 import jalview.datamodel.ContactListImpl;
 import jalview.datamodel.ContactListProviderI;
 import jalview.datamodel.ContactMatrixI;
+import jalview.datamodel.FloatContactMatrix;
+import jalview.datamodel.GroupSet;
+import jalview.datamodel.SequenceDummy;
 import jalview.datamodel.SequenceI;
+import jalview.io.FileFormatException;
+import jalview.util.MapList;
+import jalview.util.MapUtils;
+import jalview.ws.dbsources.EBIAlfaFold;
 
-public class PAEContactMatrix implements ContactMatrixI
+/**
+ * routines and class for holding predicted alignment error matrices as produced
+ * by alphafold et al.
+ * 
+ * getContactList(column) returns the vector of predicted alignment errors for
+ * reference position given by column getElementAt(column, i) returns the
+ * predicted superposition error for the ith position when column is used as
+ * reference
+ * 
+ * Many thanks to Ora Schueler Furman for noticing that earlier development
+ * versions did not show the PAE oriented correctly
+ *
+ * @author jprocter
+ *
+ */
+public class PAEContactMatrix extends
+        MappableContactMatrix<PAEContactMatrix> implements ContactMatrixI
 {
 
-  SequenceI refSeq = null;
 
-  int maxrow = 0, maxcol = 0;
+  @SuppressWarnings("unchecked")
+  public PAEContactMatrix(SequenceI _refSeq, Map<String, Object> pae_obj)
+          throws FileFormatException
+  {
+    setRefSeq(_refSeq);
+    // convert the lists to primitive arrays and store
+
+    if (!MapUtils.containsAKey(pae_obj, "predicted_aligned_error", "pae"))
+    {
+      parse_version_1_pAE(pae_obj);
+      return;
+    }
+    else
+    {
+      parse_version_2_pAE(pae_obj);
+    }
+  }
 
-  int[] indices1, indices2;
+  /**
+   * construct a sequence associated PAE matrix directly from a float array
+   * 
+   * @param _refSeq
+   * @param matrix
+   */
+  public PAEContactMatrix(SequenceI _refSeq, float[][] matrix)
+  {
+    mappedMatrix=new FloatContactMatrix(matrix);
+    setRefSeq(_refSeq);
+  }
 
-  float[][] elements;
+  /**
+   * new matrix with specific mapping to a reference sequence
+   * 
+   * @param newRefSeq
+   * @param newFromMapList
+   * @param elements2
+   * @param grps2
+   */
+  public PAEContactMatrix(SequenceI newRefSeq, MapList newFromMapList,
+          float[][] elements2, GroupSet grps2)
+  {
+    this(newRefSeq, new FloatContactMatrix(elements2,grps2));
+    toSeq = newFromMapList;
+  }
 
-  float maxscore;
+  public PAEContactMatrix(SequenceI _refSeq,
+          ContactMatrixI floatContactMatrix)
+  {
+    mappedMatrix = floatContactMatrix;
+    setRefSeq(_refSeq);
+  }
+  public PAEContactMatrix(SequenceI _refSeq, MapList newFromMapList,
+          ContactMatrixI floatContactMatrix)
+  {
+    mappedMatrix = floatContactMatrix;
+    setRefSeq(_refSeq);
+    toSeq = newFromMapList;
+  }
+  
+  @Override
+  protected PAEContactMatrix newMappableContactMatrix(SequenceI newRefSeq,
+          MapList newFromMapList)
+  {
+    return new PAEContactMatrix(newRefSeq, newFromMapList, mappedMatrix);
+  }
 
+  /**
+   * parse a sane JSON representation of the pAE and update the mappedMatrix
+   * 
+   * @param pae_obj
+   */
   @SuppressWarnings("unchecked")
-  public PAEContactMatrix(SequenceI _refSeq, Map<String, Object> pae_obj)
-          throws Exception
+  private void parse_version_2_pAE(Map<String, Object> pae_obj)
   {
-    refSeq = _refSeq;
-    while (refSeq.getDatasetSequence() != null)
+    float maxscore = -1;
+    // look for a maxscore element - if there is one...
+    try
     {
-      refSeq = refSeq.getDatasetSequence();
+      // this is never going to be reached by the integer rounding.. or is it ?
+      maxscore = ((Double) MapUtils.getFirst(pae_obj,
+              "max_predicted_aligned_error", "max_pae")).floatValue();
+    } catch (Throwable t)
+    {
+      // ignore if a key is not found.
     }
-    // convert the lists to primitive arrays and store
-    int length = _refSeq.getEnd() - _refSeq.getStart() + 1;
+    List<List<Long>> scoreRows = ((List<List<Long>>) MapUtils
+            .getFirst(pae_obj, "predicted_aligned_error", "pae"));
+    float[][] elements = new float[scoreRows.size()][scoreRows.size()];
+    int row = 0, col = 0;
+    for (List<Long> scoreRow : scoreRows)
+    {
+      Iterator<Long> scores = scoreRow.iterator();
+      while (scores.hasNext())
+      {
+        Object d = scores.next();
+        if (d instanceof Double)
+        {
+          elements[col][row] = ((Double) d).longValue();
+        }
+        else
+        {
+          elements[col][row] = (float) ((Long) d).longValue();
+        }
+
+        if (maxscore < elements[col][row])
+        {
+          maxscore = elements[col][row];
+        }
+        col++;
+      }
+      row++;
+      col = 0;
+    }
+    mappedMatrix=new FloatContactMatrix(elements);
+  }
 
+  /**
+   * v1 format got ditched 28th July 2022 see
+   * https://alphafold.ebi.ac.uk/faq#:~:text=We%20updated%20the%20PAE%20JSON%20file%20format%20on%2028th%20July%202022
+   * 
+   * @param pae_obj
+   */
+  @SuppressWarnings("unchecked")
+  private void parse_version_1_pAE(Map<String, Object> pae_obj)
+  {
     // assume indices are with respect to range defined by _refSeq on the
     // dataset refSeq
     Iterator<Long> rows = ((List<Long>) pae_obj.get("residue1")).iterator();
     Iterator<Long> cols = ((List<Long>) pae_obj.get("residue2")).iterator();
+    // two pass - to allocate the elements array
+    
+    int maxrow=-1,maxcol=-1;
+    while (rows.hasNext())
+    {
+      int row = rows.next().intValue();
+      int col = cols.next().intValue();
+      if (maxrow < row)
+      {
+        maxrow = row;
+      }
+      if (maxcol < col)
+      {
+        maxcol = col;
+      }
+
+    }
+    rows = ((List<Long>) pae_obj.get("residue1")).iterator();
+    cols = ((List<Long>) pae_obj.get("residue2")).iterator();
     Iterator<Double> scores = ((List<Double>) pae_obj.get("distance"))
             .iterator();
-
-    elements = new float[length][length];
+    float[][] elements = new float[maxcol][maxrow];
     while (scores.hasNext())
     {
       float escore = scores.next().floatValue();
@@ -56,64 +206,76 @@ public class PAEContactMatrix implements ContactMatrixI
       {
         maxcol = col;
       }
-      elements[row - 1][col - 1] = escore;
+      elements[col - 1][row-1] = escore;
     }
 
-    maxscore = ((Double) pae_obj.get("max_predicted_aligned_error"))
-            .floatValue();
+    mappedMatrix=new FloatContactMatrix(elements);
   }
 
   @Override
-  public ContactListI getContactList(final int _column)
+  public String getAnnotDescr()
   {
-    if (_column < 0 || _column >= elements.length)
-    {
-      return null;
-    }
-
-    return new ContactListImpl(new ContactListProviderI()
-    {
-      @Override
-      public int getContactHeight()
-      {
-        return maxcol - 1;
-      }
-
-      @Override
-      public double getContactAt(int column)
-      {
-        if (column < 0 || column >= elements[_column].length)
-        {
-          return -1;
-        }
-        // TODO Auto-generated method stub
-        return elements[_column][column];
-      }
-    });
+    return "Predicted Alignment Error"
+            + ((refSeq == null) ? "" : (" for " + refSeq.getName()));
   }
 
   @Override
-  public float getMin()
+  public String getAnnotLabel()
   {
-    return 0;
+    StringBuilder label = new StringBuilder("PAE Matrix");
+    // if (this.getReferenceSeq() != null)
+    // {
+    // label.append(":").append(this.getReferenceSeq().getDisplayId(false));
+    // }
+    return label.toString();
   }
 
+  public static final String PAEMATRIX = "PAE_MATRIX";
+
   @Override
-  public float getMax()
+  public String getType()
   {
-    return maxscore;
+    return PAEMATRIX;
   }
 
+
+  public static void validateContactMatrixFile(String fileName)
+          throws FileFormatException, IOException
+  {
+    FileInputStream infile = null;
+    try
+    {
+      infile = new FileInputStream(new File(fileName));
+    } catch (Throwable t)
+    {
+      new IOException("Couldn't open " + fileName, t);
+    }
+    JSONObject paeDict = null;
+    try
+    {
+      paeDict = EBIAlfaFold.parseJSONtoPAEContactMatrix(infile);
+    } catch (Throwable t)
+    {
+      new FileFormatException("Couldn't parse " + fileName
+              + " as a JSON dict or array containing a dict");
+    }
+
+    PAEContactMatrix matrix = new PAEContactMatrix(
+            new SequenceDummy("Predicted"), (Map<String, Object>) paeDict);
+    if (matrix.getWidth() <= 0)
+    {
+      throw new FileFormatException(
+              "No data in PAE matrix read from '" + fileName + "'");
+    }
+  }
   @Override
-  public boolean hasReferenceSeq()
+  public boolean equals(Object obj)
   {
-    return (refSeq != null);
+    return super.equals(obj);
   }
-
   @Override
-  public SequenceI getReferenceSeq()
+  public int hashCode()
   {
-    return refSeq;
+    return super.hashCode();
   }
-
 }