test/jalview/analysis/AlignmentUtilsTests.java

   1 /*
   2  * Jalview - A Sequence Alignment Editor and Viewer ($$Version-Rel$$)
   3  * Copyright (C) $$Year-Rel$$ The Jalview Authors
   4  *
   5  * This file is part of Jalview.
   6  *
   7  * Jalview is free software: you can redistribute it and/or
   8  * modify it under the terms of the GNU General Public License
   9  * as published by the Free Software Foundation, either version 3
  10  * of the License, or (at your option) any later version.
  11  *
  12  * Jalview is distributed in the hope that it will be useful, but
  13  * WITHOUT ANY WARRANTY; without even the implied warranty
  14  * of MERCHANTABILITY or FITNESS FOR A PARTICULAR
  15  * PURPOSE.  See the GNU General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU General Public License
  18  * along with Jalview.  If not, see <http://www.gnu.org/licenses/>.
  19  * The Jalview Authors are detailed in the 'AUTHORS' file.
  20  */
  21 package jalview.analysis;
  22
  23 import static org.testng.AssertJUnit.assertEquals;
  24 import static org.testng.AssertJUnit.assertFalse;
  25 import static org.testng.AssertJUnit.assertNotNull;
  26 import static org.testng.AssertJUnit.assertNull;
  27 import static org.testng.AssertJUnit.assertSame;
  28 import static org.testng.AssertJUnit.assertTrue;
  29
  30 import jalview.analysis.AlignmentUtils.DnaVariant;
  31 import jalview.datamodel.AlignedCodonFrame;
  32 import jalview.datamodel.Alignment;
  33 import jalview.datamodel.AlignmentAnnotation;
  34 import jalview.datamodel.AlignmentI;
  35 import jalview.datamodel.Annotation;
  36 import jalview.datamodel.DBRefEntry;
  37 import jalview.datamodel.Mapping;
  38 import jalview.datamodel.SearchResults;
  39 import jalview.datamodel.SearchResults.Match;
  40 import jalview.datamodel.Sequence;
  41 import jalview.datamodel.SequenceFeature;
  42 import jalview.datamodel.SequenceI;
  43 import jalview.io.AppletFormatAdapter;
  44 import jalview.io.FormatAdapter;
  45 import jalview.util.MapList;
  46 import jalview.util.MappingUtils;
  47
  48 import java.io.IOException;
  49 import java.util.ArrayList;
  50 import java.util.Arrays;
  51 import java.util.LinkedHashMap;
  52 import java.util.List;
  53 import java.util.Map;
  54 import java.util.TreeMap;
  55
  56 import org.testng.annotations.Test;
  57
  58 public class AlignmentUtilsTests
  59 {
  60   public static Sequence ts = new Sequence("short",
  61           "ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklm");
  62
  63   @Test(groups = { "Functional" })
  64   public void testExpandContext()
  65   {
  66     AlignmentI al = new Alignment(new Sequence[] {});
  67     for (int i = 4; i < 14; i += 2)
  68     {
  69       SequenceI s1 = ts.deriveSequence().getSubSequence(i, i + 7);
  70       al.addSequence(s1);
  71     }
  72     System.out.println(new AppletFormatAdapter().formatSequences("Clustal",
  73             al, true));
  74     for (int flnk = -1; flnk < 25; flnk++)
  75     {
  76       AlignmentI exp = AlignmentUtils.expandContext(al, flnk);
  77       System.out.println("\nFlank size: " + flnk);
  78       System.out.println(new AppletFormatAdapter().formatSequences(
  79               "Clustal", exp, true));
  80       if (flnk == -1)
  81       {
  82         /*
  83          * Full expansion to complete sequences
  84          */
  85         for (SequenceI sq : exp.getSequences())
  86         {
  87           String ung = sq.getSequenceAsString().replaceAll("-+", "");
  88           final String errorMsg = "Flanking sequence not the same as original dataset sequence.\n"
  89                   + ung
  90                   + "\n"
  91                   + sq.getDatasetSequence().getSequenceAsString();
  92           assertTrue(errorMsg, ung.equalsIgnoreCase(sq.getDatasetSequence()
  93                   .getSequenceAsString()));
  94         }
  95       }
  96       else if (flnk == 24)
  97       {
  98         /*
  99          * Last sequence is fully expanded, others have leading gaps to match
 100          */
 101         assertTrue(exp.getSequenceAt(4).getSequenceAsString()
 102                 .startsWith("abc"));
 103         assertTrue(exp.getSequenceAt(3).getSequenceAsString()
 104                 .startsWith("--abc"));
 105         assertTrue(exp.getSequenceAt(2).getSequenceAsString()
 106                 .startsWith("----abc"));
 107         assertTrue(exp.getSequenceAt(1).getSequenceAsString()
 108                 .startsWith("------abc"));
 109         assertTrue(exp.getSequenceAt(0).getSequenceAsString()
 110                 .startsWith("--------abc"));
 111       }
 112     }
 113   }
 114
 115   /**
 116    * Test that annotations are correctly adjusted by expandContext
 117    */
 118   @Test(groups = { "Functional" })
 119   public void testExpandContext_annotation()
 120   {
 121     AlignmentI al = new Alignment(new Sequence[] {});
 122     SequenceI ds = new Sequence("Seq1", "ABCDEFGHI");
 123     // subsequence DEF:
 124     SequenceI seq1 = ds.deriveSequence().getSubSequence(3, 6);
 125     al.addSequence(seq1);
 126
 127     /*
 128      * Annotate DEF with 4/5/6 respectively
 129      */
 130     Annotation[] anns = new Annotation[] { new Annotation(4),
 131         new Annotation(5), new Annotation(6) };
 132     AlignmentAnnotation ann = new AlignmentAnnotation("SS",
 133             "secondary structure", anns);
 134     seq1.addAlignmentAnnotation(ann);
 135
 136     /*
 137      * The annotations array should match aligned positions
 138      */
 139     assertEquals(3, ann.annotations.length);
 140     assertEquals(4, ann.annotations[0].value, 0.001);
 141     assertEquals(5, ann.annotations[1].value, 0.001);
 142     assertEquals(6, ann.annotations[2].value, 0.001);
 143
 144     /*
 145      * Check annotation to sequence position mappings before expanding the
 146      * sequence; these are set up in Sequence.addAlignmentAnnotation ->
 147      * Annotation.setSequenceRef -> createSequenceMappings
 148      */
 149     assertNull(ann.getAnnotationForPosition(1));
 150     assertNull(ann.getAnnotationForPosition(2));
 151     assertNull(ann.getAnnotationForPosition(3));
 152     assertEquals(4, ann.getAnnotationForPosition(4).value, 0.001);
 153     assertEquals(5, ann.getAnnotationForPosition(5).value, 0.001);
 154     assertEquals(6, ann.getAnnotationForPosition(6).value, 0.001);
 155     assertNull(ann.getAnnotationForPosition(7));
 156     assertNull(ann.getAnnotationForPosition(8));
 157     assertNull(ann.getAnnotationForPosition(9));
 158
 159     /*
 160      * Expand the subsequence to the full sequence abcDEFghi
 161      */
 162     AlignmentI expanded = AlignmentUtils.expandContext(al, -1);
 163     assertEquals("abcDEFghi", expanded.getSequenceAt(0)
 164             .getSequenceAsString());
 165
 166     /*
 167      * Confirm the alignment and sequence have the same SS annotation,
 168      * referencing the expanded sequence
 169      */
 170     ann = expanded.getSequenceAt(0).getAnnotation()[0];
 171     assertSame(ann, expanded.getAlignmentAnnotation()[0]);
 172     assertSame(expanded.getSequenceAt(0), ann.sequenceRef);
 173
 174     /*
 175      * The annotations array should have null values except for annotated
 176      * positions
 177      */
 178     assertNull(ann.annotations[0]);
 179     assertNull(ann.annotations[1]);
 180     assertNull(ann.annotations[2]);
 181     assertEquals(4, ann.annotations[3].value, 0.001);
 182     assertEquals(5, ann.annotations[4].value, 0.001);
 183     assertEquals(6, ann.annotations[5].value, 0.001);
 184     assertNull(ann.annotations[6]);
 185     assertNull(ann.annotations[7]);
 186     assertNull(ann.annotations[8]);
 187
 188     /*
 189      * sequence position mappings should be unchanged
 190      */
 191     assertNull(ann.getAnnotationForPosition(1));
 192     assertNull(ann.getAnnotationForPosition(2));
 193     assertNull(ann.getAnnotationForPosition(3));
 194     assertEquals(4, ann.getAnnotationForPosition(4).value, 0.001);
 195     assertEquals(5, ann.getAnnotationForPosition(5).value, 0.001);
 196     assertEquals(6, ann.getAnnotationForPosition(6).value, 0.001);
 197     assertNull(ann.getAnnotationForPosition(7));
 198     assertNull(ann.getAnnotationForPosition(8));
 199     assertNull(ann.getAnnotationForPosition(9));
 200   }
 201
 202   /**
 203    * Test method that returns a map of lists of sequences by sequence name.
 204    *
 205    * @throws IOException
 206    */
 207   @Test(groups = { "Functional" })
 208   public void testGetSequencesByName() throws IOException
 209   {
 210     final String data = ">Seq1Name\nKQYL\n" + ">Seq2Name\nRFPW\n"
 211             + ">Seq1Name\nABCD\n";
 212     AlignmentI al = loadAlignment(data, "FASTA");
 213     Map<String, List<SequenceI>> map = AlignmentUtils
 214             .getSequencesByName(al);
 215     assertEquals(2, map.keySet().size());
 216     assertEquals(2, map.get("Seq1Name").size());
 217     assertEquals("KQYL", map.get("Seq1Name").get(0).getSequenceAsString());
 218     assertEquals("ABCD", map.get("Seq1Name").get(1).getSequenceAsString());
 219     assertEquals(1, map.get("Seq2Name").size());
 220     assertEquals("RFPW", map.get("Seq2Name").get(0).getSequenceAsString());
 221   }
 222
 223   /**
 224    * Helper method to load an alignment and ensure dataset sequences are set up.
 225    *
 226    * @param data
 227    * @param format
 228    *          TODO
 229    * @return
 230    * @throws IOException
 231    */
 232   protected AlignmentI loadAlignment(final String data, String format)
 233           throws IOException
 234   {
 235     AlignmentI a = new FormatAdapter().readFile(data,
 236             AppletFormatAdapter.PASTE, format);
 237     a.setDataset(null);
 238     return a;
 239   }
 240
 241   /**
 242    * Test mapping of protein to cDNA, for the case where we have no sequence
 243    * cross-references, so mappings are made first-served 1-1 where sequences
 244    * translate.
 245    *
 246    * @throws IOException
 247    */
 248   @Test(groups = { "Functional" })
 249   public void testMapProteinAlignmentToCdna_noXrefs() throws IOException
 250   {
 251     List<SequenceI> protseqs = new ArrayList<SequenceI>();
 252     protseqs.add(new Sequence("UNIPROT|V12345", "EIQ"));
 253     protseqs.add(new Sequence("UNIPROT|V12346", "EIQ"));
 254     protseqs.add(new Sequence("UNIPROT|V12347", "SAR"));
 255     AlignmentI protein = new Alignment(protseqs.toArray(new SequenceI[3]));
 256     protein.setDataset(null);
 257
 258     List<SequenceI> dnaseqs = new ArrayList<SequenceI>();
 259     dnaseqs.add(new Sequence("EMBL|A11111", "TCAGCACGC")); // = SAR
 260     dnaseqs.add(new Sequence("EMBL|A22222", "GAGATACAA")); // = EIQ
 261     dnaseqs.add(new Sequence("EMBL|A33333", "GAAATCCAG")); // = EIQ
 262     dnaseqs.add(new Sequence("EMBL|A44444", "GAAATTCAG")); // = EIQ
 263     AlignmentI cdna = new Alignment(dnaseqs.toArray(new SequenceI[4]));
 264     cdna.setDataset(null);
 265
 266     assertTrue(AlignmentUtils.mapProteinAlignmentToCdna(protein, cdna));
 267
 268     // 3 mappings made, each from 1 to 1 sequence
 269     assertEquals(3, protein.getCodonFrames().size());
 270     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(0)).size());
 271     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(1)).size());
 272     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(2)).size());
 273
 274     // V12345 mapped to A22222
 275     AlignedCodonFrame acf = protein.getCodonFrame(protein.getSequenceAt(0))
 276             .get(0);
 277     assertEquals(1, acf.getdnaSeqs().length);
 278     assertEquals(cdna.getSequenceAt(1).getDatasetSequence(),
 279             acf.getdnaSeqs()[0]);
 280     Mapping[] protMappings = acf.getProtMappings();
 281     assertEquals(1, protMappings.length);
 282     MapList mapList = protMappings[0].getMap();
 283     assertEquals(3, mapList.getFromRatio());
 284     assertEquals(1, mapList.getToRatio());
 285     assertTrue(Arrays.equals(new int[] { 1, 9 }, mapList.getFromRanges()
 286             .get(0)));
 287     assertEquals(1, mapList.getFromRanges().size());
 288     assertTrue(Arrays.equals(new int[] { 1, 3 },
 289             mapList.getToRanges().get(0)));
 290     assertEquals(1, mapList.getToRanges().size());
 291
 292     // V12346 mapped to A33333
 293     acf = protein.getCodonFrame(protein.getSequenceAt(1)).get(0);
 294     assertEquals(1, acf.getdnaSeqs().length);
 295     assertEquals(cdna.getSequenceAt(2).getDatasetSequence(),
 296             acf.getdnaSeqs()[0]);
 297
 298     // V12347 mapped to A11111
 299     acf = protein.getCodonFrame(protein.getSequenceAt(2)).get(0);
 300     assertEquals(1, acf.getdnaSeqs().length);
 301     assertEquals(cdna.getSequenceAt(0).getDatasetSequence(),
 302             acf.getdnaSeqs()[0]);
 303
 304     // no mapping involving the 'extra' A44444
 305     assertTrue(protein.getCodonFrame(cdna.getSequenceAt(3)).isEmpty());
 306   }
 307
 308   /**
 309    * Test for the alignSequenceAs method that takes two sequences and a mapping.
 310    */
 311   @Test(groups = { "Functional" })
 312   public void testAlignSequenceAs_withMapping_noIntrons()
 313   {
 314     MapList map = new MapList(new int[] { 1, 6 }, new int[] { 1, 2 }, 3, 1);
 315
 316     /*
 317      * No existing gaps in dna:
 318      */
 319     checkAlignSequenceAs("GGGAAA", "-A-L-", false, false, map,
 320             "---GGG---AAA");
 321
 322     /*
 323      * Now introduce gaps in dna but ignore them when realigning.
 324      */
 325     checkAlignSequenceAs("-G-G-G-A-A-A-", "-A-L-", false, false, map,
 326             "---GGG---AAA");
 327
 328     /*
 329      * Now include gaps in dna when realigning. First retaining 'mapped' gaps
 330      * only, i.e. those within the exon region.
 331      */
 332     checkAlignSequenceAs("-G-G--G-A--A-A-", "-A-L-", true, false, map,
 333             "---G-G--G---A--A-A");
 334
 335     /*
 336      * Include all gaps in dna when realigning (within and without the exon
 337      * region). The leading gap, and the gaps between codons, are subsumed by
 338      * the protein alignment gap.
 339      */
 340     checkAlignSequenceAs("-G-GG--AA-A---", "-A-L-", true, true, map,
 341             "---G-GG---AA-A---");
 342
 343     /*
 344      * Include only unmapped gaps in dna when realigning (outside the exon
 345      * region). The leading gap, and the gaps between codons, are subsumed by
 346      * the protein alignment gap.
 347      */
 348     checkAlignSequenceAs("-G-GG--AA-A-", "-A-L-", false, true, map,
 349             "---GGG---AAA---");
 350   }
 351
 352   /**
 353    * Test for the alignSequenceAs method that takes two sequences and a mapping.
 354    */
 355   @Test(groups = { "Functional" })
 356   public void testAlignSequenceAs_withMapping_withIntrons()
 357   {
 358     /*
 359      * Exons at codon 2 (AAA) and 4 (TTT)
 360      */
 361     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
 362             new int[] { 1, 2 }, 3, 1);
 363
 364     /*
 365      * Simple case: no gaps in dna
 366      */
 367     checkAlignSequenceAs("GGGAAACCCTTTGGG", "--A-L-", false, false, map,
 368             "GGG---AAACCCTTTGGG");
 369
 370     /*
 371      * Add gaps to dna - but ignore when realigning.
 372      */
 373     checkAlignSequenceAs("-G-G-G--A--A---AC-CC-T-TT-GG-G-", "--A-L-",
 374             false, false, map, "GGG---AAACCCTTTGGG");
 375
 376     /*
 377      * Add gaps to dna - include within exons only when realigning.
 378      */
 379     checkAlignSequenceAs("-G-G-G--A--A---A-C-CC-T-TT-GG-G-", "--A-L-",
 380             true, false, map, "GGG---A--A---ACCCT-TTGGG");
 381
 382     /*
 383      * Include gaps outside exons only when realigning.
 384      */
 385     checkAlignSequenceAs("-G-G-G--A--A---A-C-CC-T-TT-GG-G-", "--A-L-",
 386             false, true, map, "-G-G-GAAAC-CCTTT-GG-G-");
 387
 388     /*
 389      * Include gaps following first intron if we are 'preserving mapped gaps'
 390      */
 391     checkAlignSequenceAs("-G-G-G--A--A---A-C-CC-T-TT-GG-G-", "--A-L-",
 392             true, true, map, "-G-G-G--A--A---A-C-CC-T-TT-GG-G-");
 393
 394     /*
 395      * Include all gaps in dna when realigning.
 396      */
 397     checkAlignSequenceAs("-G-G-G--A--A---A-C-CC-T-TT-GG-G-", "--A-L-",
 398             true, true, map, "-G-G-G--A--A---A-C-CC-T-TT-GG-G-");
 399   }
 400
 401   /**
 402    * Test for the case where not all of the protein sequence is mapped to cDNA.
 403    */
 404   @Test(groups = { "Functional" })
 405   public void testAlignSequenceAs_withMapping_withUnmappedProtein()
 406   {
 407     /*
 408      * Exons at codon 2 (AAA) and 4 (TTT) mapped to A and P
 409      */
 410     final MapList map = new MapList(new int[] { 4, 6, 10, 12 }, new int[] {
 411         1, 1, 3, 3 }, 3, 1);
 412
 413     /*
 414      * -L- 'aligns' ccc------
 415      */
 416     checkAlignSequenceAs("gggAAAcccTTTggg", "-A-L-P-", false, false, map,
 417             "gggAAAccc------TTTggg");
 418   }
 419
 420   /**
 421    * Helper method that performs and verifies the method under test.
 422    *
 423    * @param alignee
 424    *          the sequence to be realigned
 425    * @param alignModel
 426    *          the sequence whose alignment is to be copied
 427    * @param preserveMappedGaps
 428    * @param preserveUnmappedGaps
 429    * @param map
 430    * @param expected
 431    */
 432   protected void checkAlignSequenceAs(final String alignee,
 433           final String alignModel, final boolean preserveMappedGaps,
 434           final boolean preserveUnmappedGaps, MapList map,
 435           final String expected)
 436   {
 437     SequenceI alignMe = new Sequence("Seq1", alignee);
 438     alignMe.createDatasetSequence();
 439     SequenceI alignFrom = new Sequence("Seq2", alignModel);
 440     alignFrom.createDatasetSequence();
 441     AlignedCodonFrame acf = new AlignedCodonFrame();
 442     acf.addMap(alignMe.getDatasetSequence(), alignFrom.getDatasetSequence(), map);
 443
 444     AlignmentUtils.alignSequenceAs(alignMe, alignFrom, acf, "---", '-',
 445             preserveMappedGaps, preserveUnmappedGaps);
 446     assertEquals(expected, alignMe.getSequenceAsString());
 447   }
 448
 449   /**
 450    * Test for the alignSequenceAs method where we preserve gaps in introns only.
 451    */
 452   @Test(groups = { "Functional" })
 453   public void testAlignSequenceAs_keepIntronGapsOnly()
 454   {
 455
 456     /*
 457      * Intron GGGAAA followed by exon CCCTTT
 458      */
 459     MapList map = new MapList(new int[] { 7, 12 }, new int[] { 1, 2 }, 3, 1);
 460
 461     checkAlignSequenceAs("GG-G-AA-A-C-CC-T-TT", "AL", false, true, map,
 462             "GG-G-AA-ACCCTTT");
 463   }
 464
 465   /**
 466    * Test the method that realigns protein to match mapped codon alignment.
 467    */
 468   @Test(groups = { "Functional" })
 469   public void testAlignProteinAsDna()
 470   {
 471     // seq1 codons are [1,2,3] [4,5,6] [7,8,9] [10,11,12]
 472     SequenceI dna1 = new Sequence("Seq1", "TGCCATTACCAG-");
 473     // seq2 codons are [1,3,4] [5,6,7] [8,9,10] [11,12,13]
 474     SequenceI dna2 = new Sequence("Seq2", "T-GCCATTACCAG");
 475     // seq3 codons are [1,2,3] [4,5,7] [8,9,10] [11,12,13]
 476     SequenceI dna3 = new Sequence("Seq3", "TGCCA-TTACCAG");
 477     AlignmentI dna = new Alignment(new SequenceI[] { dna1, dna2, dna3 });
 478     dna.setDataset(null);
 479
 480     // protein alignment will be realigned like dna
 481     SequenceI prot1 = new Sequence("Seq1", "CHYQ");
 482     SequenceI prot2 = new Sequence("Seq2", "CHYQ");
 483     SequenceI prot3 = new Sequence("Seq3", "CHYQ");
 484     SequenceI prot4 = new Sequence("Seq4", "R-QSV"); // unmapped, unchanged
 485     AlignmentI protein = new Alignment(new SequenceI[] { prot1, prot2,
 486         prot3, prot4 });
 487     protein.setDataset(null);
 488
 489     MapList map = new MapList(new int[] { 1, 12 }, new int[] { 1, 4 }, 3, 1);
 490     AlignedCodonFrame acf = new AlignedCodonFrame();
 491     acf.addMap(dna1.getDatasetSequence(), prot1.getDatasetSequence(), map);
 492     acf.addMap(dna2.getDatasetSequence(), prot2.getDatasetSequence(), map);
 493     acf.addMap(dna3.getDatasetSequence(), prot3.getDatasetSequence(), map);
 494     ArrayList<AlignedCodonFrame> acfs = new ArrayList<AlignedCodonFrame>();
 495     acfs.add(acf);
 496     protein.setCodonFrames(acfs);
 497
 498     /*
 499      * Translated codon order is [1,2,3] [1,3,4] [4,5,6] [4,5,7] [5,6,7] [7,8,9]
 500      * [8,9,10] [10,11,12] [11,12,13]
 501      */
 502     AlignmentUtils.alignProteinAsDna(protein, dna);
 503     assertEquals("C-H--Y-Q-", prot1.getSequenceAsString());
 504     assertEquals("-C--H-Y-Q", prot2.getSequenceAsString());
 505     assertEquals("C--H--Y-Q", prot3.getSequenceAsString());
 506     assertEquals("R-QSV", prot4.getSequenceAsString());
 507   }
 508
 509   /**
 510    * Test the method that tests whether a CDNA sequence translates to a protein
 511    * sequence
 512    */
 513   @Test(groups = { "Functional" })
 514   public void testTranslatesAs()
 515   {
 516     // null arguments check
 517     assertFalse(AlignmentUtils.translatesAs(null, 0, null));
 518     assertFalse(AlignmentUtils.translatesAs(new char[] { 't' }, 0, null));
 519     assertFalse(AlignmentUtils.translatesAs(null, 0, new char[] { 'a' }));
 520
 521     // straight translation
 522     assertTrue(AlignmentUtils.translatesAs("tttcccaaaggg".toCharArray(), 0,
 523             "FPKG".toCharArray()));
 524     // with extra start codon (not in protein)
 525     assertTrue(AlignmentUtils.translatesAs("atgtttcccaaaggg".toCharArray(),
 526             3, "FPKG".toCharArray()));
 527     // with stop codon1 (not in protein)
 528     assertTrue(AlignmentUtils.translatesAs("tttcccaaagggtaa".toCharArray(),
 529             0, "FPKG".toCharArray()));
 530     // with stop codon1 (in protein as *)
 531     assertTrue(AlignmentUtils.translatesAs("tttcccaaagggtaa".toCharArray(),
 532             0, "FPKG*".toCharArray()));
 533     // with stop codon2 (not in protein)
 534     assertTrue(AlignmentUtils.translatesAs("tttcccaaagggtag".toCharArray(),
 535             0, "FPKG".toCharArray()));
 536     // with stop codon3 (not in protein)
 537     assertTrue(AlignmentUtils.translatesAs("tttcccaaagggtga".toCharArray(),
 538             0, "FPKG".toCharArray()));
 539     // with start and stop codon1
 540     assertTrue(AlignmentUtils.translatesAs(
 541             "atgtttcccaaagggtaa".toCharArray(), 3, "FPKG".toCharArray()));
 542     // with start and stop codon1 (in protein as *)
 543     assertTrue(AlignmentUtils.translatesAs(
 544             "atgtttcccaaagggtaa".toCharArray(), 3, "FPKG*".toCharArray()));
 545     // with start and stop codon2
 546     assertTrue(AlignmentUtils.translatesAs(
 547             "atgtttcccaaagggtag".toCharArray(), 3, "FPKG".toCharArray()));
 548     // with start and stop codon3
 549     assertTrue(AlignmentUtils.translatesAs(
 550             "atgtttcccaaagggtga".toCharArray(), 3, "FPKG".toCharArray()));
 551
 552     // with embedded stop codons
 553     assertTrue(AlignmentUtils.translatesAs(
 554             "atgtttTAGcccaaaTAAgggtga".toCharArray(), 3,
 555             "F*PK*G".toCharArray()));
 556
 557     // wrong protein
 558     assertFalse(AlignmentUtils.translatesAs("tttcccaaaggg".toCharArray(),
 559             0, "FPMG".toCharArray()));
 560
 561     // truncated dna
 562     assertFalse(AlignmentUtils.translatesAs("tttcccaaagg".toCharArray(), 0,
 563             "FPKG".toCharArray()));
 564
 565     // truncated protein
 566     assertFalse(AlignmentUtils.translatesAs("tttcccaaaggg".toCharArray(),
 567             0, "FPK".toCharArray()));
 568
 569     // overlong dna (doesn't end in stop codon)
 570     assertFalse(AlignmentUtils.translatesAs(
 571             "tttcccaaagggttt".toCharArray(), 0, "FPKG".toCharArray()));
 572
 573     // dna + stop codon + more
 574     assertFalse(AlignmentUtils.translatesAs(
 575             "tttcccaaagggttaga".toCharArray(), 0, "FPKG".toCharArray()));
 576
 577     // overlong protein
 578     assertFalse(AlignmentUtils.translatesAs("tttcccaaaggg".toCharArray(),
 579             0, "FPKGQ".toCharArray()));
 580   }
 581
 582   /**
 583    * Test mapping of protein to cDNA, for cases where the cDNA has start and/or
 584    * stop codons in addition to the protein coding sequence.
 585    *
 586    * @throws IOException
 587    */
 588   @Test(groups = { "Functional" })
 589   public void testMapProteinAlignmentToCdna_withStartAndStopCodons()
 590           throws IOException
 591   {
 592     List<SequenceI> protseqs = new ArrayList<SequenceI>();
 593     protseqs.add(new Sequence("UNIPROT|V12345", "EIQ"));
 594     protseqs.add(new Sequence("UNIPROT|V12346", "EIQ"));
 595     protseqs.add(new Sequence("UNIPROT|V12347", "SAR"));
 596     AlignmentI protein = new Alignment(protseqs.toArray(new SequenceI[3]));
 597     protein.setDataset(null);
 598
 599     List<SequenceI> dnaseqs = new ArrayList<SequenceI>();
 600     // start + SAR:
 601     dnaseqs.add(new Sequence("EMBL|A11111", "ATGTCAGCACGC"));
 602     // = EIQ + stop
 603     dnaseqs.add(new Sequence("EMBL|A22222", "GAGATACAATAA"));
 604     // = start +EIQ + stop
 605     dnaseqs.add(new Sequence("EMBL|A33333", "ATGGAAATCCAGTAG"));
 606     dnaseqs.add(new Sequence("EMBL|A44444", "GAAATTCAG"));
 607     AlignmentI cdna = new Alignment(dnaseqs.toArray(new SequenceI[4]));
 608     cdna.setDataset(null);
 609
 610     assertTrue(AlignmentUtils.mapProteinAlignmentToCdna(protein, cdna));
 611
 612     // 3 mappings made, each from 1 to 1 sequence
 613     assertEquals(3, protein.getCodonFrames().size());
 614     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(0)).size());
 615     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(1)).size());
 616     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(2)).size());
 617
 618     // V12345 mapped from A22222
 619     AlignedCodonFrame acf = protein.getCodonFrame(protein.getSequenceAt(0))
 620             .get(0);
 621     assertEquals(1, acf.getdnaSeqs().length);
 622     assertEquals(cdna.getSequenceAt(1).getDatasetSequence(),
 623             acf.getdnaSeqs()[0]);
 624     Mapping[] protMappings = acf.getProtMappings();
 625     assertEquals(1, protMappings.length);
 626     MapList mapList = protMappings[0].getMap();
 627     assertEquals(3, mapList.getFromRatio());
 628     assertEquals(1, mapList.getToRatio());
 629     assertTrue(Arrays.equals(new int[] { 1, 9 }, mapList.getFromRanges()
 630             .get(0)));
 631     assertEquals(1, mapList.getFromRanges().size());
 632     assertTrue(Arrays.equals(new int[] { 1, 3 },
 633             mapList.getToRanges().get(0)));
 634     assertEquals(1, mapList.getToRanges().size());
 635
 636     // V12346 mapped from A33333 starting position 4
 637     acf = protein.getCodonFrame(protein.getSequenceAt(1)).get(0);
 638     assertEquals(1, acf.getdnaSeqs().length);
 639     assertEquals(cdna.getSequenceAt(2).getDatasetSequence(),
 640             acf.getdnaSeqs()[0]);
 641     protMappings = acf.getProtMappings();
 642     assertEquals(1, protMappings.length);
 643     mapList = protMappings[0].getMap();
 644     assertEquals(3, mapList.getFromRatio());
 645     assertEquals(1, mapList.getToRatio());
 646     assertTrue(Arrays.equals(new int[] { 4, 12 }, mapList.getFromRanges()
 647             .get(0)));
 648     assertEquals(1, mapList.getFromRanges().size());
 649     assertTrue(Arrays.equals(new int[] { 1, 3 },
 650             mapList.getToRanges().get(0)));
 651     assertEquals(1, mapList.getToRanges().size());
 652
 653     // V12347 mapped to A11111 starting position 4
 654     acf = protein.getCodonFrame(protein.getSequenceAt(2)).get(0);
 655     assertEquals(1, acf.getdnaSeqs().length);
 656     assertEquals(cdna.getSequenceAt(0).getDatasetSequence(),
 657             acf.getdnaSeqs()[0]);
 658     protMappings = acf.getProtMappings();
 659     assertEquals(1, protMappings.length);
 660     mapList = protMappings[0].getMap();
 661     assertEquals(3, mapList.getFromRatio());
 662     assertEquals(1, mapList.getToRatio());
 663     assertTrue(Arrays.equals(new int[] { 4, 12 }, mapList.getFromRanges()
 664             .get(0)));
 665     assertEquals(1, mapList.getFromRanges().size());
 666     assertTrue(Arrays.equals(new int[] { 1, 3 },
 667             mapList.getToRanges().get(0)));
 668     assertEquals(1, mapList.getToRanges().size());
 669
 670     // no mapping involving the 'extra' A44444
 671     assertTrue(protein.getCodonFrame(cdna.getSequenceAt(3)).isEmpty());
 672   }
 673
 674   /**
 675    * Test mapping of protein to cDNA, for the case where we have some sequence
 676    * cross-references. Verify that 1-to-many mappings are made where
 677    * cross-references exist and sequences are mappable.
 678    *
 679    * @throws IOException
 680    */
 681   @Test(groups = { "Functional" })
 682   public void testMapProteinAlignmentToCdna_withXrefs() throws IOException
 683   {
 684     List<SequenceI> protseqs = new ArrayList<SequenceI>();
 685     protseqs.add(new Sequence("UNIPROT|V12345", "EIQ"));
 686     protseqs.add(new Sequence("UNIPROT|V12346", "EIQ"));
 687     protseqs.add(new Sequence("UNIPROT|V12347", "SAR"));
 688     AlignmentI protein = new Alignment(protseqs.toArray(new SequenceI[3]));
 689     protein.setDataset(null);
 690
 691     List<SequenceI> dnaseqs = new ArrayList<SequenceI>();
 692     dnaseqs.add(new Sequence("EMBL|A11111", "TCAGCACGC")); // = SAR
 693     dnaseqs.add(new Sequence("EMBL|A22222", "ATGGAGATACAA")); // = start + EIQ
 694     dnaseqs.add(new Sequence("EMBL|A33333", "GAAATCCAG")); // = EIQ
 695     dnaseqs.add(new Sequence("EMBL|A44444", "GAAATTCAG")); // = EIQ
 696     dnaseqs.add(new Sequence("EMBL|A55555", "GAGATTCAG")); // = EIQ
 697     AlignmentI cdna = new Alignment(dnaseqs.toArray(new SequenceI[5]));
 698     cdna.setDataset(null);
 699
 700     // Xref A22222 to V12345 (should get mapped)
 701     dnaseqs.get(1).addDBRef(new DBRefEntry("UNIPROT", "1", "V12345"));
 702     // Xref V12345 to A44444 (should get mapped)
 703     protseqs.get(0).addDBRef(new DBRefEntry("EMBL", "1", "A44444"));
 704     // Xref A33333 to V12347 (sequence mismatch - should not get mapped)
 705     dnaseqs.get(2).addDBRef(new DBRefEntry("UNIPROT", "1", "V12347"));
 706     // as V12345 is mapped to A22222 and A44444, this leaves V12346 unmapped.
 707     // it should get paired up with the unmapped A33333
 708     // A11111 should be mapped to V12347
 709     // A55555 is spare and has no xref so is not mapped
 710
 711     assertTrue(AlignmentUtils.mapProteinAlignmentToCdna(protein, cdna));
 712
 713     // 4 protein mappings made for 3 proteins, 2 to V12345, 1 each to V12346/7
 714     assertEquals(3, protein.getCodonFrames().size());
 715     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(0)).size());
 716     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(1)).size());
 717     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(2)).size());
 718
 719     // one mapping for each of the first 4 cDNA sequences
 720     assertEquals(1, protein.getCodonFrame(cdna.getSequenceAt(0)).size());
 721     assertEquals(1, protein.getCodonFrame(cdna.getSequenceAt(1)).size());
 722     assertEquals(1, protein.getCodonFrame(cdna.getSequenceAt(2)).size());
 723     assertEquals(1, protein.getCodonFrame(cdna.getSequenceAt(3)).size());
 724
 725     // V12345 mapped to A22222 and A44444
 726     AlignedCodonFrame acf = protein.getCodonFrame(protein.getSequenceAt(0))
 727             .get(0);
 728     assertEquals(2, acf.getdnaSeqs().length);
 729     assertEquals(cdna.getSequenceAt(1).getDatasetSequence(),
 730             acf.getdnaSeqs()[0]);
 731     assertEquals(cdna.getSequenceAt(3).getDatasetSequence(),
 732             acf.getdnaSeqs()[1]);
 733
 734     // V12346 mapped to A33333
 735     acf = protein.getCodonFrame(protein.getSequenceAt(1)).get(0);
 736     assertEquals(1, acf.getdnaSeqs().length);
 737     assertEquals(cdna.getSequenceAt(2).getDatasetSequence(),
 738             acf.getdnaSeqs()[0]);
 739
 740     // V12347 mapped to A11111
 741     acf = protein.getCodonFrame(protein.getSequenceAt(2)).get(0);
 742     assertEquals(1, acf.getdnaSeqs().length);
 743     assertEquals(cdna.getSequenceAt(0).getDatasetSequence(),
 744             acf.getdnaSeqs()[0]);
 745
 746     // no mapping involving the 'extra' A55555
 747     assertTrue(protein.getCodonFrame(cdna.getSequenceAt(4)).isEmpty());
 748   }
 749
 750   /**
 751    * Test mapping of protein to cDNA, for the case where we have some sequence
 752    * cross-references. Verify that once we have made an xref mapping we don't
 753    * also map un-xrefd sequeces.
 754    *
 755    * @throws IOException
 756    */
 757   @Test(groups = { "Functional" })
 758   public void testMapProteinAlignmentToCdna_prioritiseXrefs()
 759           throws IOException
 760   {
 761     List<SequenceI> protseqs = new ArrayList<SequenceI>();
 762     protseqs.add(new Sequence("UNIPROT|V12345", "EIQ"));
 763     protseqs.add(new Sequence("UNIPROT|V12346", "EIQ"));
 764     AlignmentI protein = new Alignment(
 765             protseqs.toArray(new SequenceI[protseqs.size()]));
 766     protein.setDataset(null);
 767
 768     List<SequenceI> dnaseqs = new ArrayList<SequenceI>();
 769     dnaseqs.add(new Sequence("EMBL|A11111", "GAAATCCAG")); // = EIQ
 770     dnaseqs.add(new Sequence("EMBL|A22222", "GAAATTCAG")); // = EIQ
 771     AlignmentI cdna = new Alignment(dnaseqs.toArray(new SequenceI[dnaseqs
 772             .size()]));
 773     cdna.setDataset(null);
 774
 775     // Xref A22222 to V12345 (should get mapped)
 776     // A11111 should then be mapped to the unmapped V12346
 777     dnaseqs.get(1).addDBRef(new DBRefEntry("UNIPROT", "1", "V12345"));
 778
 779     assertTrue(AlignmentUtils.mapProteinAlignmentToCdna(protein, cdna));
 780
 781     // 2 protein mappings made
 782     assertEquals(2, protein.getCodonFrames().size());
 783     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(0)).size());
 784     assertEquals(1, protein.getCodonFrame(protein.getSequenceAt(1)).size());
 785
 786     // one mapping for each of the cDNA sequences
 787     assertEquals(1, protein.getCodonFrame(cdna.getSequenceAt(0)).size());
 788     assertEquals(1, protein.getCodonFrame(cdna.getSequenceAt(1)).size());
 789
 790     // V12345 mapped to A22222
 791     AlignedCodonFrame acf = protein.getCodonFrame(protein.getSequenceAt(0))
 792             .get(0);
 793     assertEquals(1, acf.getdnaSeqs().length);
 794     assertEquals(cdna.getSequenceAt(1).getDatasetSequence(),
 795             acf.getdnaSeqs()[0]);
 796
 797     // V12346 mapped to A11111
 798     acf = protein.getCodonFrame(protein.getSequenceAt(1)).get(0);
 799     assertEquals(1, acf.getdnaSeqs().length);
 800     assertEquals(cdna.getSequenceAt(0).getDatasetSequence(),
 801             acf.getdnaSeqs()[0]);
 802   }
 803
 804   /**
 805    * Test the method that shows or hides sequence annotations by type(s) and
 806    * selection group.
 807    */
 808   @Test(groups = { "Functional" })
 809   public void testShowOrHideSequenceAnnotations()
 810   {
 811     SequenceI seq1 = new Sequence("Seq1", "AAA");
 812     SequenceI seq2 = new Sequence("Seq2", "BBB");
 813     SequenceI seq3 = new Sequence("Seq3", "CCC");
 814     Annotation[] anns = new Annotation[] { new Annotation(2f) };
 815     AlignmentAnnotation ann1 = new AlignmentAnnotation("Structure", "ann1",
 816             anns);
 817     ann1.setSequenceRef(seq1);
 818     AlignmentAnnotation ann2 = new AlignmentAnnotation("Structure", "ann2",
 819             anns);
 820     ann2.setSequenceRef(seq2);
 821     AlignmentAnnotation ann3 = new AlignmentAnnotation("Structure", "ann3",
 822             anns);
 823     AlignmentAnnotation ann4 = new AlignmentAnnotation("Temp", "ann4", anns);
 824     ann4.setSequenceRef(seq1);
 825     AlignmentAnnotation ann5 = new AlignmentAnnotation("Temp", "ann5", anns);
 826     ann5.setSequenceRef(seq2);
 827     AlignmentAnnotation ann6 = new AlignmentAnnotation("Temp", "ann6", anns);
 828     AlignmentI al = new Alignment(new SequenceI[] { seq1, seq2, seq3 });
 829     al.addAnnotation(ann1); // Structure for Seq1
 830     al.addAnnotation(ann2); // Structure for Seq2
 831     al.addAnnotation(ann3); // Structure for no sequence
 832     al.addAnnotation(ann4); // Temp for seq1
 833     al.addAnnotation(ann5); // Temp for seq2
 834     al.addAnnotation(ann6); // Temp for no sequence
 835     List<String> types = new ArrayList<String>();
 836     List<SequenceI> scope = new ArrayList<SequenceI>();
 837
 838     /*
 839      * Set all sequence related Structure to hidden (ann1, ann2)
 840      */
 841     types.add("Structure");
 842     AlignmentUtils.showOrHideSequenceAnnotations(al, types, null, false,
 843             false);
 844     assertFalse(ann1.visible);
 845     assertFalse(ann2.visible);
 846     assertTrue(ann3.visible); // not sequence-related, not affected
 847     assertTrue(ann4.visible); // not Structure, not affected
 848     assertTrue(ann5.visible); // "
 849     assertTrue(ann6.visible); // not sequence-related, not affected
 850
 851     /*
 852      * Set Temp in {seq1, seq3} to hidden
 853      */
 854     types.clear();
 855     types.add("Temp");
 856     scope.add(seq1);
 857     scope.add(seq3);
 858     AlignmentUtils.showOrHideSequenceAnnotations(al, types, scope, false,
 859             false);
 860     assertFalse(ann1.visible); // unchanged
 861     assertFalse(ann2.visible); // unchanged
 862     assertTrue(ann3.visible); // not sequence-related, not affected
 863     assertFalse(ann4.visible); // Temp for seq1 hidden
 864     assertTrue(ann5.visible); // not in scope, not affected
 865     assertTrue(ann6.visible); // not sequence-related, not affected
 866
 867     /*
 868      * Set Temp in all sequences to hidden
 869      */
 870     types.clear();
 871     types.add("Temp");
 872     scope.add(seq1);
 873     scope.add(seq3);
 874     AlignmentUtils.showOrHideSequenceAnnotations(al, types, null, false,
 875             false);
 876     assertFalse(ann1.visible); // unchanged
 877     assertFalse(ann2.visible); // unchanged
 878     assertTrue(ann3.visible); // not sequence-related, not affected
 879     assertFalse(ann4.visible); // Temp for seq1 hidden
 880     assertFalse(ann5.visible); // Temp for seq2 hidden
 881     assertTrue(ann6.visible); // not sequence-related, not affected
 882
 883     /*
 884      * Set all types in {seq1, seq3} to visible
 885      */
 886     types.clear();
 887     scope.clear();
 888     scope.add(seq1);
 889     scope.add(seq3);
 890     AlignmentUtils.showOrHideSequenceAnnotations(al, types, scope, true,
 891             true);
 892     assertTrue(ann1.visible); // Structure for seq1 set visible
 893     assertFalse(ann2.visible); // not in scope, unchanged
 894     assertTrue(ann3.visible); // not sequence-related, not affected
 895     assertTrue(ann4.visible); // Temp for seq1 set visible
 896     assertFalse(ann5.visible); // not in scope, unchanged
 897     assertTrue(ann6.visible); // not sequence-related, not affected
 898
 899     /*
 900      * Set all types in all scope to hidden
 901      */
 902     AlignmentUtils.showOrHideSequenceAnnotations(al, types, null, true,
 903             false);
 904     assertFalse(ann1.visible);
 905     assertFalse(ann2.visible);
 906     assertTrue(ann3.visible); // not sequence-related, not affected
 907     assertFalse(ann4.visible);
 908     assertFalse(ann5.visible);
 909     assertTrue(ann6.visible); // not sequence-related, not affected
 910   }
 911
 912   /**
 913    * Tests for the method that checks if one sequence cross-references another
 914    */
 915   @Test(groups = { "Functional" })
 916   public void testHasCrossRef()
 917   {
 918     assertFalse(AlignmentUtils.hasCrossRef(null, null));
 919     SequenceI seq1 = new Sequence("EMBL|A12345", "ABCDEF");
 920     assertFalse(AlignmentUtils.hasCrossRef(seq1, null));
 921     assertFalse(AlignmentUtils.hasCrossRef(null, seq1));
 922     SequenceI seq2 = new Sequence("UNIPROT|V20192", "ABCDEF");
 923     assertFalse(AlignmentUtils.hasCrossRef(seq1, seq2));
 924
 925     // different ref
 926     seq1.addDBRef(new DBRefEntry("UNIPROT", "1", "v20193"));
 927     assertFalse(AlignmentUtils.hasCrossRef(seq1, seq2));
 928
 929     // case-insensitive; version number is ignored
 930     seq1.addDBRef(new DBRefEntry("UNIPROT", "1", "v20192"));
 931     assertTrue(AlignmentUtils.hasCrossRef(seq1, seq2));
 932
 933     // right case!
 934     seq1.addDBRef(new DBRefEntry("UNIPROT", "1", "V20192"));
 935     assertTrue(AlignmentUtils.hasCrossRef(seq1, seq2));
 936     // test is one-way only
 937     assertFalse(AlignmentUtils.hasCrossRef(seq2, seq1));
 938   }
 939
 940   /**
 941    * Tests for the method that checks if either sequence cross-references the
 942    * other
 943    */
 944   @Test(groups = { "Functional" })
 945   public void testHaveCrossRef()
 946   {
 947     assertFalse(AlignmentUtils.hasCrossRef(null, null));
 948     SequenceI seq1 = new Sequence("EMBL|A12345", "ABCDEF");
 949     assertFalse(AlignmentUtils.haveCrossRef(seq1, null));
 950     assertFalse(AlignmentUtils.haveCrossRef(null, seq1));
 951     SequenceI seq2 = new Sequence("UNIPROT|V20192", "ABCDEF");
 952     assertFalse(AlignmentUtils.haveCrossRef(seq1, seq2));
 953
 954     seq1.addDBRef(new DBRefEntry("UNIPROT", "1", "V20192"));
 955     assertTrue(AlignmentUtils.haveCrossRef(seq1, seq2));
 956     // next is true for haveCrossRef, false for hasCrossRef
 957     assertTrue(AlignmentUtils.haveCrossRef(seq2, seq1));
 958
 959     // now the other way round
 960     seq1.setDBRefs(null);
 961     seq2.addDBRef(new DBRefEntry("EMBL", "1", "A12345"));
 962     assertTrue(AlignmentUtils.haveCrossRef(seq1, seq2));
 963     assertTrue(AlignmentUtils.haveCrossRef(seq2, seq1));
 964
 965     // now both ways
 966     seq1.addDBRef(new DBRefEntry("UNIPROT", "1", "V20192"));
 967     assertTrue(AlignmentUtils.haveCrossRef(seq1, seq2));
 968     assertTrue(AlignmentUtils.haveCrossRef(seq2, seq1));
 969   }
 970
 971   /**
 972    * Test the method that extracts the cds-only part of a dna alignment.
 973    */
 974   @Test(groups = { "Functional" })
 975   public void testMakeCdsAlignment()
 976   {
 977     /*
 978      * scenario:
 979      *     dna1 --> [4, 6] [10,12]        --> pep1
 980      *     dna2 --> [1, 3] [7, 9] [13,15] --> pep1
 981      */
 982     SequenceI dna1 = new Sequence("dna1", "aaaGGGcccTTTaaa");
 983     SequenceI dna2 = new Sequence("dna2", "GGGcccTTTaaaCCC");
 984     SequenceI pep1 = new Sequence("pep1", "GF");
 985     SequenceI pep2 = new Sequence("pep2", "GFP");
 986     pep1.addDBRef(new DBRefEntry("UNIPROT", "0", "pep1"));
 987     pep2.addDBRef(new DBRefEntry("UNIPROT", "0", "pep2"));
 988     dna1.createDatasetSequence();
 989     dna2.createDatasetSequence();
 990     pep1.createDatasetSequence();
 991     pep2.createDatasetSequence();
 992     AlignmentI dna = new Alignment(new SequenceI[] { dna1, dna2 });
 993     dna.setDataset(null);
 994
 995     /*
 996      * need a sourceDbRef if we are to construct dbrefs to the CDS
 997      * sequence
 998      */
 999     DBRefEntry dbref = new DBRefEntry("ENSEMBL", "0", "dna1");
1000     dna1.getDatasetSequence().addDBRef(dbref);
1001     org.testng.Assert.assertEquals(dbref, dna1.getPrimaryDBRefs().get(0));
1002     dbref = new DBRefEntry("ENSEMBL", "0", "dna2");
1003     dna2.getDatasetSequence().addDBRef(dbref);
1004     org.testng.Assert.assertEquals(dbref, dna2.getPrimaryDBRefs().get(0));
1005
1006     /*
1007      * CDS sequences are 'discovered' from dna-to-protein mappings on the alignment
1008      * dataset (e.g. added from dbrefs by CrossRef.findXrefSequences)
1009      */
1010     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
1011             new int[] { 1, 2 }, 3, 1);
1012     AlignedCodonFrame acf = new AlignedCodonFrame();
1013     acf.addMap(dna1.getDatasetSequence(), pep1.getDatasetSequence(), map);
1014     dna.addCodonFrame(acf);
1015     map = new MapList(new int[] { 1, 3, 7, 9, 13, 15 }, new int[] { 1, 3 },
1016             3, 1);
1017     acf = new AlignedCodonFrame();
1018     acf.addMap(dna2.getDatasetSequence(), pep2.getDatasetSequence(), map);
1019     dna.addCodonFrame(acf);
1020
1021     /*
1022      * execute method under test:
1023      */
1024     AlignmentI cds = AlignmentUtils.makeCdsAlignment(new SequenceI[] {
1025         dna1, dna2 }, dna.getDataset(), null);
1026
1027     /*
1028      * verify cds sequences
1029      */
1030     assertEquals(2, cds.getSequences().size());
1031     assertEquals("GGGTTT", cds.getSequenceAt(0).getSequenceAsString());
1032     assertEquals("GGGTTTCCC", cds.getSequenceAt(1).getSequenceAsString());
1033
1034     /*
1035      * verify shared, extended alignment dataset
1036      */
1037     assertSame(dna.getDataset(), cds.getDataset());
1038     SequenceI cds1Dss = cds.getSequenceAt(0).getDatasetSequence();
1039     SequenceI cds2Dss = cds.getSequenceAt(1).getDatasetSequence();
1040     assertTrue(dna.getDataset().getSequences().contains(cds1Dss));
1041     assertTrue(dna.getDataset().getSequences().contains(cds2Dss));
1042
1043     /*
1044      * verify CDS has a dbref with mapping to peptide
1045      */
1046     assertNotNull(cds1Dss.getDBRefs());
1047     assertEquals(1, cds1Dss.getDBRefs().length);
1048     dbref = cds1Dss.getDBRefs()[0];
1049     assertEquals("UNIPROT", dbref.getSource());
1050     assertEquals("0", dbref.getVersion());
1051     assertEquals("pep1", dbref.getAccessionId());
1052     assertNotNull(dbref.getMap());
1053     assertSame(pep1.getDatasetSequence(), dbref.getMap().getTo());
1054     MapList cdsMapping = new MapList(new int[] { 1, 6 },
1055             new int[] { 1, 2 }, 3, 1);
1056     assertEquals(cdsMapping, dbref.getMap().getMap());
1057
1058     /*
1059      * verify peptide has added a dbref with reverse mapping to CDS
1060      */
1061     assertNotNull(pep1.getDBRefs());
1062     // FIXME pep1.getDBRefs() is 1 - is that the correct behaviour ?
1063     assertEquals(2, pep1.getDBRefs().length);
1064     dbref = pep1.getDBRefs()[1];
1065     assertEquals("ENSEMBL", dbref.getSource());
1066     assertEquals("0", dbref.getVersion());
1067     assertEquals("CDS|dna1", dbref.getAccessionId());
1068     assertNotNull(dbref.getMap());
1069     assertSame(cds1Dss, dbref.getMap().getTo());
1070     assertEquals(cdsMapping.getInverse(), dbref.getMap().getMap());
1071
1072     /*
1073      * Verify mappings from CDS to peptide, cDNA to CDS, and cDNA to peptide
1074      * the mappings are on the shared alignment dataset
1075      * 6 mappings, 2*(DNA->CDS), 2*(DNA->Pep), 2*(CDS->Pep)
1076      */
1077     List<AlignedCodonFrame> cdsMappings = cds.getDataset().getCodonFrames();
1078     assertEquals(6, cdsMappings.size());
1079
1080     /*
1081      * verify that mapping sets for dna and cds alignments are different
1082      * [not current behaviour - all mappings are on the alignment dataset]
1083      */
1084     // select -> subselect type to test.
1085     // Assert.assertNotSame(dna.getCodonFrames(), cds.getCodonFrames());
1086     // assertEquals(4, dna.getCodonFrames().size());
1087     // assertEquals(4, cds.getCodonFrames().size());
1088
1089     /*
1090      * Two mappings involve pep1 (dna to pep1, cds to pep1)
1091      * Mapping from pep1 to GGGTTT in first new exon sequence
1092      */
1093     List<AlignedCodonFrame> pep1Mappings = MappingUtils
1094             .findMappingsForSequence(pep1, cdsMappings);
1095     assertEquals(2, pep1Mappings.size());
1096     List<AlignedCodonFrame> mappings = MappingUtils
1097             .findMappingsForSequence(cds.getSequenceAt(0), pep1Mappings);
1098     assertEquals(1, mappings.size());
1099
1100     // map G to GGG
1101     SearchResults sr = MappingUtils.buildSearchResults(pep1, 1, mappings);
1102     assertEquals(1, sr.getResults().size());
1103     Match m = sr.getResults().get(0);
1104     assertSame(cds1Dss, m.getSequence());
1105     assertEquals(1, m.getStart());
1106     assertEquals(3, m.getEnd());
1107     // map F to TTT
1108     sr = MappingUtils.buildSearchResults(pep1, 2, mappings);
1109     m = sr.getResults().get(0);
1110     assertSame(cds1Dss, m.getSequence());
1111     assertEquals(4, m.getStart());
1112     assertEquals(6, m.getEnd());
1113
1114     /*
1115      * Two mappings involve pep2 (dna to pep2, cds to pep2)
1116      * Verify mapping from pep2 to GGGTTTCCC in second new exon sequence
1117      */
1118     List<AlignedCodonFrame> pep2Mappings = MappingUtils
1119             .findMappingsForSequence(pep2, cdsMappings);
1120     assertEquals(2, pep2Mappings.size());
1121     mappings = MappingUtils.findMappingsForSequence(cds.getSequenceAt(1),
1122             pep2Mappings);
1123     assertEquals(1, mappings.size());
1124     // map G to GGG
1125     sr = MappingUtils.buildSearchResults(pep2, 1, mappings);
1126     assertEquals(1, sr.getResults().size());
1127     m = sr.getResults().get(0);
1128     assertSame(cds2Dss, m.getSequence());
1129     assertEquals(1, m.getStart());
1130     assertEquals(3, m.getEnd());
1131     // map F to TTT
1132     sr = MappingUtils.buildSearchResults(pep2, 2, mappings);
1133     m = sr.getResults().get(0);
1134     assertSame(cds2Dss, m.getSequence());
1135     assertEquals(4, m.getStart());
1136     assertEquals(6, m.getEnd());
1137     // map P to CCC
1138     sr = MappingUtils.buildSearchResults(pep2, 3, mappings);
1139     m = sr.getResults().get(0);
1140     assertSame(cds2Dss, m.getSequence());
1141     assertEquals(7, m.getStart());
1142     assertEquals(9, m.getEnd());
1143   }
1144
1145   /**
1146    * Test the method that makes a cds-only alignment from a DNA sequence and its
1147    * product mappings, for the case where there are multiple exon mappings to
1148    * different protein products.
1149    */
1150   @Test(groups = { "Functional" })
1151   public void testMakeCdsAlignment_multipleProteins()
1152   {
1153     SequenceI dna1 = new Sequence("dna1", "aaaGGGcccTTTaaa");
1154     SequenceI pep1 = new Sequence("pep1", "GF"); // GGGTTT
1155     SequenceI pep2 = new Sequence("pep2", "KP"); // aaaccc
1156     SequenceI pep3 = new Sequence("pep3", "KF"); // aaaTTT
1157     dna1.createDatasetSequence();
1158     pep1.createDatasetSequence();
1159     pep2.createDatasetSequence();
1160     pep3.createDatasetSequence();
1161     pep1.getDatasetSequence().addDBRef(
1162             new DBRefEntry("EMBLCDS", "2", "A12345"));
1163     pep2.getDatasetSequence().addDBRef(
1164             new DBRefEntry("EMBLCDS", "3", "A12346"));
1165     pep3.getDatasetSequence().addDBRef(
1166             new DBRefEntry("EMBLCDS", "4", "A12347"));
1167
1168     /*
1169      * Create the CDS alignment
1170      */
1171     AlignmentI dna = new Alignment(new SequenceI[] { dna1 });
1172     dna.setDataset(null);
1173
1174     /*
1175      * Make the mappings from dna to protein
1176      */
1177     // map ...GGG...TTT to GF
1178     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
1179             new int[] { 1, 2 }, 3, 1);
1180     AlignedCodonFrame acf = new AlignedCodonFrame();
1181     acf.addMap(dna1.getDatasetSequence(), pep1.getDatasetSequence(), map);
1182     dna.addCodonFrame(acf);
1183
1184     // map aaa...ccc to KP
1185     map = new MapList(new int[] { 1, 3, 7, 9 }, new int[] { 1, 2 }, 3, 1);
1186     acf = new AlignedCodonFrame();
1187     acf.addMap(dna1.getDatasetSequence(), pep2.getDatasetSequence(), map);
1188     dna.addCodonFrame(acf);
1189
1190     // map aaa......TTT to KF
1191     map = new MapList(new int[] { 1, 3, 10, 12 }, new int[] { 1, 2 }, 3, 1);
1192     acf = new AlignedCodonFrame();
1193     acf.addMap(dna1.getDatasetSequence(), pep3.getDatasetSequence(), map);
1194     dna.addCodonFrame(acf);
1195
1196     /*
1197      * execute method under test
1198      */
1199     AlignmentI cdsal = AlignmentUtils.makeCdsAlignment(
1200             new SequenceI[] { dna1 }, dna.getDataset(), null);
1201
1202     /*
1203      * Verify we have 3 cds sequences, mapped to pep1/2/3 respectively
1204      */
1205     List<SequenceI> cds = cdsal.getSequences();
1206     assertEquals(3, cds.size());
1207
1208     /*
1209      * verify shared, extended alignment dataset
1210      */
1211     assertSame(cdsal.getDataset(), dna.getDataset());
1212     assertTrue(dna.getDataset().getSequences()
1213             .contains(cds.get(0).getDatasetSequence()));
1214     assertTrue(dna.getDataset().getSequences()
1215             .contains(cds.get(1).getDatasetSequence()));
1216     assertTrue(dna.getDataset().getSequences()
1217             .contains(cds.get(2).getDatasetSequence()));
1218
1219     /*
1220      * verify aligned cds sequences and their xrefs
1221      */
1222     SequenceI cdsSeq = cds.get(0);
1223     assertEquals("GGGTTT", cdsSeq.getSequenceAsString());
1224     // assertEquals("dna1|A12345", cdsSeq.getName());
1225     assertEquals("CDS|dna1", cdsSeq.getName());
1226     // assertEquals(1, cdsSeq.getDBRefs().length);
1227     // DBRefEntry cdsRef = cdsSeq.getDBRefs()[0];
1228     // assertEquals("EMBLCDS", cdsRef.getSource());
1229     // assertEquals("2", cdsRef.getVersion());
1230     // assertEquals("A12345", cdsRef.getAccessionId());
1231
1232     cdsSeq = cds.get(1);
1233     assertEquals("aaaccc", cdsSeq.getSequenceAsString());
1234     // assertEquals("dna1|A12346", cdsSeq.getName());
1235     assertEquals("CDS|dna1", cdsSeq.getName());
1236     // assertEquals(1, cdsSeq.getDBRefs().length);
1237     // cdsRef = cdsSeq.getDBRefs()[0];
1238     // assertEquals("EMBLCDS", cdsRef.getSource());
1239     // assertEquals("3", cdsRef.getVersion());
1240     // assertEquals("A12346", cdsRef.getAccessionId());
1241
1242     cdsSeq = cds.get(2);
1243     assertEquals("aaaTTT", cdsSeq.getSequenceAsString());
1244     // assertEquals("dna1|A12347", cdsSeq.getName());
1245     assertEquals("CDS|dna1", cdsSeq.getName());
1246     // assertEquals(1, cdsSeq.getDBRefs().length);
1247     // cdsRef = cdsSeq.getDBRefs()[0];
1248     // assertEquals("EMBLCDS", cdsRef.getSource());
1249     // assertEquals("4", cdsRef.getVersion());
1250     // assertEquals("A12347", cdsRef.getAccessionId());
1251
1252     /*
1253      * Verify there are mappings from each cds sequence to its protein product
1254      * and also to its dna source
1255      */
1256     List<AlignedCodonFrame> newMappings = cdsal.getCodonFrames();
1257
1258     /*
1259      * 6 mappings involve dna1 (to pep1/2/3, cds1/2/3)
1260      */
1261     List<AlignedCodonFrame> dnaMappings = MappingUtils
1262             .findMappingsForSequence(dna1, newMappings);
1263     assertEquals(6, dnaMappings.size());
1264
1265     /*
1266      * dna1 to pep1
1267      */
1268     List<AlignedCodonFrame> mappings = MappingUtils
1269             .findMappingsForSequence(pep1, dnaMappings);
1270     assertEquals(1, mappings.size());
1271     assertEquals(1, mappings.get(0).getMappings().size());
1272     assertSame(pep1.getDatasetSequence(), mappings.get(0).getMappings()
1273             .get(0).getMapping().getTo());
1274
1275     /*
1276      * dna1 to cds1
1277      */
1278     List<AlignedCodonFrame> dnaToCds1Mappings = MappingUtils
1279             .findMappingsForSequence(cds.get(0), dnaMappings);
1280     Mapping mapping = dnaToCds1Mappings.get(0).getMappings().get(0)
1281             .getMapping();
1282     assertSame(cds.get(0).getDatasetSequence(), mapping
1283             .getTo());
1284     assertEquals("G(1) in CDS should map to G(4) in DNA", 4, mapping
1285             .getMap().getToPosition(1));
1286
1287     /*
1288      * dna1 to pep2
1289      */
1290     mappings = MappingUtils.findMappingsForSequence(pep2, dnaMappings);
1291     assertEquals(1, mappings.size());
1292     assertEquals(1, mappings.get(0).getMappings().size());
1293     assertSame(pep2.getDatasetSequence(), mappings.get(0).getMappings()
1294             .get(0).getMapping().getTo());
1295
1296     /*
1297      * dna1 to cds2
1298      */
1299     List<AlignedCodonFrame> dnaToCds2Mappings = MappingUtils
1300             .findMappingsForSequence(cds.get(1), dnaMappings);
1301     mapping = dnaToCds2Mappings.get(0).getMappings().get(0).getMapping();
1302     assertSame(cds.get(1).getDatasetSequence(), mapping.getTo());
1303     assertEquals("c(4) in CDS should map to c(7) in DNA", 7, mapping
1304             .getMap().getToPosition(4));
1305
1306     /*
1307      * dna1 to pep3
1308      */
1309     mappings = MappingUtils.findMappingsForSequence(pep3, dnaMappings);
1310     assertEquals(1, mappings.size());
1311     assertEquals(1, mappings.get(0).getMappings().size());
1312     assertSame(pep3.getDatasetSequence(), mappings.get(0).getMappings()
1313             .get(0).getMapping().getTo());
1314
1315     /*
1316      * dna1 to cds3
1317      */
1318     List<AlignedCodonFrame> dnaToCds3Mappings = MappingUtils
1319             .findMappingsForSequence(cds.get(2), dnaMappings);
1320     mapping = dnaToCds3Mappings.get(0).getMappings().get(0).getMapping();
1321     assertSame(cds.get(2).getDatasetSequence(), mapping.getTo());
1322     assertEquals("T(4) in CDS should map to T(10) in DNA", 10, mapping
1323             .getMap().getToPosition(4));
1324   }
1325
1326   @Test(groups = { "Functional" })
1327   public void testIsMappable()
1328   {
1329     SequenceI dna1 = new Sequence("dna1", "cgCAGtgGT");
1330     SequenceI aa1 = new Sequence("aa1", "RSG");
1331     AlignmentI al1 = new Alignment(new SequenceI[] { dna1 });
1332     AlignmentI al2 = new Alignment(new SequenceI[] { aa1 });
1333
1334     assertFalse(AlignmentUtils.isMappable(null, null));
1335     assertFalse(AlignmentUtils.isMappable(al1, null));
1336     assertFalse(AlignmentUtils.isMappable(null, al1));
1337     assertFalse(AlignmentUtils.isMappable(al1, al1));
1338     assertFalse(AlignmentUtils.isMappable(al2, al2));
1339
1340     assertTrue(AlignmentUtils.isMappable(al1, al2));
1341     assertTrue(AlignmentUtils.isMappable(al2, al1));
1342   }
1343
1344   /**
1345    * Test creating a mapping when the sequences involved do not start at residue
1346    * 1
1347    *
1348    * @throws IOException
1349    */
1350   @Test(groups = { "Functional" })
1351   public void testMapCdnaToProtein_forSubsequence()
1352           throws IOException
1353   {
1354     SequenceI prot = new Sequence("UNIPROT|V12345", "E-I--Q", 10, 12);
1355     prot.createDatasetSequence();
1356
1357     SequenceI dna = new Sequence("EMBL|A33333", "GAA--AT-C-CAG", 40, 48);
1358     dna.createDatasetSequence();
1359
1360     MapList map = AlignmentUtils.mapCdnaToProtein(prot, dna);
1361     assertEquals(10, map.getToLowest());
1362     assertEquals(12, map.getToHighest());
1363     assertEquals(40, map.getFromLowest());
1364     assertEquals(48, map.getFromHighest());
1365   }
1366
1367   /**
1368    * Test for the alignSequenceAs method where we have protein mapped to protein
1369    */
1370   @Test(groups = { "Functional" })
1371   public void testAlignSequenceAs_mappedProteinProtein()
1372   {
1373
1374     SequenceI alignMe = new Sequence("Match", "MGAASEV");
1375     alignMe.createDatasetSequence();
1376     SequenceI alignFrom = new Sequence("Query", "LQTGYMGAASEVMFSPTRR");
1377     alignFrom.createDatasetSequence();
1378
1379     AlignedCodonFrame acf = new AlignedCodonFrame();
1380     // this is like a domain or motif match of part of a peptide sequence
1381     MapList map = new MapList(new int[] { 6, 12 }, new int[] { 1, 7 }, 1, 1);
1382     acf.addMap(alignFrom.getDatasetSequence(),
1383             alignMe.getDatasetSequence(), map);
1384
1385     AlignmentUtils.alignSequenceAs(alignMe, alignFrom, acf, "-", '-', true,
1386             true);
1387     assertEquals("-----MGAASEV-------", alignMe.getSequenceAsString());
1388   }
1389
1390   /**
1391    * Test for the alignSequenceAs method where there are trailing unmapped
1392    * residues in the model sequence
1393    */
1394   @Test(groups = { "Functional" })
1395   public void testAlignSequenceAs_withTrailingPeptide()
1396   {
1397     // map first 3 codons to KPF; G is a trailing unmapped residue
1398     MapList map = new MapList(new int[] { 1, 9 }, new int[] { 1, 3 }, 3, 1);
1399
1400     checkAlignSequenceAs("AAACCCTTT", "K-PFG", true, true, map,
1401             "AAA---CCCTTT---");
1402   }
1403
1404   /**
1405    * Tests for transferring features between mapped sequences
1406    */
1407   @Test(groups = { "Functional" })
1408   public void testTransferFeatures()
1409   {
1410     SequenceI dna = new Sequence("dna/20-34", "acgTAGcaaGCCcgt");
1411     SequenceI cds = new Sequence("cds/10-15", "TAGGCC");
1412
1413     // no overlap
1414     dna.addSequenceFeature(new SequenceFeature("type1", "desc1", 1, 2, 1f,
1415             null));
1416     // partial overlap - to [1, 1]
1417     dna.addSequenceFeature(new SequenceFeature("type2", "desc2", 3, 4, 2f,
1418             null));
1419     // exact overlap - to [1, 3]
1420     dna.addSequenceFeature(new SequenceFeature("type3", "desc3", 4, 6, 3f,
1421             null));
1422     // spanning overlap - to [2, 5]
1423     dna.addSequenceFeature(new SequenceFeature("type4", "desc4", 5, 11, 4f,
1424             null));
1425     // exactly overlaps whole mapped range [1, 6]
1426     dna.addSequenceFeature(new SequenceFeature("type5", "desc5", 4, 12, 5f,
1427             null));
1428     // no overlap (internal)
1429     dna.addSequenceFeature(new SequenceFeature("type6", "desc6", 7, 9, 6f,
1430             null));
1431     // no overlap (3' end)
1432     dna.addSequenceFeature(new SequenceFeature("type7", "desc7", 13, 15,
1433             7f, null));
1434     // overlap (3' end) - to [6, 6]
1435     dna.addSequenceFeature(new SequenceFeature("type8", "desc8", 12, 12,
1436             8f, null));
1437     // extended overlap - to [6, +]
1438     dna.addSequenceFeature(new SequenceFeature("type9", "desc9", 12, 13,
1439             9f, null));
1440
1441     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
1442             new int[] { 1, 6 }, 1, 1);
1443
1444     /*
1445      * transferFeatures() will build 'partial overlap' for regions
1446      * that partially overlap 5' or 3' (start or end) of target sequence
1447      */
1448     AlignmentUtils.transferFeatures(dna, cds, map, null);
1449     SequenceFeature[] sfs = cds.getSequenceFeatures();
1450     assertEquals(6, sfs.length);
1451
1452     SequenceFeature sf = sfs[0];
1453     assertEquals("type2", sf.getType());
1454     assertEquals("desc2", sf.getDescription());
1455     assertEquals(2f, sf.getScore());
1456     assertEquals(1, sf.getBegin());
1457     assertEquals(1, sf.getEnd());
1458
1459     sf = sfs[1];
1460     assertEquals("type3", sf.getType());
1461     assertEquals("desc3", sf.getDescription());
1462     assertEquals(3f, sf.getScore());
1463     assertEquals(1, sf.getBegin());
1464     assertEquals(3, sf.getEnd());
1465
1466     sf = sfs[2];
1467     assertEquals("type4", sf.getType());
1468     assertEquals(2, sf.getBegin());
1469     assertEquals(5, sf.getEnd());
1470
1471     sf = sfs[3];
1472     assertEquals("type5", sf.getType());
1473     assertEquals(1, sf.getBegin());
1474     assertEquals(6, sf.getEnd());
1475
1476     sf = sfs[4];
1477     assertEquals("type8", sf.getType());
1478     assertEquals(6, sf.getBegin());
1479     assertEquals(6, sf.getEnd());
1480
1481     sf = sfs[5];
1482     assertEquals("type9", sf.getType());
1483     assertEquals(6, sf.getBegin());
1484     assertEquals(6, sf.getEnd());
1485   }
1486
1487   /**
1488    * Tests for transferring features between mapped sequences
1489    */
1490   @Test(groups = { "Functional" })
1491   public void testTransferFeatures_withOmit()
1492   {
1493     SequenceI dna = new Sequence("dna/20-34", "acgTAGcaaGCCcgt");
1494     SequenceI cds = new Sequence("cds/10-15", "TAGGCC");
1495
1496     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
1497             new int[] { 1, 6 }, 1, 1);
1498
1499     // [5, 11] maps to [2, 5]
1500     dna.addSequenceFeature(new SequenceFeature("type4", "desc4", 5, 11, 4f,
1501             null));
1502     // [4, 12] maps to [1, 6]
1503     dna.addSequenceFeature(new SequenceFeature("type5", "desc5", 4, 12, 5f,
1504             null));
1505     // [12, 12] maps to [6, 6]
1506     dna.addSequenceFeature(new SequenceFeature("type8", "desc8", 12, 12,
1507             8f, null));
1508
1509     // desc4 and desc8 are the 'omit these' varargs
1510     AlignmentUtils.transferFeatures(dna, cds, map, null, "type4", "type8");
1511     SequenceFeature[] sfs = cds.getSequenceFeatures();
1512     assertEquals(1, sfs.length);
1513
1514     SequenceFeature sf = sfs[0];
1515     assertEquals("type5", sf.getType());
1516     assertEquals(1, sf.getBegin());
1517     assertEquals(6, sf.getEnd());
1518   }
1519
1520   /**
1521    * Tests for transferring features between mapped sequences
1522    */
1523   @Test(groups = { "Functional" })
1524   public void testTransferFeatures_withSelect()
1525   {
1526     SequenceI dna = new Sequence("dna/20-34", "acgTAGcaaGCCcgt");
1527     SequenceI cds = new Sequence("cds/10-15", "TAGGCC");
1528
1529     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
1530             new int[] { 1, 6 }, 1, 1);
1531
1532     // [5, 11] maps to [2, 5]
1533     dna.addSequenceFeature(new SequenceFeature("type4", "desc4", 5, 11, 4f,
1534             null));
1535     // [4, 12] maps to [1, 6]
1536     dna.addSequenceFeature(new SequenceFeature("type5", "desc5", 4, 12, 5f,
1537             null));
1538     // [12, 12] maps to [6, 6]
1539     dna.addSequenceFeature(new SequenceFeature("type8", "desc8", 12, 12,
1540             8f, null));
1541
1542     // "type5" is the 'select this type' argument
1543     AlignmentUtils.transferFeatures(dna, cds, map, "type5");
1544     SequenceFeature[] sfs = cds.getSequenceFeatures();
1545     assertEquals(1, sfs.length);
1546
1547     SequenceFeature sf = sfs[0];
1548     assertEquals("type5", sf.getType());
1549     assertEquals(1, sf.getBegin());
1550     assertEquals(6, sf.getEnd());
1551   }
1552
1553   /**
1554    * Test the method that extracts the cds-only part of a dna alignment, for the
1555    * case where the cds should be aligned to match its nucleotide sequence.
1556    */
1557   @Test(groups = { "Functional" })
1558   public void testMakeCdsAlignment_alternativeTranscripts()
1559   {
1560     SequenceI dna1 = new Sequence("dna1", "aaaGGGCC-----CTTTaaaGGG");
1561     // alternative transcript of same dna skips CCC codon
1562     SequenceI dna2 = new Sequence("dna2", "aaaGGGCC-----cttTaaaGGG");
1563     // dna3 has no mapping (protein product) so should be ignored here
1564     SequenceI dna3 = new Sequence("dna3", "aaaGGGCCCCCGGGcttTaaaGGG");
1565     SequenceI pep1 = new Sequence("pep1", "GPFG");
1566     SequenceI pep2 = new Sequence("pep2", "GPG");
1567     dna1.createDatasetSequence();
1568     dna2.createDatasetSequence();
1569     dna3.createDatasetSequence();
1570     pep1.createDatasetSequence();
1571     pep2.createDatasetSequence();
1572
1573     AlignmentI dna = new Alignment(new SequenceI[] { dna1, dna2, dna3 });
1574     dna.setDataset(null);
1575
1576     MapList map = new MapList(new int[] { 4, 12, 16, 18 },
1577             new int[] { 1, 4 }, 3, 1);
1578     AlignedCodonFrame acf = new AlignedCodonFrame();
1579     acf.addMap(dna1.getDatasetSequence(), pep1.getDatasetSequence(), map);
1580     dna.addCodonFrame(acf);
1581     map = new MapList(new int[] { 4, 8, 12, 12, 16, 18 },
1582             new int[] { 1, 3 },
1583             3, 1);
1584     acf = new AlignedCodonFrame();
1585     acf.addMap(dna2.getDatasetSequence(), pep2.getDatasetSequence(), map);
1586     dna.addCodonFrame(acf);
1587
1588     AlignmentI cds = AlignmentUtils.makeCdsAlignment(new SequenceI[] {
1589         dna1, dna2, dna3 }, dna.getDataset(), null);
1590     List<SequenceI> cdsSeqs = cds.getSequences();
1591     assertEquals(2, cdsSeqs.size());
1592     assertEquals("GGGCCCTTTGGG", cdsSeqs.get(0).getSequenceAsString());
1593     assertEquals("GGGCCTGGG", cdsSeqs.get(1).getSequenceAsString());
1594
1595     /*
1596      * verify shared, extended alignment dataset
1597      */
1598     assertSame(dna.getDataset(), cds.getDataset());
1599     assertTrue(dna.getDataset().getSequences()
1600             .contains(cdsSeqs.get(0).getDatasetSequence()));
1601     assertTrue(dna.getDataset().getSequences()
1602             .contains(cdsSeqs.get(1).getDatasetSequence()));
1603
1604     /*
1605      * Verify 6 mappings: dna1 to cds1, cds1 to pep1, dna1 to pep1
1606      * and the same for dna2/cds2/pep2
1607      */
1608     List<AlignedCodonFrame> mappings = cds.getCodonFrames();
1609     assertEquals(6, mappings.size());
1610
1611     /*
1612      * 2 mappings involve pep1
1613      */
1614     List<AlignedCodonFrame> pep1Mappings = MappingUtils
1615             .findMappingsForSequence(pep1, mappings);
1616     assertEquals(2, pep1Mappings.size());
1617
1618     /*
1619      * Get mapping of pep1 to cds1 and verify it
1620      * maps GPFG to 1-3,4-6,7-9,10-12
1621      */
1622     List<AlignedCodonFrame> pep1CdsMappings = MappingUtils
1623             .findMappingsForSequence(cds.getSequenceAt(0), pep1Mappings);
1624     assertEquals(1, pep1CdsMappings.size());
1625     SearchResults sr = MappingUtils.buildSearchResults(pep1, 1,
1626             pep1CdsMappings);
1627     assertEquals(1, sr.getResults().size());
1628     Match m = sr.getResults().get(0);
1629     assertEquals(cds.getSequenceAt(0).getDatasetSequence(),
1630             m.getSequence());
1631     assertEquals(1, m.getStart());
1632     assertEquals(3, m.getEnd());
1633     sr = MappingUtils.buildSearchResults(pep1, 2, pep1CdsMappings);
1634     m = sr.getResults().get(0);
1635     assertEquals(4, m.getStart());
1636     assertEquals(6, m.getEnd());
1637     sr = MappingUtils.buildSearchResults(pep1, 3, pep1CdsMappings);
1638     m = sr.getResults().get(0);
1639     assertEquals(7, m.getStart());
1640     assertEquals(9, m.getEnd());
1641     sr = MappingUtils.buildSearchResults(pep1, 4, pep1CdsMappings);
1642     m = sr.getResults().get(0);
1643     assertEquals(10, m.getStart());
1644     assertEquals(12, m.getEnd());
1645
1646     /*
1647      * Get mapping of pep2 to cds2 and verify it
1648      * maps GPG in pep2 to 1-3,4-6,7-9 in second CDS sequence
1649      */
1650     List<AlignedCodonFrame> pep2Mappings = MappingUtils
1651             .findMappingsForSequence(pep2, mappings);
1652     assertEquals(2, pep2Mappings.size());
1653     List<AlignedCodonFrame> pep2CdsMappings = MappingUtils
1654             .findMappingsForSequence(cds.getSequenceAt(1), pep2Mappings);
1655     assertEquals(1, pep2CdsMappings.size());
1656     sr = MappingUtils.buildSearchResults(pep2, 1, pep2CdsMappings);
1657     assertEquals(1, sr.getResults().size());
1658     m = sr.getResults().get(0);
1659     assertEquals(cds.getSequenceAt(1).getDatasetSequence(),
1660             m.getSequence());
1661     assertEquals(1, m.getStart());
1662     assertEquals(3, m.getEnd());
1663     sr = MappingUtils.buildSearchResults(pep2, 2, pep2CdsMappings);
1664     m = sr.getResults().get(0);
1665     assertEquals(4, m.getStart());
1666     assertEquals(6, m.getEnd());
1667     sr = MappingUtils.buildSearchResults(pep2, 3, pep2CdsMappings);
1668     m = sr.getResults().get(0);
1669     assertEquals(7, m.getStart());
1670     assertEquals(9, m.getEnd());
1671   }
1672
1673   /**
1674    * Test the method that realigns protein to match mapped codon alignment.
1675    */
1676   @Test(groups = { "Functional" })
1677   public void testAlignProteinAsDna_incompleteStartCodon()
1678   {
1679     // seq1: incomplete start codon (not mapped), then [3, 11]
1680     SequenceI dna1 = new Sequence("Seq1", "ccAAA-TTT-GGG-");
1681     // seq2 codons are [4, 5], [8, 11]
1682     SequenceI dna2 = new Sequence("Seq2", "ccaAA-ttT-GGG-");
1683     // seq3 incomplete start codon at 'tt'
1684     SequenceI dna3 = new Sequence("Seq3", "ccaaa-ttt-GGG-");
1685     AlignmentI dna = new Alignment(new SequenceI[] { dna1, dna2, dna3 });
1686     dna.setDataset(null);
1687
1688     // prot1 has 'X' for incomplete start codon (not mapped)
1689     SequenceI prot1 = new Sequence("Seq1", "XKFG"); // X for incomplete start
1690     SequenceI prot2 = new Sequence("Seq2", "NG");
1691     SequenceI prot3 = new Sequence("Seq3", "XG"); // X for incomplete start
1692     AlignmentI protein = new Alignment(new SequenceI[] { prot1, prot2,
1693         prot3 });
1694     protein.setDataset(null);
1695
1696     // map dna1 [3, 11] to prot1 [2, 4] KFG
1697     MapList map = new MapList(new int[] { 3, 11 }, new int[] { 2, 4 }, 3, 1);
1698     AlignedCodonFrame acf = new AlignedCodonFrame();
1699     acf.addMap(dna1.getDatasetSequence(), prot1.getDatasetSequence(), map);
1700
1701     // map dna2 [4, 5] [8, 11] to prot2 [1, 2] NG
1702     map = new MapList(new int[] { 4, 5, 8, 11 }, new int[] { 1, 2 }, 3, 1);
1703     acf.addMap(dna2.getDatasetSequence(), prot2.getDatasetSequence(), map);
1704
1705     // map dna3 [9, 11] to prot3 [2, 2] G
1706     map = new MapList(new int[] { 9, 11 }, new int[] { 2, 2 }, 3, 1);
1707     acf.addMap(dna3.getDatasetSequence(), prot3.getDatasetSequence(), map);
1708
1709     ArrayList<AlignedCodonFrame> acfs = new ArrayList<AlignedCodonFrame>();
1710     acfs.add(acf);
1711     protein.setCodonFrames(acfs);
1712
1713     /*
1714      * verify X is included in the aligned proteins, and placed just
1715      * before the first mapped residue
1716      * CCT is between CCC and TTT
1717      */
1718     AlignmentUtils.alignProteinAsDna(protein, dna);
1719     assertEquals("XK-FG", prot1.getSequenceAsString());
1720     assertEquals("--N-G", prot2.getSequenceAsString());
1721     assertEquals("---XG", prot3.getSequenceAsString());
1722   }
1723
1724   /**
1725    * Tests for the method that maps the subset of a dna sequence that has CDS
1726    * (or subtype) feature - case where the start codon is incomplete.
1727    */
1728   @Test(groups = "Functional")
1729   public void testFindCdsPositions_fivePrimeIncomplete()
1730   {
1731     SequenceI dnaSeq = new Sequence("dna", "aaagGGCCCaaaTTTttt");
1732     dnaSeq.createDatasetSequence();
1733     SequenceI ds = dnaSeq.getDatasetSequence();
1734
1735     // CDS for dna 5-6 (incomplete codon), 7-9
1736     SequenceFeature sf = new SequenceFeature("CDS", "", 5, 9, 0f, null);
1737     sf.setPhase("2"); // skip 2 bases to start of next codon
1738     ds.addSequenceFeature(sf);
1739     // CDS for dna 13-15
1740     sf = new SequenceFeature("CDS_predicted", "", 13, 15, 0f, null);
1741     ds.addSequenceFeature(sf);
1742
1743     List<int[]> ranges = AlignmentUtils.findCdsPositions(dnaSeq);
1744
1745     /*
1746      * check the mapping starts with the first complete codon
1747      */
1748     assertEquals(6, MappingUtils.getLength(ranges));
1749     assertEquals(2, ranges.size());
1750     assertEquals(7, ranges.get(0)[0]);
1751     assertEquals(9, ranges.get(0)[1]);
1752     assertEquals(13, ranges.get(1)[0]);
1753     assertEquals(15, ranges.get(1)[1]);
1754   }
1755
1756   /**
1757    * Tests for the method that maps the subset of a dna sequence that has CDS
1758    * (or subtype) feature.
1759    */
1760   @Test(groups = "Functional")
1761   public void testFindCdsPositions()
1762   {
1763     SequenceI dnaSeq = new Sequence("dna", "aaaGGGcccAAATTTttt");
1764     dnaSeq.createDatasetSequence();
1765     SequenceI ds = dnaSeq.getDatasetSequence();
1766
1767     // CDS for dna 10-12
1768     SequenceFeature sf = new SequenceFeature("CDS_predicted", "", 10, 12,
1769             0f, null);
1770     sf.setStrand("+");
1771     ds.addSequenceFeature(sf);
1772     // CDS for dna 4-6
1773     sf = new SequenceFeature("CDS", "", 4, 6, 0f, null);
1774     sf.setStrand("+");
1775     ds.addSequenceFeature(sf);
1776     // exon feature should be ignored here
1777     sf = new SequenceFeature("exon", "", 7, 9, 0f, null);
1778     ds.addSequenceFeature(sf);
1779
1780     List<int[]> ranges = AlignmentUtils.findCdsPositions(dnaSeq);
1781     /*
1782      * verify ranges { [4-6], [12-10] }
1783      * note CDS ranges are ordered ascending even if the CDS
1784      * features are not
1785      */
1786     assertEquals(6, MappingUtils.getLength(ranges));
1787     assertEquals(2, ranges.size());
1788     assertEquals(4, ranges.get(0)[0]);
1789     assertEquals(6, ranges.get(0)[1]);
1790     assertEquals(10, ranges.get(1)[0]);
1791     assertEquals(12, ranges.get(1)[1]);
1792   }
1793
1794   /**
1795    * Test the method that computes a map of codon variants for each protein
1796    * position from "sequence_variant" features on dna
1797    */
1798   @Test(groups = "Functional")
1799   public void testBuildDnaVariantsMap()
1800   {
1801     SequenceI dna = new Sequence("dna", "atgAAATTTGGGCCCtag");
1802     MapList map = new MapList(new int[] { 1, 18 }, new int[] { 1, 5 }, 3, 1);
1803
1804     /*
1805      * first with no variants on dna
1806      */
1807     LinkedHashMap<Integer, List<DnaVariant>[]> variantsMap = AlignmentUtils
1808             .buildDnaVariantsMap(dna, map);
1809     assertTrue(variantsMap.isEmpty());
1810
1811     /*
1812      * single allele codon 1, on base 1
1813      */
1814     SequenceFeature sf1 = new SequenceFeature("sequence_variant", "", 1, 1,
1815             0f, null);
1816     sf1.setValue("alleles", "T");
1817     sf1.setValue("ID", "sequence_variant:rs758803211");
1818     dna.addSequenceFeature(sf1);
1819
1820     /*
1821      * two alleles codon 2, on bases 2 and 3 (distinct variants)
1822      */
1823     SequenceFeature sf2 = new SequenceFeature("sequence_variant", "", 5, 5,
1824             0f, null);
1825     sf2.setValue("alleles", "T");
1826     sf2.setValue("ID", "sequence_variant:rs758803212");
1827     dna.addSequenceFeature(sf2);
1828     SequenceFeature sf3 = new SequenceFeature("sequence_variant", "", 6, 6,
1829             0f, null);
1830     sf3.setValue("alleles", "G");
1831     sf3.setValue("ID", "sequence_variant:rs758803213");
1832     dna.addSequenceFeature(sf3);
1833
1834     /*
1835      * two alleles codon 3, both on base 2 (one variant)
1836      */
1837     SequenceFeature sf4 = new SequenceFeature("sequence_variant", "", 8, 8,
1838             0f, null);
1839     sf4.setValue("alleles", "C, G");
1840     sf4.setValue("ID", "sequence_variant:rs758803214");
1841     dna.addSequenceFeature(sf4);
1842
1843     // no alleles on codon 4
1844
1845     /*
1846      * alleles on codon 5 on all 3 bases (distinct variants)
1847      */
1848     SequenceFeature sf5 = new SequenceFeature("sequence_variant", "", 13,
1849             13, 0f, null);
1850     sf5.setValue("alleles", "C, G"); // (C duplicates given base value)
1851     sf5.setValue("ID", "sequence_variant:rs758803215");
1852     dna.addSequenceFeature(sf5);
1853     SequenceFeature sf6 = new SequenceFeature("sequence_variant", "", 14,
1854             14, 0f, null);
1855     sf6.setValue("alleles", "g, a"); // should force to upper-case
1856     sf6.setValue("ID", "sequence_variant:rs758803216");
1857     dna.addSequenceFeature(sf6);
1858     SequenceFeature sf7 = new SequenceFeature("sequence_variant", "", 15,
1859             15, 0f, null);
1860     sf7.setValue("alleles", "A, T");
1861     sf7.setValue("ID", "sequence_variant:rs758803217");
1862     dna.addSequenceFeature(sf7);
1863
1864     /*
1865      * build map - expect variants on positions 1, 2, 3, 5
1866      */
1867     variantsMap = AlignmentUtils.buildDnaVariantsMap(dna, map);
1868     assertEquals(4, variantsMap.size());
1869
1870     /*
1871      * protein residue 1: variant on codon (ATG) base 1, not on 2 or 3
1872      */
1873     List<DnaVariant>[] pep1Variants = variantsMap.get(1);
1874     assertEquals(3, pep1Variants.length);
1875     assertEquals(1, pep1Variants[0].size());
1876     assertEquals("A", pep1Variants[0].get(0).base); // codon[1] base
1877     assertSame(sf1, pep1Variants[0].get(0).variant); // codon[1] variant
1878     assertEquals(1, pep1Variants[1].size());
1879     assertEquals("T", pep1Variants[1].get(0).base); // codon[2] base
1880     assertNull(pep1Variants[1].get(0).variant); // no variant here
1881     assertEquals(1, pep1Variants[2].size());
1882     assertEquals("G", pep1Variants[2].get(0).base); // codon[3] base
1883     assertNull(pep1Variants[2].get(0).variant); // no variant here
1884
1885     /*
1886      * protein residue 2: variants on codon (AAA) bases 2 and 3
1887      */
1888     List<DnaVariant>[] pep2Variants = variantsMap.get(2);
1889     assertEquals(3, pep2Variants.length);
1890     assertEquals(1, pep2Variants[0].size());
1891     // codon[1] base recorded while processing variant on codon[2]
1892     assertEquals("A", pep2Variants[0].get(0).base);
1893     assertNull(pep2Variants[0].get(0).variant); // no variant here
1894     // codon[2] base and variant:
1895     assertEquals(1, pep2Variants[1].size());
1896     assertEquals("A", pep2Variants[1].get(0).base);
1897     assertSame(sf2, pep2Variants[1].get(0).variant);
1898     // codon[3] base was recorded when processing codon[2] variant
1899     // and then the variant for codon[3] added to it
1900     assertEquals(1, pep2Variants[2].size());
1901     assertEquals("A", pep2Variants[2].get(0).base);
1902     assertSame(sf3, pep2Variants[2].get(0).variant);
1903
1904     /*
1905      * protein residue 3: variants on codon (TTT) base 2 only
1906      */
1907     List<DnaVariant>[] pep3Variants = variantsMap.get(3);
1908     assertEquals(3, pep3Variants.length);
1909     assertEquals(1, pep3Variants[0].size());
1910     assertEquals("T", pep3Variants[0].get(0).base); // codon[1] base
1911     assertNull(pep3Variants[0].get(0).variant); // no variant here
1912     assertEquals(1, pep3Variants[1].size());
1913     assertEquals("T", pep3Variants[1].get(0).base); // codon[2] base
1914     assertSame(sf4, pep3Variants[1].get(0).variant); // codon[2] variant
1915     assertEquals(1, pep3Variants[2].size());
1916     assertEquals("T", pep3Variants[2].get(0).base); // codon[3] base
1917     assertNull(pep3Variants[2].get(0).variant); // no variant here
1918
1919     /*
1920      * three variants on protein position 5
1921      */
1922     List<DnaVariant>[] pep5Variants = variantsMap.get(5);
1923     assertEquals(3, pep5Variants.length);
1924     assertEquals(1, pep5Variants[0].size());
1925     assertEquals("C", pep5Variants[0].get(0).base); // codon[1] base
1926     assertSame(sf5, pep5Variants[0].get(0).variant); // codon[1] variant
1927     assertEquals(1, pep5Variants[1].size());
1928     assertEquals("C", pep5Variants[1].get(0).base); // codon[2] base
1929     assertSame(sf6, pep5Variants[1].get(0).variant); // codon[2] variant
1930     assertEquals(1, pep5Variants[2].size());
1931     assertEquals("C", pep5Variants[2].get(0).base); // codon[3] base
1932     assertSame(sf7, pep5Variants[2].get(0).variant); // codon[3] variant
1933   }
1934
1935   /**
1936    * Tests for the method that computes all peptide variants given codon
1937    * variants
1938    */
1939   @Test(groups = "Functional")
1940   public void testComputePeptideVariants()
1941   {
1942     /*
1943      * scenario: AAATTTCCC codes for KFP, with variants
1944      *           GAA -> E
1945      *           CAA -> Q
1946      *           AAG synonymous
1947      *           AAT -> N
1948      *              TTC synonymous
1949      *                 CAC,CGC -> H,R (as one variant)
1950      */
1951     SequenceI peptide = new Sequence("pep/10-12", "KFP");
1952
1953     /*
1954      * two distinct variants for codon 1 position 1
1955      * second one has clinical significance
1956      */
1957     SequenceFeature sf1 = new SequenceFeature("sequence_variant", "", 1, 1,
1958             0f, null);
1959     sf1.setValue("alleles", "A,G"); // GAA -> E
1960     sf1.setValue("ID", "var1.125A>G");
1961     SequenceFeature sf2 = new SequenceFeature("sequence_variant", "", 1, 1,
1962             0f, null);
1963     sf2.setValue("alleles", "A,C"); // CAA -> Q
1964     sf2.setValue("ID", "var2");
1965     sf2.setValue("clinical_significance", "Dodgy");
1966     SequenceFeature sf3 = new SequenceFeature("sequence_variant", "", 3, 3,
1967             0f, null);
1968     sf3.setValue("alleles", "A,G"); // synonymous
1969     sf3.setValue("ID", "var3");
1970     sf3.setValue("clinical_significance", "None");
1971     SequenceFeature sf4 = new SequenceFeature("sequence_variant", "", 3, 3,
1972             0f, null);
1973     sf4.setValue("alleles", "A,T"); // AAT -> N
1974     sf4.setValue("ID", "sequence_variant:var4"); // prefix gets stripped off
1975     sf4.setValue("clinical_significance", "Benign");
1976     SequenceFeature sf5 = new SequenceFeature("sequence_variant", "", 6, 6,
1977             0f, null);
1978     sf5.setValue("alleles", "T,C"); // synonymous
1979     sf5.setValue("ID", "var5");
1980     sf5.setValue("clinical_significance", "Bad");
1981     SequenceFeature sf6 = new SequenceFeature("sequence_variant", "", 8, 8,
1982             0f, null);
1983     sf6.setValue("alleles", "C,A,G"); // CAC,CGC -> H,R
1984     sf6.setValue("ID", "var6");
1985     sf6.setValue("clinical_significance", "Good");
1986
1987     List<DnaVariant> codon1Variants = new ArrayList<DnaVariant>();
1988     List<DnaVariant> codon2Variants = new ArrayList<DnaVariant>();
1989     List<DnaVariant> codon3Variants = new ArrayList<DnaVariant>();
1990     List<DnaVariant> codonVariants[] = new ArrayList[3];
1991     codonVariants[0] = codon1Variants;
1992     codonVariants[1] = codon2Variants;
1993     codonVariants[2] = codon3Variants;
1994
1995     /*
1996      * compute variants for protein position 1
1997      */
1998     codon1Variants.add(new DnaVariant("A", sf1));
1999     codon1Variants.add(new DnaVariant("A", sf2));
2000     codon2Variants.add(new DnaVariant("A"));
2001     codon2Variants.add(new DnaVariant("A"));
2002     codon3Variants.add(new DnaVariant("A", sf3));
2003     codon3Variants.add(new DnaVariant("A", sf4));
2004     AlignmentUtils.computePeptideVariants(peptide, 1, codonVariants);
2005
2006     /*
2007      * compute variants for protein position 2
2008      */
2009     codon1Variants.clear();
2010     codon2Variants.clear();
2011     codon3Variants.clear();
2012     codon1Variants.add(new DnaVariant("T"));
2013     codon2Variants.add(new DnaVariant("T"));
2014     codon3Variants.add(new DnaVariant("T", sf5));
2015     AlignmentUtils.computePeptideVariants(peptide, 2, codonVariants);
2016
2017     /*
2018      * compute variants for protein position 3
2019      */
2020     codon1Variants.clear();
2021     codon2Variants.clear();
2022     codon3Variants.clear();
2023     codon1Variants.add(new DnaVariant("C"));
2024     codon2Variants.add(new DnaVariant("C", sf6));
2025     codon3Variants.add(new DnaVariant("C"));
2026     AlignmentUtils.computePeptideVariants(peptide, 3, codonVariants);
2027
2028     /*
2029      * verify added sequence features for
2030      * var1 K -> E
2031      * var2 K -> Q
2032      * var4 K -> N
2033      * var6 P -> H
2034      * var6 P -> R
2035      */
2036     SequenceFeature[] sfs = peptide.getSequenceFeatures();
2037     assertEquals(5, sfs.length);
2038     SequenceFeature sf = sfs[0];
2039     assertEquals(1, sf.getBegin());
2040     assertEquals(1, sf.getEnd());
2041     assertEquals("p.Lys1Glu", sf.getDescription());
2042     assertEquals("var1.125A>G", sf.getValue("ID"));
2043     assertNull(sf.getValue("clinical_significance"));
2044     assertEquals("ID=var1.125A>G", sf.getAttributes());
2045     assertEquals(1, sf.links.size());
2046     // link to variation is urlencoded
2047     assertEquals(
2048             "p.Lys1Glu var1.125A>G|http://www.ensembl.org/Homo_sapiens/Variation/Summary?v=var1.125A%3EG",
2049             sf.links.get(0));
2050     assertEquals("Jalview", sf.getFeatureGroup());
2051     sf = sfs[1];
2052     assertEquals(1, sf.getBegin());
2053     assertEquals(1, sf.getEnd());
2054     assertEquals("p.Lys1Gln", sf.getDescription());
2055     assertEquals("var2", sf.getValue("ID"));
2056     assertEquals("Dodgy", sf.getValue("clinical_significance"));
2057     assertEquals("ID=var2;clinical_significance=Dodgy", sf.getAttributes());
2058     assertEquals(1, sf.links.size());
2059     assertEquals(
2060             "p.Lys1Gln var2|http://www.ensembl.org/Homo_sapiens/Variation/Summary?v=var2",
2061             sf.links.get(0));
2062     assertEquals("Jalview", sf.getFeatureGroup());
2063     sf = sfs[2];
2064     assertEquals(1, sf.getBegin());
2065     assertEquals(1, sf.getEnd());
2066     assertEquals("p.Lys1Asn", sf.getDescription());
2067     assertEquals("var4", sf.getValue("ID"));
2068     assertEquals("Benign", sf.getValue("clinical_significance"));
2069     assertEquals("ID=var4;clinical_significance=Benign", sf.getAttributes());
2070     assertEquals(1, sf.links.size());
2071     assertEquals(
2072             "p.Lys1Asn var4|http://www.ensembl.org/Homo_sapiens/Variation/Summary?v=var4",
2073             sf.links.get(0));
2074     assertEquals("Jalview", sf.getFeatureGroup());
2075     sf = sfs[3];
2076     assertEquals(3, sf.getBegin());
2077     assertEquals(3, sf.getEnd());
2078     assertEquals("p.Pro3His", sf.getDescription());
2079     assertEquals("var6", sf.getValue("ID"));
2080     assertEquals("Good", sf.getValue("clinical_significance"));
2081     assertEquals("ID=var6;clinical_significance=Good", sf.getAttributes());
2082     assertEquals(1, sf.links.size());
2083     assertEquals(
2084             "p.Pro3His var6|http://www.ensembl.org/Homo_sapiens/Variation/Summary?v=var6",
2085             sf.links.get(0));
2086     // var5 generates two distinct protein variant features
2087     assertEquals("Jalview", sf.getFeatureGroup());
2088     sf = sfs[4];
2089     assertEquals(3, sf.getBegin());
2090     assertEquals(3, sf.getEnd());
2091     assertEquals("p.Pro3Arg", sf.getDescription());
2092     assertEquals("var6", sf.getValue("ID"));
2093     assertEquals("Good", sf.getValue("clinical_significance"));
2094     assertEquals("ID=var6;clinical_significance=Good", sf.getAttributes());
2095     assertEquals(1, sf.links.size());
2096     assertEquals(
2097             "p.Pro3Arg var6|http://www.ensembl.org/Homo_sapiens/Variation/Summary?v=var6",
2098             sf.links.get(0));
2099     assertEquals("Jalview", sf.getFeatureGroup());
2100   }
2101
2102   /**
2103    * Tests for the method that maps the subset of a dna sequence that has CDS
2104    * (or subtype) feature, with CDS strand = '-' (reverse)
2105    */
2106   // test turned off as currently findCdsPositions is not strand-dependent
2107   // left in case it comes around again...
2108   @Test(groups = "Functional", enabled = false)
2109   public void testFindCdsPositions_reverseStrand()
2110   {
2111     SequenceI dnaSeq = new Sequence("dna", "aaaGGGcccAAATTTttt");
2112     dnaSeq.createDatasetSequence();
2113     SequenceI ds = dnaSeq.getDatasetSequence();
2114
2115     // CDS for dna 4-6
2116     SequenceFeature sf = new SequenceFeature("CDS", "", 4, 6, 0f, null);
2117     sf.setStrand("-");
2118     ds.addSequenceFeature(sf);
2119     // exon feature should be ignored here
2120     sf = new SequenceFeature("exon", "", 7, 9, 0f, null);
2121     ds.addSequenceFeature(sf);
2122     // CDS for dna 10-12
2123     sf = new SequenceFeature("CDS_predicted", "", 10, 12, 0f, null);
2124     sf.setStrand("-");
2125     ds.addSequenceFeature(sf);
2126
2127     List<int[]> ranges = AlignmentUtils.findCdsPositions(dnaSeq);
2128     /*
2129      * verify ranges { [12-10], [6-4] }
2130      */
2131     assertEquals(6, MappingUtils.getLength(ranges));
2132     assertEquals(2, ranges.size());
2133     assertEquals(12, ranges.get(0)[0]);
2134     assertEquals(10, ranges.get(0)[1]);
2135     assertEquals(6, ranges.get(1)[0]);
2136     assertEquals(4, ranges.get(1)[1]);
2137   }
2138
2139   /**
2140    * Tests for the method that maps the subset of a dna sequence that has CDS
2141    * (or subtype) feature - reverse strand case where the start codon is
2142    * incomplete.
2143    */
2144   @Test(groups = "Functional", enabled = false)
2145   // test turned off as currently findCdsPositions is not strand-dependent
2146   // left in case it comes around again...
2147   public void testFindCdsPositions_reverseStrandThreePrimeIncomplete()
2148   {
2149     SequenceI dnaSeq = new Sequence("dna", "aaagGGCCCaaaTTTttt");
2150     dnaSeq.createDatasetSequence();
2151     SequenceI ds = dnaSeq.getDatasetSequence();
2152
2153     // CDS for dna 5-9
2154     SequenceFeature sf = new SequenceFeature("CDS", "", 5, 9, 0f, null);
2155     sf.setStrand("-");
2156     ds.addSequenceFeature(sf);
2157     // CDS for dna 13-15
2158     sf = new SequenceFeature("CDS_predicted", "", 13, 15, 0f, null);
2159     sf.setStrand("-");
2160     sf.setPhase("2"); // skip 2 bases to start of next codon
2161     ds.addSequenceFeature(sf);
2162
2163     List<int[]> ranges = AlignmentUtils.findCdsPositions(dnaSeq);
2164
2165     /*
2166      * check the mapping starts with the first complete codon
2167      * expect ranges [13, 13], [9, 5]
2168      */
2169     assertEquals(6, MappingUtils.getLength(ranges));
2170     assertEquals(2, ranges.size());
2171     assertEquals(13, ranges.get(0)[0]);
2172     assertEquals(13, ranges.get(0)[1]);
2173     assertEquals(9, ranges.get(1)[0]);
2174     assertEquals(5, ranges.get(1)[1]);
2175   }
2176
2177   @Test(groups = "Functional")
2178   public void testAlignAs_alternateTranscriptsUngapped()
2179   {
2180     SequenceI dna1 = new Sequence("dna1", "cccGGGTTTaaa");
2181     SequenceI dna2 = new Sequence("dna2", "CCCgggtttAAA");
2182     AlignmentI dna = new Alignment(new SequenceI[] { dna1, dna2 });
2183     ((Alignment) dna).createDatasetAlignment();
2184     SequenceI cds1 = new Sequence("cds1", "GGGTTT");
2185     SequenceI cds2 = new Sequence("cds2", "CCCAAA");
2186     AlignmentI cds = new Alignment(new SequenceI[] { cds1, cds2 });
2187     ((Alignment) cds).createDatasetAlignment();
2188
2189     AlignedCodonFrame acf = new AlignedCodonFrame();
2190     MapList map = new MapList(new int[] { 4, 9 }, new int[] { 1, 6 }, 1, 1);
2191     acf.addMap(dna1.getDatasetSequence(), cds1.getDatasetSequence(), map);
2192     map = new MapList(new int[] { 1, 3, 10, 12 }, new int[] { 1, 6 }, 1, 1);
2193     acf.addMap(dna2.getDatasetSequence(), cds2.getDatasetSequence(), map);
2194
2195     /*
2196      * verify CDS alignment is as:
2197      *   cccGGGTTTaaa (cdna)
2198      *   CCCgggtttAAA (cdna)
2199      *
2200      *   ---GGGTTT--- (cds)
2201      *   CCC------AAA (cds)
2202      */
2203     dna.addCodonFrame(acf);
2204     AlignmentUtils.alignAs(cds, dna);
2205     assertEquals("---GGGTTT", cds.getSequenceAt(0).getSequenceAsString());
2206     assertEquals("CCC------AAA", cds.getSequenceAt(1).getSequenceAsString());
2207   }
2208
2209   @Test(groups = { "Functional" })
2210   public void testAddMappedPositions()
2211   {
2212     SequenceI from = new Sequence("dna", "ggAA-ATcc-TT-g");
2213     SequenceI seq1 = new Sequence("cds", "AAATTT");
2214     from.createDatasetSequence();
2215     seq1.createDatasetSequence();
2216     Mapping mapping = new Mapping(seq1, new MapList(
2217             new int[] { 3, 6, 9, 10 },
2218             new int[] { 1, 6 }, 1, 1));
2219     Map<Integer, Map<SequenceI, Character>> map = new TreeMap<Integer, Map<SequenceI, Character>>();
2220     AlignmentUtils.addMappedPositions(seq1, from, mapping, map);
2221
2222     /*
2223      * verify map has seq1 residues in columns 3,4,6,7,11,12
2224      */
2225     assertEquals(6, map.size());
2226     assertEquals('A', map.get(3).get(seq1).charValue());
2227     assertEquals('A', map.get(4).get(seq1).charValue());
2228     assertEquals('A', map.get(6).get(seq1).charValue());
2229     assertEquals('T', map.get(7).get(seq1).charValue());
2230     assertEquals('T', map.get(11).get(seq1).charValue());
2231     assertEquals('T', map.get(12).get(seq1).charValue());
2232
2233     /*
2234      *
2235      */
2236   }
2237
2238   /**
2239    * Test case where the mapping 'from' range includes a stop codon which is
2240    * absent in the 'to' range
2241    */
2242   @Test(groups = { "Functional" })
2243   public void testAddMappedPositions_withStopCodon()
2244   {
2245     SequenceI from = new Sequence("dna", "ggAA-ATcc-TT-g");
2246     SequenceI seq1 = new Sequence("cds", "AAATTT");
2247     from.createDatasetSequence();
2248     seq1.createDatasetSequence();
2249     Mapping mapping = new Mapping(seq1, new MapList(
2250             new int[] { 3, 6, 9, 10 },
2251             new int[] { 1, 6 }, 1, 1));
2252     Map<Integer, Map<SequenceI, Character>> map = new TreeMap<Integer, Map<SequenceI, Character>>();
2253     AlignmentUtils.addMappedPositions(seq1, from, mapping, map);
2254
2255     /*
2256      * verify map has seq1 residues in columns 3,4,6,7,11,12
2257      */
2258     assertEquals(6, map.size());
2259     assertEquals('A', map.get(3).get(seq1).charValue());
2260     assertEquals('A', map.get(4).get(seq1).charValue());
2261     assertEquals('A', map.get(6).get(seq1).charValue());
2262     assertEquals('T', map.get(7).get(seq1).charValue());
2263     assertEquals('T', map.get(11).get(seq1).charValue());
2264     assertEquals('T', map.get(12).get(seq1).charValue());
2265   }
2266
2267   /**
2268    * Test for the case where the products for which we want CDS are specified.
2269    * This is to represent the case where EMBL has CDS mappings to both Uniprot
2270    * and EMBLCDSPROTEIN. makeCdsAlignment() should only return the mappings for
2271    * the protein sequences specified.
2272    */
2273   @Test(groups = { "Functional" })
2274   public void testMakeCdsAlignment_filterProducts()
2275   {
2276     SequenceI dna1 = new Sequence("dna1", "aaaGGGcccTTTaaa");
2277     SequenceI dna2 = new Sequence("dna2", "GGGcccTTTaaaCCC");
2278     SequenceI pep1 = new Sequence("Uniprot|pep1", "GF");
2279     SequenceI pep2 = new Sequence("Uniprot|pep2", "GFP");
2280     SequenceI pep3 = new Sequence("EMBL|pep3", "GF");
2281     SequenceI pep4 = new Sequence("EMBL|pep4", "GFP");
2282     dna1.createDatasetSequence();
2283     dna2.createDatasetSequence();
2284     pep1.createDatasetSequence();
2285     pep2.createDatasetSequence();
2286     pep3.createDatasetSequence();
2287     pep4.createDatasetSequence();
2288     AlignmentI dna = new Alignment(new SequenceI[] { dna1, dna2 });
2289     dna.setDataset(null);
2290     AlignmentI emblPeptides = new Alignment(new SequenceI[] { pep3, pep4 });
2291     emblPeptides.setDataset(null);
2292
2293     AlignedCodonFrame acf = new AlignedCodonFrame();
2294     MapList map = new MapList(new int[] { 4, 6, 10, 12 },
2295             new int[] { 1, 2 }, 3, 1);
2296     acf.addMap(dna1.getDatasetSequence(), pep1.getDatasetSequence(), map);
2297     acf.addMap(dna1.getDatasetSequence(), pep3.getDatasetSequence(), map);
2298     dna.addCodonFrame(acf);
2299
2300     acf = new AlignedCodonFrame();
2301     map = new MapList(new int[] { 1, 3, 7, 9, 13, 15 }, new int[] { 1, 3 },
2302             3, 1);
2303     acf.addMap(dna2.getDatasetSequence(), pep2.getDatasetSequence(), map);
2304     acf.addMap(dna2.getDatasetSequence(), pep4.getDatasetSequence(), map);
2305     dna.addCodonFrame(acf);
2306
2307     /*
2308      * execute method under test to find CDS for EMBL peptides only
2309      */
2310     AlignmentI cds = AlignmentUtils.makeCdsAlignment(new SequenceI[] {
2311         dna1, dna2 }, dna.getDataset(), emblPeptides.getSequencesArray());
2312
2313     assertEquals(2, cds.getSequences().size());
2314     assertEquals("GGGTTT", cds.getSequenceAt(0).getSequenceAsString());
2315     assertEquals("GGGTTTCCC", cds.getSequenceAt(1).getSequenceAsString());
2316
2317     /*
2318      * verify shared, extended alignment dataset
2319      */
2320     assertSame(dna.getDataset(), cds.getDataset());
2321     assertTrue(dna.getDataset().getSequences()
2322             .contains(cds.getSequenceAt(0).getDatasetSequence()));
2323     assertTrue(dna.getDataset().getSequences()
2324             .contains(cds.getSequenceAt(1).getDatasetSequence()));
2325
2326     /*
2327      * Verify mappings from CDS to peptide, cDNA to CDS, and cDNA to peptide
2328      * the mappings are on the shared alignment dataset
2329      */
2330     List<AlignedCodonFrame> cdsMappings = cds.getDataset().getCodonFrames();
2331     /*
2332      * 6 mappings, 2*(DNA->CDS), 2*(DNA->Pep), 2*(CDS->Pep)
2333      */
2334     assertEquals(6, cdsMappings.size());
2335
2336     /*
2337      * verify that mapping sets for dna and cds alignments are different
2338      * [not current behaviour - all mappings are on the alignment dataset]
2339      */
2340     // select -> subselect type to test.
2341     // Assert.assertNotSame(dna.getCodonFrames(), cds.getCodonFrames());
2342     // assertEquals(4, dna.getCodonFrames().size());
2343     // assertEquals(4, cds.getCodonFrames().size());
2344
2345     /*
2346      * Two mappings involve pep3 (dna to pep3, cds to pep3)
2347      * Mapping from pep3 to GGGTTT in first new exon sequence
2348      */
2349     List<AlignedCodonFrame> pep3Mappings = MappingUtils
2350             .findMappingsForSequence(pep3, cdsMappings);
2351     assertEquals(2, pep3Mappings.size());
2352     List<AlignedCodonFrame> mappings = MappingUtils
2353             .findMappingsForSequence(cds.getSequenceAt(0), pep3Mappings);
2354     assertEquals(1, mappings.size());
2355
2356     // map G to GGG
2357     SearchResults sr = MappingUtils.buildSearchResults(pep3, 1, mappings);
2358     assertEquals(1, sr.getResults().size());
2359     Match m = sr.getResults().get(0);
2360     assertSame(cds.getSequenceAt(0).getDatasetSequence(), m.getSequence());
2361     assertEquals(1, m.getStart());
2362     assertEquals(3, m.getEnd());
2363     // map F to TTT
2364     sr = MappingUtils.buildSearchResults(pep3, 2, mappings);
2365     m = sr.getResults().get(0);
2366     assertSame(cds.getSequenceAt(0).getDatasetSequence(), m.getSequence());
2367     assertEquals(4, m.getStart());
2368     assertEquals(6, m.getEnd());
2369
2370     /*
2371      * Two mappings involve pep4 (dna to pep4, cds to pep4)
2372      * Verify mapping from pep4 to GGGTTTCCC in second new exon sequence
2373      */
2374     List<AlignedCodonFrame> pep4Mappings = MappingUtils
2375             .findMappingsForSequence(pep4, cdsMappings);
2376     assertEquals(2, pep4Mappings.size());
2377     mappings = MappingUtils.findMappingsForSequence(cds.getSequenceAt(1),
2378             pep4Mappings);
2379     assertEquals(1, mappings.size());
2380     // map G to GGG
2381     sr = MappingUtils.buildSearchResults(pep4, 1, mappings);
2382     assertEquals(1, sr.getResults().size());
2383     m = sr.getResults().get(0);
2384     assertSame(cds.getSequenceAt(1).getDatasetSequence(), m.getSequence());
2385     assertEquals(1, m.getStart());
2386     assertEquals(3, m.getEnd());
2387     // map F to TTT
2388     sr = MappingUtils.buildSearchResults(pep4, 2, mappings);
2389     m = sr.getResults().get(0);
2390     assertSame(cds.getSequenceAt(1).getDatasetSequence(), m.getSequence());
2391     assertEquals(4, m.getStart());
2392     assertEquals(6, m.getEnd());
2393     // map P to CCC
2394     sr = MappingUtils.buildSearchResults(pep4, 3, mappings);
2395     m = sr.getResults().get(0);
2396     assertSame(cds.getSequenceAt(1).getDatasetSequence(), m.getSequence());
2397     assertEquals(7, m.getStart());
2398     assertEquals(9, m.getEnd());
2399   }
2400
2401   /**
2402    * Test the method that just copies aligned sequences, provided all sequences
2403    * to be aligned share the aligned sequence's dataset
2404    */
2405   @Test(groups = "Functional")
2406   public void testAlignAsSameSequences()
2407   {
2408     SequenceI dna1 = new Sequence("dna1", "cccGGGTTTaaa");
2409     SequenceI dna2 = new Sequence("dna2", "CCCgggtttAAA");
2410     AlignmentI al1 = new Alignment(new SequenceI[] { dna1, dna2 });
2411     ((Alignment) al1).createDatasetAlignment();
2412
2413     SequenceI dna3 = new Sequence(dna1);
2414     SequenceI dna4 = new Sequence(dna2);
2415     assertSame(dna3.getDatasetSequence(), dna1.getDatasetSequence());
2416     assertSame(dna4.getDatasetSequence(), dna2.getDatasetSequence());
2417     String seq1 = "-cc-GG-GT-TT--aaa";
2418     dna3.setSequence(seq1);
2419     String seq2 = "C--C-Cgg--gtt-tAA-A-";
2420     dna4.setSequence(seq2);
2421     AlignmentI al2 = new Alignment(new SequenceI[] { dna3, dna4 });
2422     ((Alignment) al2).createDatasetAlignment();
2423
2424     assertTrue(AlignmentUtils.alignAsSameSequences(al1, al2));
2425     assertEquals(seq1, al1.getSequenceAt(0).getSequenceAsString());
2426     assertEquals(seq2, al1.getSequenceAt(1).getSequenceAsString());
2427
2428     /*
2429      * add another sequence to 'aligned' - should still succeed, since
2430      * unaligned sequences still share a dataset with aligned sequences
2431      */
2432     SequenceI dna5 = new Sequence("dna5", "CCCgggtttAAA");
2433     dna5.createDatasetSequence();
2434     al2.addSequence(dna5);
2435     assertTrue(AlignmentUtils.alignAsSameSequences(al1, al2));
2436     assertEquals(seq1, al1.getSequenceAt(0).getSequenceAsString());
2437     assertEquals(seq2, al1.getSequenceAt(1).getSequenceAsString());
2438
2439     /*
2440      * add another sequence to 'unaligned' - should fail, since now not
2441      * all unaligned sequences share a dataset with aligned sequences
2442      */
2443     SequenceI dna6 = new Sequence("dna6", "CCCgggtttAAA");
2444     dna6.createDatasetSequence();
2445     al1.addSequence(dna6);
2446     // JAL-2110 JBP Comment: what's the use case for this behaviour ?
2447     assertFalse(AlignmentUtils.alignAsSameSequences(al1, al2));
2448   }
2449
2450   @Test(groups = "Functional")
2451   public void testAlignAsSameSequencesMultipleSubSeq()
2452   {
2453     SequenceI dna1 = new Sequence("dna1", "cccGGGTTTaaa");
2454     SequenceI dna2 = new Sequence("dna2", "CCCgggtttAAA");
2455     SequenceI as1 = dna1.deriveSequence();
2456     SequenceI as2 = dna1.deriveSequence().getSubSequence(3, 7);
2457     SequenceI as3 = dna2.deriveSequence();
2458     as1.insertCharAt(6, 5, '-');
2459     String s_as1 = as1.getSequenceAsString();
2460     as2.insertCharAt(6, 5, '-');
2461     String s_as2 = as2.getSequenceAsString();
2462     as3.insertCharAt(6, 5, '-');
2463     String s_as3 = as3.getSequenceAsString();
2464     AlignmentI aligned = new Alignment(new SequenceI[] { as1, as2, as3 });
2465
2466     // why do we need to cast this still ?
2467     ((Alignment) aligned).createDatasetAlignment();
2468     SequenceI uas1 = dna1.deriveSequence();
2469     SequenceI uas2 = dna1.deriveSequence().getSubSequence(3, 7);
2470     SequenceI uas3 = dna2.deriveSequence();
2471     AlignmentI tobealigned = new Alignment(new SequenceI[] { uas1, uas2,
2472         uas3 });
2473     ((Alignment) tobealigned).createDatasetAlignment();
2474
2475     assertTrue(AlignmentUtils.alignAsSameSequences(tobealigned, aligned));
2476     assertEquals(s_as1, uas1.getSequenceAsString());
2477     assertEquals(s_as2, uas2.getSequenceAsString());
2478     assertEquals(s_as3, uas3.getSequenceAsString());
2479   }
2480
2481 }