JAL-3806 JAL-3725 update tests since CDS mappings now exclude the stop codon
[jalview.git] / src / jalview / util / MappingUtils.java
1 /*
2  * Jalview - A Sequence Alignment Editor and Viewer ($$Version-Rel$$)
3  * Copyright (C) $$Year-Rel$$ The Jalview Authors
4  * 
5  * This file is part of Jalview.
6  * 
7  * Jalview is free software: you can redistribute it and/or
8  * modify it under the terms of the GNU General Public License 
9  * as published by the Free Software Foundation, either version 3
10  * of the License, or (at your option) any later version.
11  *  
12  * Jalview is distributed in the hope that it will be useful, but 
13  * WITHOUT ANY WARRANTY; without even the implied warranty 
14  * of MERCHANTABILITY or FITNESS FOR A PARTICULAR 
15  * PURPOSE.  See the GNU General Public License for more details.
16  * 
17  * You should have received a copy of the GNU General Public License
18  * along with Jalview.  If not, see <http://www.gnu.org/licenses/>.
19  * The Jalview Authors are detailed in the 'AUTHORS' file.
20  */
21 package jalview.util;
22
23 import java.util.ArrayList;
24 import java.util.Arrays;
25 import java.util.HashMap;
26 import java.util.Iterator;
27 import java.util.List;
28 import java.util.Map;
29
30 import jalview.analysis.AlignmentSorter;
31 import jalview.api.AlignViewportI;
32 import jalview.bin.Cache;
33 import jalview.commands.CommandI;
34 import jalview.commands.EditCommand;
35 import jalview.commands.EditCommand.Action;
36 import jalview.commands.EditCommand.Edit;
37 import jalview.commands.OrderCommand;
38 import jalview.datamodel.AlignedCodonFrame;
39 import jalview.datamodel.AlignedCodonFrame.SequenceToSequenceMapping;
40 import jalview.datamodel.AlignmentI;
41 import jalview.datamodel.AlignmentOrder;
42 import jalview.datamodel.ColumnSelection;
43 import jalview.datamodel.HiddenColumns;
44 import jalview.datamodel.Mapping;
45 import jalview.datamodel.SearchResultMatchI;
46 import jalview.datamodel.SearchResults;
47 import jalview.datamodel.SearchResultsI;
48 import jalview.datamodel.Sequence;
49 import jalview.datamodel.SequenceGroup;
50 import jalview.datamodel.SequenceI;
51
52 /**
53  * Helper methods for manipulations involving sequence mappings.
54  * 
55  * @author gmcarstairs
56  *
57  */
58 public final class MappingUtils
59 {
60
61   /**
62    * Helper method to map a CUT or PASTE command.
63    * 
64    * @param edit
65    *          the original command
66    * @param undo
67    *          if true, the command is to be undone
68    * @param targetSeqs
69    *          the mapped sequences to apply the mapped command to
70    * @param result
71    *          the mapped EditCommand to add to
72    * @param mappings
73    */
74   protected static void mapCutOrPaste(Edit edit, boolean undo,
75           List<SequenceI> targetSeqs, EditCommand result,
76           List<AlignedCodonFrame> mappings)
77   {
78     Action action = edit.getAction();
79     if (undo)
80     {
81       action = action.getUndoAction();
82     }
83     // TODO write this
84     Cache.log.error("MappingUtils.mapCutOrPaste not yet implemented");
85   }
86
87   /**
88    * Returns a new EditCommand representing the given command as mapped to the
89    * given sequences. If there is no mapping, returns null.
90    * 
91    * @param command
92    * @param undo
93    * @param mapTo
94    * @param gapChar
95    * @param mappings
96    * @return
97    */
98   public static EditCommand mapEditCommand(EditCommand command,
99           boolean undo, final AlignmentI mapTo, char gapChar,
100           List<AlignedCodonFrame> mappings)
101   {
102     /*
103      * For now, only support mapping from protein edits to cDna
104      */
105     if (!mapTo.isNucleotide())
106     {
107       return null;
108     }
109
110     /*
111      * Cache a copy of the target sequences so we can mimic successive edits on
112      * them. This lets us compute mappings for all edits in the set.
113      */
114     Map<SequenceI, SequenceI> targetCopies = new HashMap<>();
115     for (SequenceI seq : mapTo.getSequences())
116     {
117       SequenceI ds = seq.getDatasetSequence();
118       if (ds != null)
119       {
120         final SequenceI copy = new Sequence(seq);
121         copy.setDatasetSequence(ds);
122         targetCopies.put(ds, copy);
123       }
124     }
125
126     /*
127      * Compute 'source' sequences as they were before applying edits:
128      */
129     Map<SequenceI, SequenceI> originalSequences = command.priorState(undo);
130
131     EditCommand result = new EditCommand();
132     Iterator<Edit> edits = command.getEditIterator(!undo);
133     while (edits.hasNext())
134     {
135       Edit edit = edits.next();
136       if (edit.getAction() == Action.CUT
137               || edit.getAction() == Action.PASTE)
138       {
139         mapCutOrPaste(edit, undo, mapTo.getSequences(), result, mappings);
140       }
141       else if (edit.getAction() == Action.INSERT_GAP
142               || edit.getAction() == Action.DELETE_GAP)
143       {
144         mapInsertOrDelete(edit, undo, originalSequences,
145                 mapTo.getSequences(), targetCopies, gapChar, result,
146                 mappings);
147       }
148     }
149     return result.getSize() > 0 ? result : null;
150   }
151
152   /**
153    * Helper method to map an edit command to insert or delete gaps.
154    * 
155    * @param edit
156    *          the original command
157    * @param undo
158    *          if true, the action is to undo the command
159    * @param originalSequences
160    *          the sequences the command acted on
161    * @param targetSeqs
162    * @param targetCopies
163    * @param gapChar
164    * @param result
165    *          the new EditCommand to add mapped commands to
166    * @param mappings
167    */
168   protected static void mapInsertOrDelete(Edit edit, boolean undo,
169           Map<SequenceI, SequenceI> originalSequences,
170           final List<SequenceI> targetSeqs,
171           Map<SequenceI, SequenceI> targetCopies, char gapChar,
172           EditCommand result, List<AlignedCodonFrame> mappings)
173   {
174     Action action = edit.getAction();
175
176     /*
177      * Invert sense of action if an Undo.
178      */
179     if (undo)
180     {
181       action = action.getUndoAction();
182     }
183     final int count = edit.getNumber();
184     final int editPos = edit.getPosition();
185     for (SequenceI seq : edit.getSequences())
186     {
187       /*
188        * Get residue position at (or to right of) edit location. Note we use our
189        * 'copy' of the sequence before editing for this.
190        */
191       SequenceI ds = seq.getDatasetSequence();
192       if (ds == null)
193       {
194         continue;
195       }
196       final SequenceI actedOn = originalSequences.get(ds);
197       final int seqpos = actedOn.findPosition(editPos);
198
199       /*
200        * Determine all mappings from this position to mapped sequences.
201        */
202       SearchResultsI sr = buildSearchResults(seq, seqpos, mappings);
203
204       if (!sr.isEmpty())
205       {
206         for (SequenceI targetSeq : targetSeqs)
207         {
208           ds = targetSeq.getDatasetSequence();
209           if (ds == null)
210           {
211             continue;
212           }
213           SequenceI copyTarget = targetCopies.get(ds);
214           final int[] match = sr.getResults(copyTarget, 0,
215                   copyTarget.getLength());
216           if (match != null)
217           {
218             final int ratio = 3; // TODO: compute this - how?
219             final int mappedCount = count * ratio;
220
221             /*
222              * Shift Delete start position left, as it acts on positions to its
223              * right.
224              */
225             int mappedEditPos = action == Action.DELETE_GAP
226                     ? match[0] - mappedCount
227                     : match[0];
228             Edit e = result.new Edit(action, new SequenceI[] { targetSeq },
229                     mappedEditPos, mappedCount, gapChar);
230             result.addEdit(e);
231
232             /*
233              * and 'apply' the edit to our copy of its target sequence
234              */
235             if (action == Action.INSERT_GAP)
236             {
237               copyTarget.setSequence(new String(
238                       StringUtils.insertCharAt(copyTarget.getSequence(),
239                               mappedEditPos, mappedCount, gapChar)));
240             }
241             else if (action == Action.DELETE_GAP)
242             {
243               copyTarget.setSequence(new String(
244                       StringUtils.deleteChars(copyTarget.getSequence(),
245                               mappedEditPos, mappedEditPos + mappedCount)));
246             }
247           }
248         }
249       }
250       /*
251        * and 'apply' the edit to our copy of its source sequence
252        */
253       if (action == Action.INSERT_GAP)
254       {
255         actedOn.setSequence(new String(StringUtils.insertCharAt(
256                 actedOn.getSequence(), editPos, count, gapChar)));
257       }
258       else if (action == Action.DELETE_GAP)
259       {
260         actedOn.setSequence(new String(StringUtils.deleteChars(
261                 actedOn.getSequence(), editPos, editPos + count)));
262       }
263     }
264   }
265
266   /**
267    * Returns a SearchResults object describing the mapped region corresponding
268    * to the specified sequence position.
269    * 
270    * @param seq
271    * @param index
272    * @param seqmappings
273    * @return
274    */
275   public static SearchResultsI buildSearchResults(SequenceI seq, int index,
276           List<AlignedCodonFrame> seqmappings)
277   {
278     SearchResultsI results = new SearchResults();
279     addSearchResults(results, seq, index, seqmappings);
280     return results;
281   }
282
283   /**
284    * Adds entries to a SearchResults object describing the mapped region
285    * corresponding to the specified sequence position.
286    * 
287    * @param results
288    * @param seq
289    * @param index
290    * @param seqmappings
291    */
292   public static void addSearchResults(SearchResultsI results, SequenceI seq,
293           int index, List<AlignedCodonFrame> seqmappings)
294   {
295     if (index >= seq.getStart() && index <= seq.getEnd())
296     {
297       for (AlignedCodonFrame acf : seqmappings)
298       {
299         acf.markMappedRegion(seq, index, results);
300       }
301     }
302   }
303
304   /**
305    * Returns a (possibly empty) SequenceGroup containing any sequences in the
306    * mapped viewport corresponding to the given group in the source viewport.
307    * 
308    * @param sg
309    * @param mapFrom
310    * @param mapTo
311    * @return
312    */
313   public static SequenceGroup mapSequenceGroup(final SequenceGroup sg,
314           final AlignViewportI mapFrom, final AlignViewportI mapTo)
315   {
316     /*
317      * Note the SequenceGroup holds aligned sequences, the mappings hold dataset
318      * sequences.
319      */
320     boolean targetIsNucleotide = mapTo.isNucleotide();
321     AlignViewportI protein = targetIsNucleotide ? mapFrom : mapTo;
322     List<AlignedCodonFrame> codonFrames = protein.getAlignment()
323             .getCodonFrames();
324     /*
325      * Copy group name, colours etc, but not sequences or sequence colour scheme
326      */
327     SequenceGroup mappedGroup = new SequenceGroup(sg);
328     mappedGroup.setColourScheme(mapTo.getGlobalColourScheme());
329     mappedGroup.clear();
330
331     int minStartCol = -1;
332     int maxEndCol = -1;
333     final int selectionStartRes = sg.getStartRes();
334     final int selectionEndRes = sg.getEndRes();
335     for (SequenceI selected : sg.getSequences())
336     {
337       /*
338        * Find the widest range of non-gapped positions in the selection range
339        */
340       int firstUngappedPos = selectionStartRes;
341       while (firstUngappedPos <= selectionEndRes
342               && Comparison.isGap(selected.getCharAt(firstUngappedPos)))
343       {
344         firstUngappedPos++;
345       }
346
347       /*
348        * If this sequence is only gaps in the selected range, skip it
349        */
350       if (firstUngappedPos > selectionEndRes)
351       {
352         continue;
353       }
354
355       int lastUngappedPos = selectionEndRes;
356       while (lastUngappedPos >= selectionStartRes
357               && Comparison.isGap(selected.getCharAt(lastUngappedPos)))
358       {
359         lastUngappedPos--;
360       }
361
362       /*
363        * Find the selected start/end residue positions in sequence
364        */
365       int startResiduePos = selected.findPosition(firstUngappedPos);
366       int endResiduePos = selected.findPosition(lastUngappedPos);
367       for (SequenceI seq : mapTo.getAlignment().getSequences())
368       {
369         int mappedStartResidue = 0;
370         int mappedEndResidue = 0;
371         for (AlignedCodonFrame acf : codonFrames)
372         {
373           for (SequenceToSequenceMapping map: acf.getMappings())
374           {
375           if (map.covers(selected) && map.covers(seq))
376           {
377             /*
378              * Found a sequence mapping. Locate the start/end mapped residues.
379              */
380             List<AlignedCodonFrame> mapping = Arrays
381                     .asList(new AlignedCodonFrame[]
382                     { acf });
383             // locate start 
384             SearchResultsI sr = buildSearchResults(selected,
385                     startResiduePos, mapping);
386             for (SearchResultMatchI m : sr.getResults())
387             {
388               mappedStartResidue = m.getStart();
389               mappedEndResidue = m.getEnd();
390             }
391             // locate end - allowing for adjustment of start range
392             sr = buildSearchResults(selected, endResiduePos, mapping);
393             for (SearchResultMatchI m : sr.getResults())
394             {
395               mappedStartResidue = Math.min(mappedStartResidue,
396                       m.getStart());
397               mappedEndResidue = Math.max(mappedEndResidue, m.getEnd());
398             }
399
400             /*
401              * Find the mapped aligned columns, save the range. Note findIndex
402              * returns a base 1 position, SequenceGroup uses base 0
403              */
404             int mappedStartCol = seq.findIndex(mappedStartResidue) - 1;
405             minStartCol = minStartCol == -1 ? mappedStartCol
406                     : Math.min(minStartCol, mappedStartCol);
407             int mappedEndCol = seq.findIndex(mappedEndResidue) - 1;
408             maxEndCol = maxEndCol == -1 ? mappedEndCol
409                     : Math.max(maxEndCol, mappedEndCol);
410             mappedGroup.addSequence(seq, false);
411             break;
412           }
413         }}
414       }
415     }
416     mappedGroup.setStartRes(minStartCol < 0 ? 0 : minStartCol);
417     mappedGroup.setEndRes(maxEndCol < 0 ? 0 : maxEndCol);
418     return mappedGroup;
419   }
420
421   /**
422    * Returns an OrderCommand equivalent to the given one, but acting on mapped
423    * sequences as described by the mappings, or null if no mapping can be made.
424    * 
425    * @param command
426    *          the original order command
427    * @param undo
428    *          if true, the action is to undo the sort
429    * @param mapTo
430    *          the alignment we are mapping to
431    * @param mappings
432    *          the mappings available
433    * @return
434    */
435   public static CommandI mapOrderCommand(OrderCommand command, boolean undo,
436           AlignmentI mapTo, List<AlignedCodonFrame> mappings)
437   {
438     SequenceI[] sortOrder = command.getSequenceOrder(undo);
439     List<SequenceI> mappedOrder = new ArrayList<>();
440     int j = 0;
441
442     /*
443      * Assumption: we are only interested in a cDNA/protein mapping; refactor in
444      * future if we want to support sorting (c)dna as (c)dna or protein as
445      * protein
446      */
447     boolean mappingToNucleotide = mapTo.isNucleotide();
448     for (SequenceI seq : sortOrder)
449     {
450       for (AlignedCodonFrame acf : mappings)
451       {
452         SequenceI mappedSeq = mappingToNucleotide ? acf.getDnaForAaSeq(seq)
453                 : acf.getAaForDnaSeq(seq);
454         if (mappedSeq != null)
455         {
456           for (SequenceI seq2 : mapTo.getSequences())
457           {
458             if (seq2.getDatasetSequence() == mappedSeq)
459             {
460               mappedOrder.add(seq2);
461               j++;
462               break;
463             }
464           }
465         }
466       }
467     }
468
469     /*
470      * Return null if no mappings made.
471      */
472     if (j == 0)
473     {
474       return null;
475     }
476
477     /*
478      * Add any unmapped sequences on the end of the sort in their original
479      * ordering.
480      */
481     if (j < mapTo.getHeight())
482     {
483       for (SequenceI seq : mapTo.getSequences())
484       {
485         if (!mappedOrder.contains(seq))
486         {
487           mappedOrder.add(seq);
488         }
489       }
490     }
491
492     /*
493      * Have to sort the sequences before constructing the OrderCommand - which
494      * then resorts them?!?
495      */
496     final SequenceI[] mappedOrderArray = mappedOrder
497             .toArray(new SequenceI[mappedOrder.size()]);
498     SequenceI[] oldOrder = mapTo.getSequencesArray();
499     AlignmentSorter.sortBy(mapTo, new AlignmentOrder(mappedOrderArray));
500     final OrderCommand result = new OrderCommand(command.getDescription(),
501             oldOrder, mapTo);
502     return result;
503   }
504
505   /**
506    * Returns a ColumnSelection in the 'mapTo' view which corresponds to the
507    * given selection in the 'mapFrom' view. We assume one is nucleotide, the
508    * other is protein (and holds the mappings from codons to protein residues).
509    * 
510    * @param colsel
511    * @param mapFrom
512    * @param mapTo
513    * @return
514    */
515   public static void mapColumnSelection(ColumnSelection colsel,
516           HiddenColumns hiddencols, AlignViewportI mapFrom,
517           AlignViewportI mapTo, ColumnSelection newColSel,
518           HiddenColumns newHidden)
519   {
520     boolean targetIsNucleotide = mapTo.isNucleotide();
521     AlignViewportI protein = targetIsNucleotide ? mapFrom : mapTo;
522     List<AlignedCodonFrame> codonFrames = protein.getAlignment()
523             .getCodonFrames();
524
525     if (colsel == null)
526     {
527       return; // mappedColumns;
528     }
529
530     char fromGapChar = mapFrom.getAlignment().getGapCharacter();
531
532     /*
533      * For each mapped column, find the range of columns that residues in that
534      * column map to.
535      */
536     List<SequenceI> fromSequences = mapFrom.getAlignment().getSequences();
537     List<SequenceI> toSequences = mapTo.getAlignment().getSequences();
538
539     for (Integer sel : colsel.getSelected())
540     {
541       mapColumn(sel.intValue(), codonFrames, newColSel, fromSequences,
542               toSequences, fromGapChar);
543     }
544
545     Iterator<int[]> regions = hiddencols.iterator();
546     while (regions.hasNext())
547     {
548       mapHiddenColumns(regions.next(), codonFrames, newHidden,
549               fromSequences, toSequences, fromGapChar);
550     }
551     return; // mappedColumns;
552   }
553
554   /**
555    * Helper method that maps a [start, end] hidden column range to its mapped
556    * equivalent
557    * 
558    * @param hidden
559    * @param mappings
560    * @param mappedColumns
561    * @param fromSequences
562    * @param toSequences
563    * @param fromGapChar
564    */
565   protected static void mapHiddenColumns(int[] hidden,
566           List<AlignedCodonFrame> mappings, HiddenColumns mappedColumns,
567           List<SequenceI> fromSequences, List<SequenceI> toSequences,
568           char fromGapChar)
569   {
570     for (int col = hidden[0]; col <= hidden[1]; col++)
571     {
572       int[] mappedTo = findMappedColumns(col, mappings, fromSequences,
573               toSequences, fromGapChar);
574
575       /*
576        * Add the range of hidden columns to the mapped selection (converting
577        * base 1 to base 0).
578        */
579       if (mappedTo != null)
580       {
581         mappedColumns.hideColumns(mappedTo[0] - 1, mappedTo[1] - 1);
582       }
583     }
584   }
585
586   /**
587    * Helper method to map one column selection
588    * 
589    * @param col
590    *          the column number (base 0)
591    * @param mappings
592    *          the sequence mappings
593    * @param mappedColumns
594    *          the mapped column selections to add to
595    * @param fromSequences
596    * @param toSequences
597    * @param fromGapChar
598    */
599   protected static void mapColumn(int col, List<AlignedCodonFrame> mappings,
600           ColumnSelection mappedColumns, List<SequenceI> fromSequences,
601           List<SequenceI> toSequences, char fromGapChar)
602   {
603     int[] mappedTo = findMappedColumns(col, mappings, fromSequences,
604             toSequences, fromGapChar);
605
606     /*
607      * Add the range of mapped columns to the mapped selection (converting
608      * base 1 to base 0). Note that this may include intron-only regions which
609      * lie between the start and end ranges of the selection.
610      */
611     if (mappedTo != null)
612     {
613       for (int i = mappedTo[0]; i <= mappedTo[1]; i++)
614       {
615         mappedColumns.addElement(i - 1);
616       }
617     }
618   }
619
620   /**
621    * Helper method to find the range of columns mapped to from one column.
622    * Returns the maximal range of columns mapped to from all sequences in the
623    * source column, or null if no mappings were found.
624    * 
625    * @param col
626    * @param mappings
627    * @param fromSequences
628    * @param toSequences
629    * @param fromGapChar
630    * @return
631    */
632   protected static int[] findMappedColumns(int col,
633           List<AlignedCodonFrame> mappings, List<SequenceI> fromSequences,
634           List<SequenceI> toSequences, char fromGapChar)
635   {
636     int[] mappedTo = new int[] { Integer.MAX_VALUE, Integer.MIN_VALUE };
637     boolean found = false;
638
639     /*
640      * For each sequence in the 'from' alignment
641      */
642     for (SequenceI fromSeq : fromSequences)
643     {
644       /*
645        * Ignore gaps (unmapped anyway)
646        */
647       if (fromSeq.getCharAt(col) == fromGapChar)
648       {
649         continue;
650       }
651
652       /*
653        * Get the residue position and find the mapped position.
654        */
655       int residuePos = fromSeq.findPosition(col);
656       SearchResultsI sr = buildSearchResults(fromSeq, residuePos, mappings);
657       for (SearchResultMatchI m : sr.getResults())
658       {
659         int mappedStartResidue = m.getStart();
660         int mappedEndResidue = m.getEnd();
661         SequenceI mappedSeq = m.getSequence();
662
663         /*
664          * Locate the aligned sequence whose dataset is mappedSeq. TODO a
665          * datamodel that can do this efficiently.
666          */
667         for (SequenceI toSeq : toSequences)
668         {
669           if (toSeq.getDatasetSequence() == mappedSeq)
670           {
671             int mappedStartCol = toSeq.findIndex(mappedStartResidue);
672             int mappedEndCol = toSeq.findIndex(mappedEndResidue);
673             mappedTo[0] = Math.min(mappedTo[0], mappedStartCol);
674             mappedTo[1] = Math.max(mappedTo[1], mappedEndCol);
675             found = true;
676             break;
677             // note: remove break if we ever want to map one to many sequences
678           }
679         }
680       }
681     }
682     return found ? mappedTo : null;
683   }
684
685   /**
686    * Returns the mapped codon or codons for a given aligned sequence column
687    * position (base 0).
688    * 
689    * @param seq
690    *          an aligned peptide sequence
691    * @param col
692    *          an aligned column position (base 0)
693    * @param mappings
694    *          a set of codon mappings
695    * @return the bases of the mapped codon(s) in the cDNA dataset sequence(s),
696    *         or an empty list if none found
697    */
698   public static List<char[]> findCodonsFor(SequenceI seq, int col,
699           List<AlignedCodonFrame> mappings)
700   {
701     List<char[]> result = new ArrayList<>();
702     int dsPos = seq.findPosition(col);
703     for (AlignedCodonFrame mapping : mappings)
704     {
705       if (mapping.involvesSequence(seq))
706       {
707         List<char[]> codons = mapping
708                 .getMappedCodons(seq.getDatasetSequence(), dsPos);
709         if (codons != null)
710         {
711           result.addAll(codons);
712         }
713       }
714     }
715     return result;
716   }
717
718   /**
719    * Converts a series of [start, end] range pairs into an array of individual
720    * positions. This also caters for 'reverse strand' (start > end) cases.
721    * 
722    * @param ranges
723    * @return
724    */
725   public static int[] flattenRanges(int[] ranges)
726   {
727     /*
728      * Count how many positions altogether
729      */
730     int count = 0;
731     for (int i = 0; i < ranges.length - 1; i += 2)
732     {
733       count += Math.abs(ranges[i + 1] - ranges[i]) + 1;
734     }
735
736     int[] result = new int[count];
737     int k = 0;
738     for (int i = 0; i < ranges.length - 1; i += 2)
739     {
740       int from = ranges[i];
741       final int to = ranges[i + 1];
742       int step = from <= to ? 1 : -1;
743       do
744       {
745         result[k++] = from;
746         from += step;
747       } while (from != to + step);
748     }
749     return result;
750   }
751
752   /**
753    * Returns a list of any mappings that are from or to the given (aligned or
754    * dataset) sequence.
755    * 
756    * @param sequence
757    * @param mappings
758    * @return
759    */
760   public static List<AlignedCodonFrame> findMappingsForSequence(
761           SequenceI sequence, List<AlignedCodonFrame> mappings)
762   {
763     return findMappingsForSequenceAndOthers(sequence, mappings, null);
764   }
765
766   /**
767    * Returns a list of any mappings that are from or to the given (aligned or
768    * dataset) sequence, optionally limited to mappings involving one of a given
769    * list of sequences.
770    * 
771    * @param sequence
772    * @param mappings
773    * @param filterList
774    * @return
775    */
776   public static List<AlignedCodonFrame> findMappingsForSequenceAndOthers(
777           SequenceI sequence, List<AlignedCodonFrame> mappings,
778           List<SequenceI> filterList)
779   {
780     List<AlignedCodonFrame> result = new ArrayList<>();
781     if (sequence == null || mappings == null)
782     {
783       return result;
784     }
785     for (AlignedCodonFrame mapping : mappings)
786     {
787       if (mapping.involvesSequence(sequence))
788       {
789         if (filterList != null)
790         {
791           for (SequenceI otherseq : filterList)
792           {
793             SequenceI otherDataset = otherseq.getDatasetSequence();
794             if (otherseq == sequence
795                     || otherseq == sequence.getDatasetSequence()
796                     || (otherDataset != null && (otherDataset == sequence
797                             || otherDataset == sequence
798                                     .getDatasetSequence())))
799             {
800               // skip sequences in subset which directly relate to sequence
801               continue;
802             }
803             if (mapping.involvesSequence(otherseq))
804             {
805               // selected a mapping contained in subselect alignment
806               result.add(mapping);
807               break;
808             }
809           }
810         }
811         else
812         {
813           result.add(mapping);
814         }
815       }
816     }
817     return result;
818   }
819
820   /**
821    * Returns the total length of the supplied ranges, which may be as single
822    * [start, end] or multiple [start, end, start, end ...]
823    * 
824    * @param ranges
825    * @return
826    */
827   public static int getLength(List<int[]> ranges)
828   {
829     if (ranges == null)
830     {
831       return 0;
832     }
833     int length = 0;
834     for (int[] range : ranges)
835     {
836       if (range.length % 2 != 0)
837       {
838         Cache.log.error(
839                 "Error unbalance start/end ranges: " + ranges.toString());
840         return 0;
841       }
842       for (int i = 0; i < range.length - 1; i += 2)
843       {
844         length += Math.abs(range[i + 1] - range[i]) + 1;
845       }
846     }
847     return length;
848   }
849
850   /**
851    * Answers true if any range includes the given value
852    * 
853    * @param ranges
854    * @param value
855    * @return
856    */
857   public static boolean contains(List<int[]> ranges, int value)
858   {
859     if (ranges == null)
860     {
861       return false;
862     }
863     for (int[] range : ranges)
864     {
865       if (range[1] >= range[0] && value >= range[0] && value <= range[1])
866       {
867         /*
868          * value within ascending range
869          */
870         return true;
871       }
872       if (range[1] < range[0] && value <= range[0] && value >= range[1])
873       {
874         /*
875          * value within descending range
876          */
877         return true;
878       }
879     }
880     return false;
881   }
882
883   /**
884    * Removes a specified number of positions from the start of a ranges list.
885    * For example, could be used to adjust cds ranges to allow for an incomplete
886    * start codon. Subranges are removed completely, or their start positions
887    * adjusted, until the required number of positions has been removed from the
888    * range. Reverse strand ranges are supported. The input array is not
889    * modified.
890    * 
891    * @param removeCount
892    * @param ranges
893    *          an array of [start, end, start, end...] positions
894    * @return a new array with the first removeCount positions removed
895    */
896   public static int[] removeStartPositions(int removeCount,
897           final int[] ranges)
898   {
899     if (removeCount <= 0)
900     {
901       return ranges;
902     }
903
904     int[] copy = Arrays.copyOf(ranges, ranges.length);
905     int sxpos = -1;
906     int cdspos = 0;
907     for (int x = 0; x < copy.length && sxpos == -1; x += 2)
908     {
909       cdspos += Math.abs(copy[x + 1] - copy[x]) + 1;
910       if (removeCount < cdspos)
911       {
912         /*
913          * we have removed enough, time to finish
914          */
915         sxpos = x;
916
917         /*
918          * increment start of first exon, or decrement if reverse strand
919          */
920         if (copy[x] <= copy[x + 1])
921         {
922           copy[x] = copy[x + 1] - cdspos + removeCount + 1;
923         }
924         else
925         {
926           copy[x] = copy[x + 1] + cdspos - removeCount - 1;
927         }
928         break;
929       }
930     }
931
932     if (sxpos > 0)
933     {
934       /*
935        * we dropped at least one entire sub-range - compact the array
936        */
937       int[] nxon = new int[copy.length - sxpos];
938       System.arraycopy(copy, sxpos, nxon, 0, copy.length - sxpos);
939       return nxon;
940     }
941     return copy;
942   }
943
944   /**
945    * Answers true if range's start-end positions include those of queryRange,
946    * where either range might be in reverse direction, else false
947    * 
948    * @param range
949    *          a start-end range
950    * @param queryRange
951    *          a candidate subrange of range (start2-end2)
952    * @return
953    */
954   public static boolean rangeContains(int[] range, int[] queryRange)
955   {
956     if (range == null || queryRange == null || range.length != 2
957             || queryRange.length != 2)
958     {
959       /*
960        * invalid arguments
961        */
962       return false;
963     }
964
965     int min = Math.min(range[0], range[1]);
966     int max = Math.max(range[0], range[1]);
967
968     return (min <= queryRange[0] && max >= queryRange[0]
969             && min <= queryRange[1] && max >= queryRange[1]);
970   }
971
972   /**
973    * Removes the specified number of positions from the given ranges. Provided
974    * to allow a stop codon to be stripped from a CDS sequence so that it matches
975    * the peptide translation length.
976    * 
977    * @param positions
978    * @param ranges
979    *          a list of (single) [start, end] ranges
980    * @return
981    */
982   public static void removeEndPositions(int positions, List<int[]> ranges)
983   {
984     int toRemove = positions;
985     Iterator<int[]> it = new ReverseListIterator<>(ranges);
986     while (toRemove > 0)
987     {
988       int[] endRange = it.next();
989       if (endRange.length != 2)
990       {
991         /*
992          * not coded for [start1, end1, start2, end2, ...]
993          */
994         Cache.log.error(
995                 "MappingUtils.removeEndPositions doesn't handle multiple  ranges");
996         return;
997       }
998
999       int length = endRange[1] - endRange[0] + 1;
1000       if (length <= 0)
1001       {
1002         /*
1003          * not coded for a reverse strand range (end < start)
1004          */
1005         Cache.log.error(
1006                 "MappingUtils.removeEndPositions doesn't handle reverse strand");
1007         return;
1008       }
1009       if (length > toRemove)
1010       {
1011         endRange[1] -= toRemove;
1012         toRemove = 0;
1013       }
1014       else
1015       {
1016         toRemove -= length;
1017         it.remove();
1018       }
1019     }
1020   }
1021
1022   /**
1023    * Converts a list of {@code start-end} ranges to a single array of
1024    * {@code start1, end1, start2, ... } ranges
1025    * 
1026    * @param ranges
1027    * @return
1028    */
1029   public static int[] rangeListToArray(List<int[]> ranges)
1030   {
1031     int rangeCount = ranges.size();
1032     int[] result = new int[rangeCount * 2];
1033     int j = 0;
1034     for (int i = 0; i < rangeCount; i++)
1035     {
1036       int[] range = ranges.get(i);
1037       result[j++] = range[0];
1038       result[j++] = range[1];
1039     }
1040     return result;
1041   }
1042
1043   /*
1044    * Returns the maximal start-end positions in the given (ordered) list of
1045    * ranges which is overlapped by the given begin-end range, or null if there
1046    * is no overlap.
1047    * 
1048    * <pre>
1049    * Examples:
1050    *   if ranges is {[4, 8], [10, 12], [16, 19]}
1051    * then
1052    *   findOverlap(ranges, 1, 20) == [4, 19]
1053    *   findOverlap(ranges, 6, 11) == [6, 11]
1054    *   findOverlap(ranges, 9, 15) == [10, 12]
1055    *   findOverlap(ranges, 13, 15) == null
1056    * </pre>
1057    * 
1058    * @param ranges
1059    * @param begin
1060    * @param end
1061    * @return
1062    */
1063   protected static int[] findOverlap(List<int[]> ranges, final int begin,
1064           final int end)
1065   {
1066     boolean foundStart = false;
1067     int from = 0;
1068     int to = 0;
1069
1070     /*
1071      * traverse the ranges to find the first position (if any) >= begin,
1072      * and the last position (if any) <= end
1073      */
1074     for (int[] range : ranges)
1075     {
1076       if (!foundStart)
1077       {
1078         if (range[0] >= begin)
1079         {
1080           /*
1081            * first range that starts with, or follows, begin
1082            */
1083           foundStart = true;
1084           from = Math.max(range[0], begin);
1085         }
1086         else if (range[1] >= begin)
1087         {
1088           /*
1089            * first range that contains begin
1090            */
1091           foundStart = true;
1092           from = begin;
1093         }
1094       }
1095
1096       if (range[0] <= end)
1097       {
1098         to = Math.min(end, range[1]);
1099       }
1100     }
1101
1102     return foundStart && to >= from ? new int[] { from, to } : null;
1103   }
1104 }