1 files changed, 82 insertions, 0 deletions
diff --git a/JLanguageTool/src/test/de/danielnaber/languagetool/tokenizers/da/DanishSRXSentenceTokenizerTest.java b/JLanguageTool/src/test/de/danielnaber/languagetool/tokenizers/da/DanishSRXSentenceTokenizerTest.java
new file mode 100644
index 0000000..3151ed7
--- /dev/null
+++ b/JLanguageTool/src/test/de/danielnaber/languagetool/tokenizers/da/DanishSRXSentenceTokenizerTest.java
@@ -0,0 +1,82 @@
+/* LanguageTool, a natural language style checker
+ * Copyright (C) 2010 Esben Aaberg
+ *
+ * This library is free software; you can redistribute it and/or
+ * modify it under the terms of the GNU Lesser General Public
+ * License as published by the Free Software Foundation; either
+ * version 2.1 of the License, or (at your option) any later version.
+ *
+ * This library is distributed in the hope that it will be useful,
+ * but WITHOUT ANY WARRANTY; without even the implied warranty of
+ * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
+ * Lesser General Public License for more details.
+ *
+ * You should have received a copy of the GNU Lesser General Public
+ * License along with this library; if not, write to the Free Software
+ * Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301
+ * USA
+ */
+package de.danielnaber.languagetool.tokenizers.da;
+
+import junit.framework.TestCase;
+import de.danielnaber.languagetool.TestTools;
+import de.danielnaber.languagetool.tokenizers.SRXSentenceTokenizer;
+
+/**
+ * @author Esben Aaberg
+ */
+public class DanishSRXSentenceTokenizerTest extends TestCase {
+
+  // accept \n as paragraph:
+  private final SRXSentenceTokenizer stokenizer = new SRXSentenceTokenizer("da");
+
+  public void setUp() {
+    stokenizer.setSingleLineBreaksMarksParagraph(true);
+  }
+
+  public void testTokenize() {
+    // NOTE: sentences here need to end with a space character so they
+    // have correct whitespace when appended:
+    testSplit(new String[] { "Dette er en sætning." });
+    testSplit(new String[] { "Dette er en sætning. ", "Her er den næste." });
+    testSplit(new String[] { "En sætning! ", "Yderlige en." });
+    testSplit(new String[] { "En sætning... ", "Yderlige en." });
+    testSplit(new String[] { "På hjemmesiden http://www.stavekontrolden.dk bygger vi stavekontrollen." });
+    testSplit(new String[] { "Den 31.12. går ikke!" });
+    testSplit(new String[] { "Den 3.12.2011 går ikke!" });
+    testSplit(new String[] { "I det 18. og tidlige 19. århundrede hentede amerikansk kunst det meste af sin inspiration fra Europa." });
+
+    testSplit(new String[] { "Hendes Majestæt Dronning Margrethe II (Margrethe Alexandrine Þórhildur Ingrid, Danmarks dronning) (født 16. april 1940 på Amalienborg Slot) er siden 14. januar 1972 Danmarks regent." });
+    testSplit(new String[] { "Hun har residensbolig i Christian IX's Palæ på Amalienborg Slot." });
+    testSplit(new String[] { "Tronfølgeren ledte herefter statsrådsmøderne under Kong Frederik 9.'s fravær." });
+    testSplit(new String[] { "Marie Hvidt, Frederik IV - En letsindig alvorsmand, Gads Forlag, 2004." });
+    testSplit(new String[] { "Da vi første gang besøgte Restaurant Chr. IV, var vi de eneste gæster." });
+
+    testSplit(new String[] { "I dag er det den 25.12.2010." });
+    testSplit(new String[] { "I dag er det d. 25.12.2010." });
+    testSplit(new String[] { "I dag er den 13. december." });
+    testSplit(new String[] { "Arrangementet starter ca. 17:30 i dag." });
+    testSplit(new String[] { "Arrangementet starter ca. 17:30." });
+    testSplit(new String[] { "Det er nævnt i punkt 3.6.4 Rygbelastende helkropsvibrationer." });
+
+    testSplit(new String[] { "Rent praktisk er det også lettest lige at mødes, så der kan udveksles nøgler og brugsanvisninger etc." });
+    testSplit(new String[] { "Andre partier incl. borgerlige partier har deres særlige problemer: nogle samarbejder med apartheidstyret i Sydafrika, med NATO-landet Tyrkiet etc., men det skal så sandelig ikke begrunde en SF-offensiv for et samarbejde med et parti." });
+
+    testSplit(new String[] { "Hvad nu,, den bliver også." });
+    testSplit(new String[] { "Det her er det.. ", "Og her fortsætter det." });
+
+    testSplit(new String[] { "Dette er en(!) sætning." });
+    testSplit(new String[] { "Dette er en(!!) sætning." });
+    testSplit(new String[] { "Dette er en(?) sætning." });
+    testSplit(new String[] { "Dette er en(??) sætning." });
+    testSplit(new String[] { "Dette er en(???) sætning." });
+    testSplit(new String[] { "Militær værnepligt blev indført (traktaten krævede, at den tyske hær ikke oversteg 100.000 mand)." });
+
+    testSplit(new String[] { "Siden illustrerede hun \"Historierne om Regnar Lodbrog\" 1979 og \"Bjarkemål\" 1982 samt Poul Ørums \"Komedie i Florens\" 1990." });
+  }
+
+  public void testSplit(String[] sentences) {
+    TestTools.testSplit(sentences, stokenizer);
+  }
+
+}