rebuilding head
[mir.git] / source / mircoders / localizer / basic / MirBasicProducerAssistantLocalizer.java
index f3a8eaa..f67233b 100755 (executable)
-/*\r
- * Copyright (C) 2001, 2002 The Mir-coders group\r
- *\r
- * This file is part of Mir.\r
- *\r
- * Mir is free software; you can redistribute it and/or modify\r
- * it under the terms of the GNU General Public License as published by\r
- * the Free Software Foundation; either version 2 of the License, or\r
- * (at your option) any later version.\r
- *\r
- * Mir is distributed in the hope that it will be useful,\r
- * but WITHOUT ANY WARRANTY; without even the implied warranty of\r
- * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\r
- * GNU General Public License for more details.\r
- *\r
- * You should have received a copy of the GNU General Public License\r
- * along with Mir; if not, write to the Free Software\r
- * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA\r
- *\r
- * In addition, as a special exception, The Mir-coders gives permission to link\r
- * the code of this program with  any library licensed under the Apache Software License,\r
- * The Sun (tm) Java Advanced Imaging library (JAI), The Sun JIMI library\r
- * (or with modified versions of the above that use the same license as the above),\r
- * and distribute linked combinations including the two.  You must obey the\r
- * GNU General Public License in all respects for all of the code used other than\r
- * the above mentioned libraries.  If you modify this file, you may extend this\r
- * exception to your version of the file, but you are not obligated to do so.\r
- * If you do not wish to do so, delete this exception statement from your version.\r
- */\r
-package mircoders.localizer.basic;\r
-\r
-import java.util.GregorianCalendar;\r
-import java.util.HashMap;\r
-import java.util.Iterator;\r
-import java.util.Map;\r
-\r
-import mir.config.MirPropertiesConfiguration;\r
-import mir.entity.adapter.EntityAdapter;\r
-import mir.entity.adapter.EntityIteratorAdapter;\r
-import mir.log.LoggerWrapper;\r
-import mir.misc.StringUtil;\r
-import mir.util.GeneratorDateTimeFunctions;\r
-import mir.util.GeneratorExpressionFunctions;\r
-import mir.util.GeneratorFormatAdapters;\r
-import mir.util.GeneratorHTMLFunctions;\r
-import mir.util.GeneratorIntegerFunctions;\r
-import mir.util.GeneratorListFunctions;\r
-import mir.util.GeneratorRegularExpressionFunctions;\r
-import mir.util.GeneratorStringFunctions;\r
-import mircoders.global.MirGlobal;\r
-import mircoders.localizer.MirLocalizerExc;\r
-import mircoders.localizer.MirLocalizerFailure;\r
-import mircoders.localizer.MirProducerAssistantLocalizer;\r
-\r
-public class MirBasicProducerAssistantLocalizer implements MirProducerAssistantLocalizer {\r
-  protected LoggerWrapper logger;\r
-\r
-  public void initializeGenerationValueSet(Map aValueSet) throws MirLocalizerExc, MirLocalizerFailure  {\r
-    try {\r
-      Iterator i;\r
-\r
-      Map configMap = new HashMap();\r
-      Map utilityMap = new HashMap();\r
-\r
-      logger = new LoggerWrapper("Localizer.ProducerAssistant");\r
-\r
-// obsolete:\r
-      configMap.put("producerDocRoot", MirGlobal.config().getString("Producer.DocRoot"));\r
-      configMap.put("storageRoot", MirGlobal.config().getString("Producer.StorageRoot"));\r
-      configMap.put("productionHost", MirGlobal.config().getString("Producer.ProductionHost"));\r
-      configMap.put("openAction", MirGlobal.config().getString("Producer.OpenAction"));\r
-      configMap.put("docRoot", MirGlobal.config().getString("RootUri"));\r
-      configMap.put("actionRoot", MirGlobal.config().getString("RootUri") + "/servlet/Mir");\r
-      configMap.put("now", new GeneratorFormatAdapters.DateFormatAdapter(new GregorianCalendar().getTime(), MirGlobal.config().getString("Mir.DefaultTimezone")));\r
-      configMap.put("videoHost", MirGlobal.config().getString("Producer.Video.Host"));\r
-      configMap.put("audioHost", MirGlobal.config().getString("Producer.Audio.Host"));\r
-      configMap.put("imageHost", MirGlobal.config().getString("Producer.Image.Host"));\r
-      configMap.put("imagePath", MirGlobal.config().getString("Producer.Image.Path"));\r
-      configMap.put("mirVersion", MirGlobal.config().getString("Mir.Version"));\r
-      configMap.put("defEncoding", MirGlobal.config().getString("Mir.DefaultEncoding"));\r
-\r
-// "new":\r
-      configMap.putAll(MirPropertiesConfiguration.instance().allSettings());\r
-\r
-      utilityMap.put("compressWhitespace", new freemarker.template.utility.CompressWhitespace());\r
-      utilityMap.put("encodeHTML", new GeneratorHTMLFunctions.encodeHTMLGeneratorFunction());\r
-      utilityMap.put("encodeXML", new GeneratorHTMLFunctions.encodeXMLGeneratorFunction());\r
-      utilityMap.put("encodeURI", new GeneratorHTMLFunctions.encodeURIGeneratorFunction());\r
-      utilityMap.put("subString", new GeneratorStringFunctions.subStringFunction());\r
-      utilityMap.put("subList", new GeneratorListFunctions.subListFunction());\r
-      utilityMap.put("isOdd", new GeneratorIntegerFunctions.isOddFunction());\r
-      utilityMap.put("increment", new GeneratorIntegerFunctions.incrementFunction());\r
-      utilityMap.put("evaluate", new GeneratorExpressionFunctions.evaluateExpressionFunction());\r
-      utilityMap.put("constructString", new GeneratorStringFunctions.constructStructuredStringFunction());\r
-      utilityMap.put("escapeJDBCString", new GeneratorStringFunctions.jdbcStringEscapeFunction());\r
-      utilityMap.put("regexpreplace", new GeneratorRegularExpressionFunctions.regularExpressionReplaceFunction());\r
-      utilityMap.put("datetime", new GeneratorDateTimeFunctions.DateTimeFunctions(\r
-          MirPropertiesConfiguration.instance().getString("Mir.DefaultTimezone")));\r
-\r
-      aValueSet.put("config", configMap);\r
-      aValueSet.put("utility", utilityMap);\r
-\r
-      aValueSet.put("languages",\r
-        new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "language"));\r
-\r
-      aValueSet.put("topics",\r
-        new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "topic"));\r
-\r
-      Map articleTypeMap = new HashMap();\r
-      articleTypeMap.put("openposting", "0");\r
-      articleTypeMap.put("newswire", "1");\r
-      articleTypeMap.put("feature", "2");\r
-      articleTypeMap.put("topicspecial", "3");\r
-      articleTypeMap.put("startspecial", "4");\r
-\r
-      i = new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "articleType");\r
-      while (i.hasNext()) {\r
-        EntityAdapter articleType = (EntityAdapter) i.next();\r
-\r
-        articleTypeMap.put(articleType.get("name"), articleType.get("id"));\r
-      }\r
-      aValueSet.put("articletype", articleTypeMap);\r
-\r
-      Map commentStatusMap = new HashMap();\r
-      i = new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "commentStatus");\r
-      while (i.hasNext()) {\r
-        EntityAdapter commentStatus = (EntityAdapter) i.next();\r
-\r
-        commentStatusMap.put(commentStatus.get("name"), commentStatus.get("id"));\r
-      }\r
-      aValueSet.put("commentstatus", commentStatusMap);\r
-    }\r
-    catch (Throwable t) {\r
-      logger.error("initializeGenerationValueSet: Exception while collecting comment statuses" + t.getMessage());\r
-      throw new RuntimeException(t.getMessage());\r
-    }\r
-\r
-  };\r
-\r
-  public String filterNonHTMLText(String aText) {\r
-\r
-    logger.debug("about to filter non HTML Text of length " + aText.length());\r
-    try {\r
-      String result =\r
-          StringUtil.createHTML(\r
-          StringUtil.removeHTMLTags(aText),\r
-          MirGlobal.config().getString("Producer.ImageRoot"),\r
-          MirGlobal.config().getString("Producer.MailLinkName"),\r
-          MirGlobal.config().getString("Producer.ExtLinkName"),\r
-          MirGlobal.config().getString("Producer.IntLinkName")\r
-          );\r
-      logger.debug("done filtering non-HTML text ");\r
-      return result;\r
-    }\r
-    catch (Throwable t) {\r
-      logger.error("error while filtering non-HTML text: " + t.toString());\r
-\r
-      throw new RuntimeException(t.toString());\r
-    }\r
-  }\r
-\r
-  public String filterHTMLText(String aText) {\r
-    return StringUtil.deleteForbiddenTags(aText);\r
-  }\r
-}\r
+/*
+ * Copyright (C) 2001, 2002 The Mir-coders group
+ *
+ * This file is part of Mir.
+ *
+ * Mir is free software; you can redistribute it and/or modify
+ * it under the terms of the GNU General Public License as published by
+ * the Free Software Foundation; either version 2 of the License, or
+ * (at your option) any later version.
+ *
+ * Mir is distributed in the hope that it will be useful,
+ * but WITHOUT ANY WARRANTY; without even the implied warranty of
+ * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+ * GNU General Public License for more details.
+ *
+ * You should have received a copy of the GNU General Public License
+ * along with Mir; if not, write to the Free Software
+ * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
+ *
+ * In addition, as a special exception, The Mir-coders gives permission to link
+ * the code of this program with  any library licensed under the Apache Software License,
+ * The Sun (tm) Java Advanced Imaging library (JAI), The Sun JIMI library
+ * (or with modified versions of the above that use the same license as the above),
+ * and distribute linked combinations including the two.  You must obey the
+ * GNU General Public License in all respects for all of the code used other than
+ * the above mentioned libraries.  If you modify this file, you may extend this
+ * exception to your version of the file, but you are not obligated to do so.
+ * If you do not wish to do so, delete this exception statement from your version.
+ */
+package mircoders.localizer.basic;
+
+import mir.config.MirPropertiesConfiguration;
+import mir.entity.adapter.EntityAdapter;
+import mir.entity.adapter.EntityIteratorAdapter;
+import mir.generator.Generator;
+import mir.generator.GeneratorExc;
+import mir.generator.GeneratorFailure;
+import mir.log.LoggerWrapper;
+import mir.misc.StringUtil;
+import mir.util.*;
+import mir.util.generator.ReflectionGeneratorFunctionsAdapter;
+import mircoders.global.MirGlobal;
+import mircoders.localizer.MirLocalizerExc;
+import mircoders.localizer.MirLocalizerFailure;
+import mircoders.localizer.MirProducerAssistantLocalizer;
+import org.w3c.dom.Document;
+import org.w3c.dom.NamedNodeMap;
+import org.w3c.dom.Node;
+import org.w3c.dom.NodeList;
+import org.w3c.tidy.Tidy;
+import org.w3c.tidy.Configuration;
+
+import java.io.ByteArrayInputStream;
+import java.io.IOException;
+import java.io.StringWriter;
+import java.util.GregorianCalendar;
+import java.util.HashMap;
+import java.util.Iterator;
+import java.util.List;
+import java.util.Map;
+
+public class MirBasicProducerAssistantLocalizer implements MirProducerAssistantLocalizer {
+  protected LoggerWrapper logger;
+
+  public void initializeGenerationValueSet(Map aValueSet) throws MirLocalizerExc, MirLocalizerFailure  {
+    try {
+      Iterator i;
+
+      Map configMap = new HashMap();
+
+      logger = new LoggerWrapper("Localizer.ProducerAssistant");
+
+// obsolete:
+      configMap.put("producerDocRoot", MirGlobal.config().getString("Producer.DocRoot"));
+      configMap.put("storageRoot", MirGlobal.config().getString("Producer.StorageRoot"));
+      configMap.put("productionHost", MirGlobal.config().getString("Producer.ProductionHost"));
+      configMap.put("openAction", MirGlobal.config().getString("Producer.OpenAction"));
+      configMap.put("docRoot", MirGlobal.config().getString("RootUri"));
+      configMap.put("actionRoot", MirGlobal.config().getString("RootUri") + "/servlet/Mir");
+      configMap.put("now", new GeneratorFormatAdapters.DateFormatAdapter(new GregorianCalendar().getTime(), MirGlobal.config().getString("Mir.DefaultTimezone")));
+      configMap.put("videoHost", MirGlobal.config().getString("Producer.Video.Host"));
+      configMap.put("audioHost", MirGlobal.config().getString("Producer.Audio.Host"));
+      configMap.put("imageHost", MirGlobal.config().getString("Producer.Image.Host"));
+      configMap.put("imagePath", MirGlobal.config().getString("Producer.Image.Path"));
+      configMap.put("mirVersion", MirGlobal.config().getString("Mir.Version"));
+      configMap.put("defEncoding", MirGlobal.config().getString("Mir.DefaultEncoding"));
+
+// "new":
+      configMap.putAll(MirPropertiesConfiguration.instance().allSettings());
+
+      aValueSet.put("config", configMap);
+
+      aValueSet.put("utility", new Utility()); 
+
+      aValueSet.put("languages",
+        new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "language"));
+
+      aValueSet.put("topics",
+        new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "topic"));
+
+      Map articleTypeMap = new HashMap();
+      articleTypeMap.put("openposting", "0");
+      articleTypeMap.put("newswire", "1");
+      articleTypeMap.put("feature", "2");
+      articleTypeMap.put("topicspecial", "3");
+      articleTypeMap.put("startspecial", "4");
+
+      i = new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "articleType");
+      while (i.hasNext()) {
+        EntityAdapter articleType = (EntityAdapter) i.next();
+
+        articleTypeMap.put(articleType.get("name"), articleType.get("id"));
+      }
+      aValueSet.put("articletype", articleTypeMap);
+
+      Map commentStatusMap = new HashMap();
+      i = new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "commentStatus");
+      while (i.hasNext()) {
+        EntityAdapter commentStatus = (EntityAdapter) i.next();
+
+        commentStatusMap.put(commentStatus.get("name"), commentStatus.get("id"));
+      }
+      aValueSet.put("commentstatus", commentStatusMap);
+      aValueSet.put("languageCodeToId", new getLanguageIdFunction());
+    }
+    catch (Throwable t) {
+      logger.error("initializeGenerationValueSet: Exception while collecting comment statuses" + t.getMessage());
+      throw new RuntimeException(t.getMessage());
+    }
+
+  };
+  public static class getLanguageIdFunction implements Generator.Function {
+    private Map languageCodeToId;
+    private String otherLanguageId;
+    private LoggerWrapper logger = new LoggerWrapper("Localizer.Earth.getLanguageIdFunction");
+
+    public getLanguageIdFunction() throws MirLocalizerFailure {
+      try {
+        otherLanguageId = "";
+        languageCodeToId = new HashMap();
+
+        Iterator i = new EntityIteratorAdapter("", "", 20, MirGlobal.localizer().dataModel().adapterModel(), "language");
+        while (i.hasNext()) {
+          EntityAdapter language = (EntityAdapter) i.next();
+          if (language.get("code").equals("ot"))
+            otherLanguageId = (String) language.get("id");
+
+          languageCodeToId.put(language.get("code"), language.get("id"));
+        }
+      }
+      catch (Throwable t) {
+        logger.error(t.toString());
+
+        throw new MirLocalizerFailure(t);
+      }
+    }
+
+    public Object perform(List aParameters) throws GeneratorExc, GeneratorFailure {
+      try {
+        if (aParameters.size() != 1)
+          throw new GeneratorExc("getLanguageIdFunction: 1 parameter expected: language-code");
+
+        String result = (String) languageCodeToId.get(aParameters.get(0));
+        if (result == null)
+          result = otherLanguageId;
+
+        return result;
+      }
+      catch (GeneratorExc e) {
+        throw e;
+      }
+      catch (Throwable t) {
+        throw new GeneratorFailure("getLanguageIdFunction: " + t.getMessage(), t);
+      }
+    };
+  }
+
+
+  public String filterNonHTMLText(String aText) {
+
+    logger.debug("about to filter non HTML Text of length " + aText.length());
+    try {
+      String result =
+          StringUtil.createHTML(
+          StringUtil.removeHTMLTags(aText),
+          MirGlobal.config().getString("Producer.ImageRoot"),
+          MirGlobal.config().getString("Producer.MailLinkName"),
+          MirGlobal.config().getString("Producer.ExtLinkName"),
+          MirGlobal.config().getString("Producer.IntLinkName")
+          );
+      logger.debug("done filtering non-HTML text ");
+      return result;
+    }
+    catch (Throwable t) {
+      logger.error("error while filtering non-HTML text: " + t.toString());
+
+      throw new RuntimeException(t.toString());
+    }
+  }
+  public String filterHTMLText(String aText) {
+    try {
+      StringWriter out = new StringWriter();
+      Tidy tidy = new Tidy();
+      ByteArrayInputStream in = new ByteArrayInputStream(aText.getBytes("UTF8"));
+      tidy.setMakeClean(true);
+      tidy.setCharEncoding(Configuration.UTF8);
+      print(tidy.parseDOM(in, null), out);
+      return out.toString();
+    } catch (IOException e) {
+      return e.getMessage();
+    }
+  }
+
+  private boolean checkAttr(String attrName) {
+    if (attrName.equals("onLoad") || attrName.equals("onClick") || attrName.equals("onFocus") || attrName.equals("onBlur") || attrName.equals("onMouseOver") || attrName.equals("onMouseOut") || attrName.equals("style") || attrName.equals("STYLE") || attrName.equals("height") || attrName.equals("width") || attrName.equals("HEIGHT") || attrName.equals("WIDTH"))
+      return false;
+    else
+      return true;
+
+  }
+
+  private boolean checkNode(String nodeName) {
+    if (nodeName.equals("a") ||
+        nodeName.equals("img") ||
+        nodeName.equals("h1") ||
+        nodeName.equals("h2") ||
+        nodeName.equals("h3") ||
+        nodeName.equals("h4") ||
+        nodeName.equals("h5") ||
+        nodeName.equals("h6") ||
+        nodeName.equals("br") ||
+        nodeName.equals("form") ||
+        nodeName.equals("input") ||
+        nodeName.equals("hr") ||
+        nodeName.equals("strong") ||
+        nodeName.equals("font") ||
+        nodeName.equals("b") ||
+        nodeName.equals("i") ||
+        nodeName.equals("em") ||
+        nodeName.equals("p") ||
+        nodeName.equals("table") ||
+        nodeName.equals("tr") ||
+        nodeName.equals("td") ||
+        nodeName.equals("th") ||
+        nodeName.equals("ul") ||
+        nodeName.equals("ol") ||
+        nodeName.equals("li")
+    ) {
+      return true;
+    } else {
+
+      return false;
+    }
+  }
+
+  private void print(Node node, StringWriter out) throws IOException {
+    if (node == null) {
+      return;
+    }
+    int type = node.getNodeType();
+    boolean canOutput = checkNode(node.getNodeName());
+
+    switch (type) {
+
+      case Node.DOCUMENT_NODE:
+
+        print(((Document) node).getDocumentElement(), out);
+        out.flush();
+        break;
+
+      case Node.ELEMENT_NODE:
+        if (canOutput) {
+          out.write('<');
+
+          out.write(node.getNodeName());
+          NamedNodeMap attrs = node.getAttributes();
+
+          for (int i = 0; i < attrs.getLength(); i++) {
+            String attrName = attrs.item(i).getNodeName();
+            if (checkAttr(attrName)) {
+              out.write(' ');
+              out.write(attrs.item(i).getNodeName());
+              out.write("=\"");
+
+              out.write(attrs.item(i).getNodeValue());
+              out.write('"');
+            }
+          }
+
+          if (node.getChildNodes()==null || node.getChildNodes().getLength()==0) {
+            out.write("/");
+          }
+          out.write('>');
+        }
+        NodeList children = node.getChildNodes();
+        if (children != null) {
+          int len = children.getLength();
+          for (int i = 0; i < len; i++) {
+            print(children.item(i), out);
+          }
+        }
+        break;
+
+      case Node.TEXT_NODE:
+        out.write(node.getNodeValue());
+        break;
+
+    }
+
+    if (type == Node.ELEMENT_NODE && canOutput && node.getChildNodes()!=null && node.getChildNodes().getLength()>0) {
+      out.write("</");
+      out.write(node.getNodeName());
+      out.write('>');
+    }
+
+    out.flush();
+  }
+
+  public static class Utility extends ReflectionGeneratorFunctionsAdapter {
+    public Utility () {
+      super(new MirBasicUtilityFunctions());
+    }
+    public Object getDatetime() {
+      return new GeneratorDateTimeFunctions.DateTimeFunctions(
+        MirPropertiesConfiguration.instance().getString("Mir.DefaultTimezone"));
+    }
+
+    public Object getCompressWhitespace() {
+      return new freemarker.template.utility.CompressWhitespace();
+    }
+  }
+}