scripts/mir-setup/README: update with link to new doc on wiki

This was previously committed to CVS but git-cvsimport
wouldn't pick up that commit for some reason, so I've
manually committed it to git.

Rename mir-prepare, mir-setup, mir-choose-java to mir-*.lenny.
Copied them to mir-*.squeeze, and updated them to
work with Debian Squeeze.

Explicitly mark perms.sh-dist as a bash script.

perms.sh-dist has bashisms, so would fail on a system (eg some recent
Debian systems) with dash as /bin/sh.

mir-prepare: explicitly list conf files to copy, skipping CVS and tomcat4/

 * scripts/mir-setup/mir-setup:
   + When getting DB name/user/pass, use shell variables rather than
     hardcoded uk.
   + Create $USER and $TOMCATGROUP, add $USER and $TOMCATUSER to
     $TOMCATGROUP.
   + if $MIRGITROOT or $SITEGITROOT are defined, checkout mir or
     site from git instead of CVS.
   + Download cities.inc.
   + Configure temporary SSL snake-oil cert.
   + Create links in $INSTALLDIR/mir/lib to needed jar files:
     * servlet-2.3: link to /usr/share/java
     * rt: link to /etc/mir-setup/lib. This is so mir-choose-java
       can change that link rather than making changes in several places.
   + Pass TOMCAT_HOME to ant.
   + Fixup jar links in mir deployment to match config above.
   + Create empty abuse.properties.
   + Restart tomcat.
 * README: updated to mention mir-prepare and conf/tomcat4.

 * scripts/mir-setup/conf: updated to use tomcat5.5
 * tomcat4 versions of config files are in scripts/mir-setup/conf/tomcat4
 * other changes to site-httpd.conf:
   + use log format 'anon' (defined in /etc/apache2/conf.d/mir-anon-access-log,
     which is created by mir-prepare)
   + Include /etc/apache2/mir-sites/ssl-dedicated/$SITE.conf
   + add $MIRRORFQDN as a ServerAlias
 * site-ssl-dedicated-httpd.conf: add $MIRRORFQDN and $ALIAS as ServerAliases

scripts/mir-setup: new scripts:
   mir-prepare: prepare a fresh (debian) machine to run mir
   mir-choose-java: configure java implementation for mir to use
   mir-empty-db: empty a mir db to prepare for a database restore
   strip-ips-from-apache-error-log: anonymise apache error logs, installed
                                    by mir-prepare

MirBasicChildArticlePostingHandler: fixed build failure

we check now if the parent article is allowed for publication while adding a child to it

fixed a glitch

*** empty log message ***

support for CAPTCHAs
replaced gnu regexp with oro which is much faster

user agent filters now use sub strings instead of regular expressions

fixed a filter updating bug

user agent filter now works with substrings

spurious > removed

cosmetic changes to the article list page

description is now shown in the article list if the title isn't available

language now also visible on the content list page

adminster operation configuration now supports escape characters

very basic support for localized add/edit article pages

fixing scaling images -> nullpointer, patch by yossarian

fixed a bug causing nullpointer exceptions in some image files (i.e. the ones
that do not need to be scaled)

java 1.4 compatible

Use jakarta feedparser to parse RSS2 files.

Theoretically this could be use to parse everything, including Atom.

file RSS2Reader.java was added on branch MIR_1_1 on 2007-04-19 18:08:11 +0000

file saxpath-1.0-FCS.jar was added on branch MIR_1_1 on 2007-04-19 18:08:11 +0000

file jdom-b9.jar was added on branch MIR_1_1 on 2007-04-19 18:08:11 +0000

file jaxen-1.0-FCS-full.jar was added on branch MIR_1_1 on 2007-04-19 18:08:11 +0000

file commons-feedparser-0.5-SNAPSHOT.jar was added on branch MIR_1_1 on 2007-04-19 18:08:11 +0000

values for web bugs squasher

kill web bugs!

config attribute filters via config.propertieis./

forgot one </if>

fix for: if more than one mediatype attached to a comment, the medias are shown multiple times

Removing the config value for whether images get scaled, as this is no longer necessary - the class mircoders.media.MediaHandlerImagesExternScaling does scaling if it is selected as the image media handler class in the site admin;  no image scaling occurs if mircoders.media.MediaHandlerImagesExtern is selected instead.

Adding class MediaHandlerImagesExternScaling to take care of scaling images (this class can replace MediaHandlerImagesExtern, which doesn't scale images, if the site admins want image scaling).

better logging for the filter engine

whoops

added:
* url blacklist filter
* delete operation for comments / articles

I've split out the image scaling code into a separate class and returned this class to its original state - i.e. Zapata's code from revision 1.12.2.11

The only thing that should be different is that I've also added the

reportChange() lines to the bottom of the produce() method so that the ChangeTracker gets change reports.

More time-handling tweaks in update.pl

Refactored the class with a whole lot of extract method to make it easier to understand.

Stream fetched files to disk rather than reading them
into memory.

Use Date::Calc for date math
Remove Date::Parse and Date::Format which conflict with HTTP::Date
Don't fail if some changes files don't exist

update.pl:
  Reject paths containing ".." for security
  Remember where we'd got to within a day's changes
  Last-Modified and If-Modified-Since handling

Videos don't actually do a "produce()" method.

So in order to catch them we're putting in a ChangeTracker notification when file uploads are stored.  This means that all media types descending from MediaHandlerGeneric are going to notify twice.  This should be looked at. I'm doing this on the advice of Zapata though so it must be ok.

Fixes to update.pl and tidying up

Removed unused imports

Removing ChangeTracker notification from MediaGeneratingProducerNode as these notifications are now happening in each Media class.

PUtting the ChangeTracker stuff back into GeneratingProducerNode, it does in fact need to be there.

Took the ChangeTracker reporting out of GeneratingProducerNode and put it into the Media subclasses.

The following classes now report changes to themselves (and icons if there are icons generated for that media type):

MediaHandlerImages
MediaHandlerImagesExtern
MediaHandlerMp3
MediaHandlerOgg
MediaHandlerRealAudio
MediaHandlerRealVideo

The reportChange protected method is in AbstractMediaHandler so that this method is available to all Media subclasses.

Remove temp files that got committed along with mirror-scripts

Added icon changes code to MediaGeneratingProducerNode

Updated MediaGeneratingProducerNode to use the baseStoragePath and publish_path

further fixes to the change reporting framework

Rsync replacement scripts, uses Perl to pull changed files to mirrors.  The changes files are written out be Mir's ChangeTracker which is currently being worked on.

Some of this will need to be trimmed out.

change report is now appended instead of overwritten and new lines are added after each line

Switched to just using "destinationIdentifier" for the output path for the ChangeTracker.  This should work because it's super-simple, but it'll have to be changed later probably to a different path.  We're just trying to get something working at this point though.

whoops

whoops

Changed FileDateSettingProducerNode to call changeTracker with a modification type on the file's absolute path

Clarified a commented TODO a bit.

DirCopyingProducerNode is now alerting the ChangeTracker when a directory gets copied.

addition of the Change Reporting producer node

Added a call to ChangeTracker to FileDeletingProducerNode notifying it of the absolute path to the deleted file and a change type of delete

Changed MediaGeneratorProducerNode to call the ChangeTracker to notify it of a modification to the file.

The path used is the database field publish_path

GeneratingProducerNode now alerts the ChangeTracker whenever a file change is made during a producer run.

some javadoc additions some early work on the new producer node to report changes and a compilation problem in ServletModuleFileEdit related to the change reporter has been fixed

updates on the change tracker

Copy mir-setup to 1.1 branch

another tiny fix

small fixes

reverting unnedeed change i classpath

removing wrong entry bout source dir.

small fix

Use '/usr/share/java' to construct the classpath because some OS vendors place java libs inthat dir instead of forcing everyone use te CLASSPATH environment variable

honour user CLASSPATH environment variable

fixing typos

small fix to the binary distribution ant task

script to fix permissions of files and dirs in the binary distribuition

ant build file for the binary distribuition

changed the "source-distribution" target to produce a tar.gz instead of a zip file.
created a new target called "full-distribution" that will build mir, build the source distribution tarball, copy the source distribution to "bin/mir/WEB-INF" and create a tarball of "bin/mir" called "mir-${version}.tar.gz" in "dist"

Made the following variables (which deal with the new image resizing code) local rather than instance:

private String imagesOriginalDir;
private String imagesOriginalDirRelPath;
private String imageOriginalFilePath;
private String imageOriginalRelPath;

Also took out the reference to StreamCopier.copyFile as there was already something in Mir that was designed for this purpose: FileRoutines.copyFile

Cleaned up source formatting somewhat to use 2 spaces instead of tabs.

Using Integer.toString(foo) rather than new Integer(foo).toString() on Zapata's advice.

Changes which allow images to be resized by Mir and saved in the filesystem if an image upload exceeds a certain size (defined in config.properties).

In order to save the location of the original (unresized) image to the database, a field needs to be added to the "images" table:

original_file_path - varchar(255)

Image resizing should be considered highly experimental.  It is turned off by default.

whoops 3

whoops 2

whoops

reintroduced StringUtil.regexpReplace
updated license javadoc

added better support for article urls in PDF files

lockfile added

introduction of the change engine

replaced some gnu RE's with the much faster jakarta ORO

tiny fixes here and there

removed some system.out logging

added a posting size anti-abuse filter

bug fix take 2

bug fix for the bug fix.

bug fix for dates

changed the behaviour of entity uploaded media so that articles/comments linking to the media will no longer be marked unproduced