benchmarks: add benches for nitunit
authorAlexandre Terrasa <alexandre@moz-code.org>
Wed, 10 Jun 2015 05:43:56 +0000 (01:43 -0400)
committerAlexandre Terrasa <alexandre@moz-code.org>
Wed, 10 Jun 2015 22:22:35 +0000 (18:22 -0400)
Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

benchmarks/bench_nitunit.sh [new file with mode: 0755]

diff --git a/benchmarks/bench_nitunit.sh b/benchmarks/bench_nitunit.sh
new file mode 100755 (executable)
index 0000000..53eb38c
--- /dev/null
@@ -0,0 +1,103 @@
+#!/bin/bash
+# This file is part of NIT ( http://www.nitlanguage.org ).
+#
+# Licensed under the Apache License, Version 2.0 (the "License");
+# you may not use this file except in compliance with the License.
+# You may obtain a copy of the License at
+#
+#     http://www.apache.org/licenses/LICENSE-2.0
+#
+# Unless required by applicable law or agreed to in writing, software
+# distributed under the License is distributed on an "AS IS" BASIS,
+# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
+# See the License for the specific language governing permissions and
+# limitations under the License.
+
+# Bench nitdoc perfs.
+
+source ./bench_common.sh
+source ./bench_plot.sh
+
+## CONFIGURATION OPTIONS ##
+
+# Default number of times a command must be run with bench_command
+# Can be overrided with 'the option -n'
+count=3
+
+### HELPER FUNCTIONS ##
+
+function die()
+{
+       echo >&2 "error: $*"
+       died=1
+}
+
+## HANDLE OPTIONS ##
+
+function usage()
+{
+       echo "bench_nitunit [options]*"
+       echo "  -v: verbose mode"
+       echo "  -n count: number of execution for each bar (default: $count)"
+       echo "  --dry: Do not run the commands, just reuse the data and generate the graph"
+       echo "  -h: this help"
+}
+
+stop=false
+while [ "$stop" = false ]; do
+       case "$1" in
+               -v) verbose=true; shift;;
+               -h) usage; exit;;
+               -n) count="$2"; shift; shift;;
+               --dry) dry_run=true; shift;;
+               *) stop=true
+       esac
+done
+
+NOTSKIPED="$*"
+
+if test -z "$NOTSKIPED"; then
+       usage
+fi
+
+## COMPILE ENGINES
+current_branch=`git rev-parse --abbrev-ref HEAD`
+git checkout origin/master && ../bin/nitc ../src/nitunit.nit -o ./nitunit.orig
+git checkout $current_branch && ../bin/nitc ../src/nitunit.nit -o ./nitunit.new
+
+## EFFECTIVE BENCHS ##
+
+function bench_nitunit()
+{
+       basedir="./bench_nitunit.out/${name}.out"
+       tests=(../lib/standard/kernel.nit ../lib/standard/string.nit ../lib/standard/collection)
+       mkdir -p $basedir
+
+       prepare_res $basedir/orig.dat "origin/master" "nitunit.orig"
+       for path in ${tests[@]}; do
+               run_gen ./nitunit.orig $path
+       done
+
+       prepare_res $basedir/new.dat "HEAD" "nitunit.new"
+       for path in ${tests[@]}; do
+               run_gen ./nitunit.new $path
+       done
+
+       plot $basedir/bench_nitunit.gnu
+}
+
+function run_gen()
+{
+       bin="$1"
+       path="$2"
+       name=`basename $path .nit`
+       bench_command $name $path $bin $path
+}
+
+bench_nitunit
+
+if test -n "$died"; then
+       echo "Some commands failed"
+       exit 1
+fi
+exit 0