Allow vcregress.pl to run an arbitrary TAP test set
authorAndrew Dunstan <andrew@dunslane.net>
Mon, 1 May 2017 14:12:02 +0000 (10:12 -0400)
committerAndrew Dunstan <andrew@dunslane.net>
Mon, 1 May 2017 14:57:51 +0000 (10:57 -0400)
Currently only provision for running the bin checks in a single step is
provided for. Now these tests can be run individually, as well as tests
in other locations (e.g. src.test/recover).

Also provide for suppressing unnecessary temp installs by setting the
NO_TEMP_INSTALL environment variable just as the Makefiles do.

Backpatch to 9.4.

src/tools/msvc/vcregress.pl

index 8933920d9bf631359abd01f1222956987dc2b8aa..67a915a62e20616529f5303f36622a9a640539cc 100644 (file)
@@ -34,7 +34,7 @@ if (-e "src/tools/msvc/buildenv.pl")
 
 my $what = shift || "";
 if ($what =~
-/^(check|installcheck|plcheck|contribcheck|modulescheck|ecpgcheck|isolationcheck|upgradecheck|bincheck|recoverycheck)$/i
+/^(check|installcheck|plcheck|contribcheck|modulescheck|ecpgcheck|isolationcheck|upgradecheck|bincheck|recoverycheck|taptest)$/i
   )
 {
    $what = uc $what;
@@ -54,13 +54,6 @@ copy("$Config/dummy_seclabel/dummy_seclabel.dll", "src/test/regress");
 
 $ENV{PATH} = "$topdir/$Config/libpq;$ENV{PATH}";
 
-my $schedule = shift;
-unless ($schedule)
-{
-   $schedule = "serial";
-   $schedule = "parallel" if ($what eq 'CHECK' || $what =~ /PARALLEL/);
-}
-
 if ($ENV{PERL5LIB})
 {
    $ENV{PERL5LIB} = "$topdir/src/tools/msvc;$ENV{PERL5LIB}";
@@ -90,13 +83,14 @@ my %command = (
    ISOLATIONCHECK => \&isolationcheck,
    BINCHECK       => \&bincheck,
    RECOVERYCHECK  => \&recoverycheck,
-   UPGRADECHECK   => \&upgradecheck,);
+   UPGRADECHECK   => \&upgradecheck,
+   TAPTEST        => \&taptest,);
 
 my $proc = $command{$what};
 
 exit 3 unless $proc;
 
-&$proc();
+&$proc(@_);
 
 exit 0;
 
@@ -104,6 +98,7 @@ exit 0;
 
 sub installcheck
 {
+   my $schedule = shift || 'serial';
    my @args = (
        "../../../$Config/pg_regress/pg_regress",
        "--dlpath=.",
@@ -119,6 +114,7 @@ sub installcheck
 
 sub check
 {
+   my $schedule = shift || 'parallel';
    InstallTemp();
    chdir "${topdir}/src/test/regress";
    my @args = (
@@ -138,15 +134,15 @@ sub check
 
 sub ecpgcheck
 {
-   my $msbflags  = $ENV{MSBFLAGS} || "";
+   my $msbflags = $ENV{MSBFLAGS} || "";
    chdir $startdir;
    system("msbuild ecpg_regression.proj $msbflags /p:config=$Config");
    my $status = $? >> 8;
    exit $status if $status;
    InstallTemp();
    chdir "$topdir/src/interfaces/ecpg/test";
-   $schedule = "ecpg";
-   my @args = (
+   my $schedule = "ecpg";
+   my @args     = (
        "../../../../$Config/pg_regress_ecpg/pg_regress_ecpg",
        "--bindir=",
        "--dbname=ecpg1_regression,ecpg2_regression",
@@ -219,6 +215,17 @@ sub bincheck
    exit $mstat if $mstat;
 }
 
+sub taptest
+{
+   my $dir = shift;
+
+   die "no tests found!" unless -d "$topdir/$dir/t";
+
+   InstallTemp();
+   my $status = tap_check("$topdir/$dir");
+   exit $status if $status;
+}
+
 sub plcheck
 {
    chdir "../../pl";
@@ -516,7 +523,6 @@ sub fetchRegressOpts
    $m =~ s{\\\r?\n}{}g;
    if ($m =~ /^\s*REGRESS_OPTS\s*\+?=(.*)/m)
    {
-
        # Substitute known Makefile variables, then ignore options that retain
        # an unhandled variable reference.  Ignore anything that isn't an
        # option starting with "--".
@@ -588,15 +594,18 @@ sub GetTests
 
 sub InstallTemp
 {
-   print "Setting up temp install\n\n";
-   Install("$tmp_installdir", "all", $config);
+   unless ($ENV{NO_TEMP_INSTALL})
+   {
+       print "Setting up temp install\n\n";
+       Install("$tmp_installdir", "all", $config);
+   }
    $ENV{PATH} = "$tmp_installdir/bin;$ENV{PATH}";
 }
 
 sub usage
 {
    print STDERR
-     "Usage: vcregress.pl <mode> [ <schedule> ]\n\n",
+     "Usage: vcregress.pl <mode> [ <arg>]\n\n",
      "Options for <mode>:\n",
      "  bincheck       run tests of utilities in src/bin/\n",
      "  check          deploy instance and run regression tests on it\n",
@@ -607,9 +616,12 @@ sub usage
      "  modulescheck   run tests of modules in src/test/modules/\n",
      "  plcheck        run tests of PL languages\n",
      "  recoverycheck  run recovery test suite\n",
+     "  taptest        run an arbitrary TAP test set\n",
      "  upgradecheck   run tests of pg_upgrade\n",
-     "\nOptions for <schedule>:\n",
+     "\nOptions for <arg>: (used by check and installcheck)\n",
      "  serial         serial mode\n",
-     "  parallel       parallel mode\n";
+     "  parallel       parallel mode\n",
+     "\nOption for <arg>: for taptest\n",
+     "  TEST_DIR       (required) directory where tests reside\n";
    exit(1);
 }