kunit: tool: make parser stop overwriting status of suites w/ no_tests
authorDaniel Latypov <dlatypov@google.com>
Thu, 12 May 2022 18:35:37 +0000 (11:35 -0700)
committerShuah Khan <skhan@linuxfoundation.org>
Mon, 16 May 2022 19:22:12 +0000 (13:22 -0600)
commitdbf0b0d53a2b5afa6ef7372dcedf52302669fc2c
treee40a16c7b88c92520cdc7d4ed48385a46c30053e
parent33d4a933e9273bb9b33db8dcd0e564881319443c
kunit: tool: make parser stop overwriting status of suites w/ no_tests

Consider this invocation
$ ./tools/testing/kunit/kunit.py parse <<EOF
  TAP version 14
  1..2
  ok 1 - suite
    # Subtest: no_tests_suite
    # catastrophic error!
  not ok 1 - no_tests_suite
EOF

It will have a 0 exit code even though there's a "not ok".

Consider this one:
$ ./tools/testing/kunit/kunit.py parse <<EOF
  TAP version 14
  1..2
  ok 1 - suite
  not ok 1 - no_tests_suite
EOF

It will a non-zero exit code.

Why?
We have this line in the kunit_parser.py
> parent_test = parse_test_header(lines, test)
where we have special handling when we see "# Subtest" and we ignore the
explicit reported "not ok 1" status!

Also, NO_TESTS at a suite-level only results in a non-zero status code
where then there's only one suite atm.

This change is the minimal one to make sure we don't overwrite it.

Signed-off-by: Daniel Latypov <dlatypov@google.com>
Reviewed-by: David Gow <davidgow@google.com>
Reviewed-by: Brendan Higgins <brendanhiggins@google.com>
Signed-off-by: Shuah Khan <skhan@linuxfoundation.org>
tools/testing/kunit/kunit_parser.py
tools/testing/kunit/test_data/test_is_test_passed-no_tests_no_plan.log