tests: Add Arm full system regressions to the new framework
authorNikos Nikoleris <nikos.nikoleris@arm.com>
Wed, 29 May 2019 10:52:36 +0000 (11:52 +0100)
committerNikos Nikoleris <nikos.nikoleris@arm.com>
Fri, 9 Aug 2019 14:03:21 +0000 (14:03 +0000)
Change-Id: I7e0499c8c3d63798d44f936580eecd40dc650694
Signed-off-by: Nikos Nikoleris <nikos.nikoleris@arm.com>
Reviewed-on: https://gem5-review.googlesource.com/c/public/gem5/+/18989
Tested-by: kokoro <noreply+kokoro@google.com>
Reviewed-by: Jason Lowe-Power <jason@lowepower.com>
Maintainer: Jason Lowe-Power <jason@lowepower.com>

tests/gem5/fs/linux/arm/run.py [new file with mode: 0644]
tests/gem5/fs/linux/arm/test.py [new file with mode: 0644]

diff --git a/tests/gem5/fs/linux/arm/run.py b/tests/gem5/fs/linux/arm/run.py
new file mode 100644 (file)
index 0000000..f4d7f46
--- /dev/null
@@ -0,0 +1,84 @@
+# Copyright (c) 2012, 2019 ARM Limited
+# All rights reserved
+#
+# The license below extends only to copyright in the software and shall
+# not be construed as granting a license to any other intellectual
+# property including but not limited to intellectual property relating
+# to a hardware implementation of the functionality of the software
+# licensed hereunder.  You may use the software subject to the license
+# terms below provided that you ensure that this notice is replicated
+# unmodified and in its entirety in all distributions of the software,
+# modified or unmodified, in source code or in binary form.
+#
+# Copyright (c) 2006-2007 The Regents of The University of Michigan
+# All rights reserved.
+#
+# Redistribution and use in source and binary forms, with or without
+# modification, are permitted provided that the following conditions are
+# met: redistributions of source code must retain the above copyright
+# notice, this list of conditions and the following disclaimer;
+# redistributions in binary form must reproduce the above copyright
+# notice, this list of conditions and the following disclaimer in the
+# documentation and/or other materials provided with the distribution;
+# neither the name of the copyright holders nor the names of its
+# contributors may be used to endorse or promote products derived from
+# this software without specific prior written permission.
+#
+# THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
+# "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
+# LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
+# A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
+# OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
+# SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
+# LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
+# DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
+# THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
+# (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
+# OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
+#
+# Authors: Steve Reinhardt
+#          Nikos Nikoleris
+
+from __future__ import print_function
+
+import sys
+import os
+import os.path
+from os.path import join as joinpath
+
+import m5
+
+def run_test(root):
+    """Default run_test implementations. Scripts can override it."""
+
+    # instantiate configuration
+    m5.instantiate()
+
+    # simulate until program terminates
+    exit_event = m5.simulate()
+    print('Exiting @ tick', m5.curTick(), 'because', exit_event.getCause())
+
+config = sys.argv[1]
+os.environ['M5_PATH'] = os.path.dirname(__file__)
+
+# path setup
+gem5_root = joinpath(os.path.dirname(__file__), '..', '..', '..', '..', '..')
+sys.path.append(joinpath(gem5_root, 'configs'))
+tests_root = joinpath(gem5_root, 'tests')
+sys.path.append(joinpath(tests_root, 'configs'))
+
+exec(compile(open(config).read(), config, 'exec'))
+
+system = root.system
+system.readfile = os.path.join(tests_root, 'halt.sh')
+
+# The CPU can either be a list of CPUs or a single object.
+if isinstance(system.cpu, list):
+    [ cpu.createThreads() for cpu in system.cpu ]
+else:
+    system.cpu.createThreads()
+
+# Since we're in batch mode, don't allow tcp socket connections
+m5.disableAllListeners()
+
+run_test(root)
diff --git a/tests/gem5/fs/linux/arm/test.py b/tests/gem5/fs/linux/arm/test.py
new file mode 100644 (file)
index 0000000..f93fef7
--- /dev/null
@@ -0,0 +1,112 @@
+# Copyright (c) 2019 ARM Limited
+# All rights reserved
+#
+# The license below extends only to copyright in the software and shall
+# not be construed as granting a license to any other intellectual
+# property including but not limited to intellectual property relating
+# to a hardware implementation of the functionality of the software
+# licensed hereunder.  You may use the software subject to the license
+# terms below provided that you ensure that this notice is replicated
+# unmodified and in its entirety in all distributions of the software,
+# modified or unmodified, in source code or in binary form.
+#
+# Redistribution and use in source and binary forms, with or without
+# modification, are permitted provided that the following conditions are
+# met: redistributions of source code must retain the above copyright
+# notice, this list of conditions and the following disclaimer;
+# redistributions in binary form must reproduce the above copyright
+# notice, this list of conditions and the following disclaimer in the
+# documentation and/or other materials provided with the distribution;
+# neither the name of the copyright holders nor the names of its
+# contributors may be used to endorse or promote products derived from
+# this software without specific prior written permission.
+#
+# THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
+# "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
+# LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
+# A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
+# OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
+# SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
+# LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
+# DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
+# THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
+# (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
+# OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
+#
+# Authors: Nikos Nikoleris
+
+'''
+Arm FS simulation tests
+'''
+
+from os.path import join as joinpath
+
+from testlib import *
+
+arm_fs_quick_tests = [
+    'realview-simple-atomic',
+    'realview-simple-atomic-dual',
+    'realview-simple-atomic-checkpoint',
+    'realview-simple-timing',
+    'realview-simple-timing-dual',
+    'realview-switcheroo-atomic',
+    'realview-switcheroo-timing',
+]
+
+arm_fs_long_tests = [
+    'realview-o3',
+    'realview-o3-checker',
+    'realview-o3-dual',
+    'realview-minor',
+    'realview-minor-dual',
+    'realview-switcheroo-noncaching-timing',
+    'realview-switcheroo-o3',
+    'realview-switcheroo-full',
+    'realview64-simple-atomic',
+    'realview64-simple-atomic-checkpoint',
+    'realview64-simple-atomic-dual',
+    'realview64-simple-timing',
+    'realview64-simple-timing-dual',
+    'realview64-o3',
+    'realview64-o3-checker',
+    'realview64-o3-dual',
+    'realview64-minor',
+    'realview64-minor-dual',
+    'realview64-switcheroo-atomic',
+    'realview64-switcheroo-timing',
+    'realview64-switcheroo-o3',
+    'realview64-switcheroo-full',
+    'realview-simple-timing-ruby',
+    'realview-simple-timing-dual-ruby',
+    'realview64-simple-timing-ruby',
+    'realview64-simple-timing-dual-ruby',
+]
+
+tarball = 'aarch-system-2014-10.tar.bz2'
+url = "http://gem5.org/dist/current/arm/" + tarball
+path = os.path.dirname(os.path.abspath(__file__))
+arm_fs_binaries = DownloadedArchive(url, path, tarball)
+
+for name in arm_fs_quick_tests:
+    args = [ joinpath(config.base_dir, 'tests', 'configs', name + '.py') ]
+    gem5_verify_config(
+        name=name,
+        verifiers=(), # Add basic stat verifiers
+        config=joinpath(path, 'run.py'),
+        config_args=args,
+        valid_isas=(constants.arm_tag,),
+        length=constants.quick_tag,
+        fixtures=(arm_fs_binaries,)
+    )
+
+for name in arm_fs_long_tests:
+    args = [ joinpath(config.base_dir, 'tests', 'configs', name + '.py') ]
+    gem5_verify_config(
+        name=name,
+        verifiers=(), # TODO: Add basic stat verifiers
+        config=joinpath(path, 'run.py'),
+        config_args=args,
+        valid_isas=(constants.arm_tag,),
+        length=constants.long_tag,
+        fixtures=(arm_fs_binaries,)
+    )