cvc5.git
4 years agoUpdate run scripts for SMT-COMP 2020 (#4454)
Andres Noetzli [Wed, 6 May 2020 18:44:34 +0000 (11:44 -0700)]
Update run scripts for SMT-COMP 2020 (#4454)

This commit adds additional options for the model validation track and
makes sure that non-"sat"/"unsat" outputs from the sequential porfolio
approaches are written to a file instead of stderr when running on
StarExec.

4 years agoAlways introduce fresh variable for unconstrained APPLY_UF (#4472)
Andrew Reynolds [Tue, 5 May 2020 21:35:44 +0000 (16:35 -0500)]
Always introduce fresh variable for unconstrained APPLY_UF (#4472)

Fixes an unsoundness in unconstrained simplification, fixes #4469.

4 years agoUpdate copyright year and AUTHORS/THANKS files. (#4468)
Aina Niemetz [Tue, 5 May 2020 19:56:57 +0000 (12:56 -0700)]
Update copyright year and AUTHORS/THANKS files. (#4468)

4 years agoSMT-COMP 2020: Enable --fp-exp for new FP logics. (#4432)
Aina Niemetz [Sat, 2 May 2020 04:18:55 +0000 (21:18 -0700)]
SMT-COMP 2020: Enable --fp-exp for new FP logics. (#4432)

4 years agoMove slow regression to regress3 (#4430)
Andrew Reynolds [Sat, 2 May 2020 03:07:45 +0000 (22:07 -0500)]
Move slow regression to regress3 (#4430)

4 years agoFix regression (#4424)
Andrew Reynolds [Fri, 1 May 2020 00:59:45 +0000 (19:59 -0500)]
Fix regression (#4424)

Fixes regress1.

4 years agoRemove skolem share involving pre_first_ctn. (#4423)
Andrew Reynolds [Thu, 30 Apr 2020 23:48:21 +0000 (18:48 -0500)]
Remove skolem share involving pre_first_ctn. (#4423)

This fixes a soundness issue in strings caused by an incorrect skolem share.

This adds a regression that corresponds to the rewrite that this skolem share was justified by, which is "sat" (the rewrite does not hold). This benchmark in fact was answered "unsat" by CVC4 prior to this PR.

4 years agoDo not mark congruent terms are reduced (#4419)
Andrew Reynolds [Thu, 30 Apr 2020 18:18:26 +0000 (13:18 -0500)]
Do not mark congruent terms are reduced (#4419)

This fixes a potential model soundness issue in strings where a justification for why a string term was reduced relied on a circular argument. The issue involved "reduced by congruence" which states that when f(a) = f(b) ^ a = b in the current context, then one of f(a) or f(b) can be ignored.

However, it may be the case that a is an extended function whose reduction relies on f(b). If we were to assume that f(b) can be ignored due to f(a), then our reduction of f(a) is circular: the reduction of f(a) in the context where a=b relies on itself.

This was causing an incorrect model for QF_S/2020-sygus-qgen/queries/query3214.smt2. The sequence of dependencies was:

[1] (str.contains (str.substr x 1 (+ (- 1) (str.len x))) "CA")
is congruent to
(str.contains (str.substr x (+ 2 (str.indexof x "CA" 1)) (+ (- 2) (str.len x) (* (- 1) (str.indexof x "CA" 1)))) "CA")
in the current context since they are equal and their arguments are equal.

[2] (str.substr x (+ 2 (str.indexof x "CA" 1)) (+ (- 2) (str.len x) (* (- 1) (str.indexof x "CA" 1))))
reduction relies on the length constraint:
(= (str.indexof x "CA" 1) (+ (- 2) (str.len sspre_66)))

[3] (str.indexof x "CA" 1)
reduction relies on:
(not (str.contains (str.substr x 1 (+ (- 1) (str.len x))) "CA"))
which was marked congruent above.
The benchmark now solves in 5 minutes 30 seconds (sat, with a correct model):

andrew@andrew-Latitude-7480:~/misc/strings$ time ajr-cvc4 query3214.smt2 --strings-exp --rewrite-divk --check-models --dump-models
sat
(model
(define-fun x () String "QACOACA")
)

4 years agoSMT-COMP 2020: Fix scripts to use --no-type-checking instead of --no-checking. (...
Aina Niemetz [Wed, 29 Apr 2020 20:14:46 +0000 (13:14 -0700)]
SMT-COMP 2020: Fix scripts to use --no-type-checking instead of --no-checking. (#4417)

4 years agoAvoid circular dependencies for justifying reductions in strings extf eval (#4415)
Andrew Reynolds [Wed, 29 Apr 2020 18:02:02 +0000 (13:02 -0500)]
Avoid circular dependencies for justifying reductions in strings extf eval (#4415)

An incorrect answer of "sat" could be found after 8 seconds on the given benchmark (with --strings-fmf) due to a circular justification for why an extended function was reduced. In particular, we ran checkExtfInference on the same term twice and then marked it as reduced since we had already seen it. This makes the code more conservative.

Notice I'm making the code doubly conservative in case there is any chance for duplication again (e.g. if ExtTheory provides duplicate terms).

4 years agoFix strings 2.6 regression (#4413)
Andrew Reynolds [Wed, 29 Apr 2020 17:00:19 +0000 (12:00 -0500)]
Fix strings 2.6 regression (#4413)

Fixes nightlies.

4 years agoRegister lower bound for str.to_int (#4408)
Andres Noetzli [Tue, 28 Apr 2020 20:10:16 +0000 (13:10 -0700)]
Register lower bound for str.to_int (#4408)

This commit changes the term registration for str.to_int terms. Before, we were not sending out any lemmas when registering str.to_int terms. Now, we send a simple lemma that asserts that the value is greater or equal to negative one.

4 years agoUpdates to SMT COMP script for 20 minute timeout (#4406)
Andrew Reynolds [Tue, 28 Apr 2020 19:37:51 +0000 (14:37 -0500)]
Updates to SMT COMP script for 20 minute timeout (#4406)

Changes run script to be consistent for 20 minute timeout. This divides most of the previous time allocation by 2, with a few exceptions (for non-linear).

It adds a configuration involving --no-arith-brab to QF_NIA and reallocates some time.

4 years agoupdate Haniel's affiliation (#4404)
Haniel Barbosa [Tue, 28 Apr 2020 19:02:06 +0000 (16:02 -0300)]
update Haniel's affiliation (#4404)

4 years agocontrib/get-gmp: Rename and update install instructions with a warning. (#4407)
Aina Niemetz [Tue, 28 Apr 2020 17:43:48 +0000 (10:43 -0700)]
contrib/get-gmp: Rename and update install instructions with a warning. (#4407)

4 years agoSupport the SMT-LIB Unicode string standard by default (#4378)
Andrew Reynolds [Tue, 28 Apr 2020 16:15:00 +0000 (11:15 -0500)]
Support the SMT-LIB Unicode string standard by default (#4378)

This PR merges --lang=smt2.6.1 and --lang=smt2.6 (default). It makes it so that 2.6 always expects the syntax of the string standard http://smtlib.cs.uiowa.edu/theories-UnicodeStrings.shtml.

I've updated the regressions so that the 2.6 benchmarks are now compliant with the standard. Some of the <=2.5 benchmarks I've updated to 2.6. Others I have left for now, in particular the ones that rely on special characters or ad-hoc escape sequences. The old formats will be supported in the release but removed shortly afterwards.

This PR is a prerequisite for the release, but not necessarily SMT-COMP (which will use --lang=smt2.6.1 if needed). Notice that we still do not have parsing support for str.replace_re or str.replace_re_all. This is required to be fully compliant.

4 years agoUpdate cardinality in strings to unicode standard (#4402)
Andrew Reynolds [Tue, 28 Apr 2020 13:07:54 +0000 (08:07 -0500)]
Update cardinality in strings to unicode standard (#4402)

This updates the default cardinality in strings to match the Unicode standard, 196608.

This avoids a check-model failure from 25 benchmarks in SMT-LIB, which were related to a split due to insufficient constants being required during collectModelInfo.

This also makes a few places throw an AlwaysAssert(false) that otherwise would lead to incorrect models. These regardless should never throw, but it would be better to have an assertion failure.

4 years agoFix sygus unit (#4371)
Andrew Reynolds [Mon, 27 Apr 2020 22:04:49 +0000 (17:04 -0500)]
Fix sygus unit (#4371)

4 years agoFix examples instructions in INSTALL.md. (#4397)
Mathias Preiner [Mon, 27 Apr 2020 20:42:28 +0000 (13:42 -0700)]
Fix examples instructions in INSTALL.md. (#4397)

4 years ago Fix sets cardinality cycle rule (#4392)
Andrew Reynolds [Sun, 26 Apr 2020 05:05:28 +0000 (00:05 -0500)]
 Fix sets cardinality cycle rule (#4392)

Fixes #4391.

The sets cardinality cycle rule is analogous to the S-Cycle rule for strings (see Liang et al CAV 2014). This rule is typically never applied but can be applied in rare cases where theory combination does not determine a correct arrangement of equalities over sets terms that is consistent with the arithmetic arrangement of their cardinalities at full effort. Notice the regression from #4391 has non-linear arithmetic, (mod 0 d), which is translated to UF.

The cardinality cycle rule had a bug: it assumed that cycles that were encountered were loops e1 = e2 = ... = e1 but in general they can be lassos e1 = ... = e2 = ... = e2. This ensures the Venn region cycle e2 = ... = e2 is the conclusion in this case, instead of unsoundly concluding e1 = ... = e2.

Strings does not have a similar issue:
https://github.com/CVC4/CVC4/blob/master/src/theory/strings/core_solver.cpp#L488
Here, when a cycle is encountered, it is processed at the point in traversal where the loop is closed.

This is not critical for SMT-COMP but should be in the 1.8 release.

4 years agoIntroduce best content heuristic for strings (#4382)
Andres Noetzli [Thu, 23 Apr 2020 12:58:00 +0000 (05:58 -0700)]
Introduce best content heuristic for strings (#4382)

* Introduce best content heuristic for strings

This commit introduces a "best content heuristic" to perform
context-dependent simplifications. The high-level idea is that for each
equivalence class for strings, we compute a representation that is a
string concatentation of constants and other string terms. For this
representation, we try to get as many letters in the string constants as
we can (i.e. the best approximation of the content). This "best content"
representation is then used by `EXTF_EVAL` to perform simplifications.

Co-authored-by: Andrew Reynolds <andrew.j.reynolds@gmail.com>
4 years agoStrings: Register skolems before sending lemma (#4381)
Andres Noetzli [Thu, 23 Apr 2020 00:55:33 +0000 (17:55 -0700)]
Strings: Register skolems before sending lemma (#4381)

This commit fixes a performance regression introduced by commit 6255c03. The issue seems to be that registering terms manually after sending the lemma on the output channel is too late because the output channel processes the lemma eagerly.

4 years agoEnsure disequality splits are processed as lemmas (#4380)
Andrew Reynolds [Wed, 22 Apr 2020 18:32:20 +0000 (13:32 -0500)]
Ensure disequality splits are processed as lemmas (#4380)

Fixes #4379. This was caused by a splitting lemma rewriting to a conjunction, being processed as a fact, and having a pending phase requirement sent out assuming the inference was to be processed as a lemma. This forces 2 of the splits in the core solver to be always processed as lemmas.

4 years agoAllow eager bitblasting with solve bv as int in QF_NIA (#4373)
Andrew Reynolds [Wed, 22 Apr 2020 13:45:52 +0000 (08:45 -0500)]
Allow eager bitblasting with solve bv as int in QF_NIA (#4373)

This also updates the SMT COMP script to revert to our previous behavior.

This is required for SMT COMP. It should be beneficial for satisfiable QF_NIA instances. I will revisit/test this independently.

4 years agoConvert V2.5 SMT regressions to V2.6. (#4319)
Abdalrhman Mohamed [Wed, 22 Apr 2020 12:06:24 +0000 (07:06 -0500)]
Convert V2.5 SMT regressions to V2.6. (#4319)

This commit converts all v2.5 smt2 regressions to v2.6 (except for regress/regress0/lang_opts_2_5.smt2).

4 years agoReinstantiate support for conjunctions in facts (#4377)
Andres Noetzli [Wed, 22 Apr 2020 11:32:06 +0000 (04:32 -0700)]
Reinstantiate support for conjunctions in facts (#4377)

Fixes #4376. Commit 6255c0356bd78140a9cf075491c1d4608ac27704 removed
support for conjunctions in the conclusion of facts. However,
`F_ENDPOINT_EMP` generates a conjunction in the conclusion of the
inference if multiple components are inferred to be empty. This commit
reinstantiates support for conjunctions in the conclusion of facts.

4 years agoUpdate to sygus version 2 (#4372)
Andrew Reynolds [Tue, 21 Apr 2020 18:40:02 +0000 (13:40 -0500)]
Update to sygus version 2 (#4372)

4 years agoFix for parse options related to binary name (#4368)
Andrew Reynolds [Tue, 21 Apr 2020 05:33:50 +0000 (00:33 -0500)]
Fix for parse options related to binary name (#4368)

Possible fix for the nightlies.

In some configurations, a unit test fails when using the function for parsing options via manual argv construction
https://github.com/CVC4/CVC4/blob/master/test/unit/expr/expr_public.h#L58

This reverts a behavior change from 3dfb48b.
In particular, we always parse and ignore the binary name instead of skipping it outright. This more accurately reflects the original code.

4 years agoIntroduce a public interface for Sygus commands. (#4204)
Abdalrhman Mohamed [Tue, 21 Apr 2020 03:07:42 +0000 (22:07 -0500)]
Introduce a public interface for Sygus commands. (#4204)

This commit addresses issue #38 in cvc4-projects by introducing public API for Sygus commands. It also includes two simple examples of how to use the API.

4 years agoMake option names related to CEGQI consistent (#4316)
Andrew Reynolds [Tue, 21 Apr 2020 00:47:35 +0000 (19:47 -0500)]
Make option names related to CEGQI consistent (#4316)

This updates option names to be consistent across uses of counterexample-guided quantifier instantiation (ceqgi), which was previously called "counterexample-based quantifier instantiation" (cbqi), and sygus.

Notably, the trace "cegqi-engine" is changed to "sygus-engine" by this commit.

The changes were done by these commands in the given directories:

src/:
for f in $(find -name '.'); do sed -i 's/options::cbqi/options::cegqi/g' $f;sed -i 's/cegqi-engine/sygus-engine/g' $f; done;sed -i 's/"cbqi/"cegqi/g' $f; done
test/regress/:
for f in $(find -name '.'); do sed -i 's/--cbqi/--cegqi/g' $f; done
src/: and test/regress/:
for f in $(find -name '.'); do sed -i 's/cegqi-si/sygus-si/g' $f; done
test/regress/:
for f in $(find -name '.'); do sed -i 's/no-cbqi/no-cegqi/g' $f; done
test/regress/:
for f in $(find -name '.'); do sed -i 's/:cbqi/:cegqi/g' $f; done

And a few minor fixes afterwards.

This should be merged close to the time of the next stable release.

4 years agoRefactor inference manager in strings to be amenable to proofs (#4363)
Andrew Reynolds [Mon, 20 Apr 2020 20:16:18 +0000 (15:16 -0500)]
Refactor inference manager in strings to be amenable to proofs (#4363)

This is a key refactoring towards proofs for strings.

This ensures that InferInfo is maintained until just before facts, lemmas and conflicts are processed. This allows us both to:
(1) track more accurate stats and debug information,
(2) have enough information to ensure that proofs can be constructed at the moment facts, lemmas, and conflicts are processed.

Changes in this PR:

PendingInfer and InferInfo were merged, CoreInferInfo is now the previous equivalent of InferInfo, extended with core-solver-specific information, which is only used by CoreSolver.
sendInference( const InferInfo& info, ... ) is now the central method for sending inferences which is called by the other variants, not the other way around.
sendLemma is inlined into sendInference(...) for clarity.
doPendingLemmas and doPendingFacts are extended to process the side effects of the inference infos.
There is actually a further issue with pending inferences related to eagerly processing the side effect of CoreInferInfo before we know the lemma is sent. I believe this issue does not occur in practice based on our strategy. Further refactoring could tighten this, e.g. virtual void InferInfo::processSideEffect. I will do this in another PR.

Further refactoring can address whether asLemma should be a field of InferInfo (it probably should), and whether we should explicitly check for AND in conclusions instead of making it the responsibility of the user of this class.

4 years agoAdd SCOPE proof rule (#4332)
Andrew Reynolds [Mon, 20 Apr 2020 19:53:07 +0000 (14:53 -0500)]
Add SCOPE proof rule (#4332)

This rule is dual to ASSUME. It is a way of closing free assumptions to conclude an implication.

It also changes getId -> getRule.

4 years agoDisable unsat cores on nec regression (#4330)
Andrew Reynolds [Sun, 19 Apr 2020 00:48:04 +0000 (19:48 -0500)]
Disable unsat cores on nec regression (#4330)

Should fix the nightlies.

4 years agoTrack inference id for pending facts in strings (#4331)
Andrew Reynolds [Sat, 18 Apr 2020 22:47:31 +0000 (17:47 -0500)]
Track inference id for pending facts in strings (#4331)

This improves our tracking of pending inferences in strings so that we record pending inferences as a triple (id, fact, exp). This will ensure that proof steps can be constructed at the time we decide to process facts. It also inlines the sendInfer method into sendInference for simplicity.

This also improves the policy for reference counting facts and their explanations: we add them to d_keep when they are added to the equality engine. Previously, we were adding them when they were registered as pending. This means we would collect facts in this pending set that were added but later abandoned, which is unnecessary.

4 years agoImproving EqProof printing (#4329)
Haniel Barbosa [Sat, 18 Apr 2020 12:22:37 +0000 (09:22 -0300)]
Improving EqProof printing (#4329)

4 years agoAdd (context-dependent) Proof (#4323)
Andrew Reynolds [Fri, 17 Apr 2020 16:57:07 +0000 (11:57 -0500)]
Add (context-dependent) Proof (#4323)

A (context-dependent) collection of proof steps that are linked to together to form a ProofNode dag.

Note that the name "Proof" is currently taken. I am calling this class "CDProof", although it is optionally context dependent.

4 years agoantlr: Use relative path in ANTLR script. (#4324)
Mathias Preiner [Fri, 17 Apr 2020 05:50:05 +0000 (22:50 -0700)]
antlr: Use relative path in ANTLR script. (#4324)

This will fix the CI caching issues we sometimes encountered on GH actions.

4 years agoSyGuS instantiation quantifiers module (#3910)
Mathias Preiner [Fri, 17 Apr 2020 02:31:42 +0000 (19:31 -0700)]
SyGuS instantiation quantifiers module (#3910)

4 years agoAdd ProofNodeManager and ProofChecker (#4317)
Andrew Reynolds [Thu, 16 Apr 2020 21:00:25 +0000 (16:00 -0500)]
Add ProofNodeManager and ProofChecker (#4317)

Further work on adding core utilities for ProofNode objects, in support of the new proof infrastructure.

ProofNodeManager is analogous to NodeManager. It is a trusted way of generating only "well-formed" ProofNode pointers (according to a checker).

ProofChecker is analogous to TypeChecker. It is intended to be infrastructure for our internal proof checker.

This PR (and 1 more) is required to get to a place where Haniel and I can collaborate on further development for proofs.

4 years agoEliminate remaining references to parent TheoryStrings object (#4315)
Andrew Reynolds [Thu, 16 Apr 2020 14:50:43 +0000 (09:50 -0500)]
Eliminate remaining references to parent TheoryStrings object (#4315)

This PR makes it so that the module dependencies in the theory of strings are acyclic. This is important for further organization towards proofs for strings.

The main change in this PR is to ensure that InferenceManager has a pointer to ExtTheory, which is needed for several of its methods. This required changing several solvers into unique_ptr to properly initialize.

4 years agoAdd ProofNode data structure (#4311)
Andrew Reynolds [Wed, 15 Apr 2020 22:09:40 +0000 (17:09 -0500)]
Add ProofNode data structure (#4311)

This is the core data structure for proofs in the new proofs infrastructure. PfRule is a global enumeration of ids of proof nodes (analogous to Kind for Nodes).

4 years agoMove regular expression inclusion test to RegExpEntail (#4310)
Andrew Reynolds [Wed, 15 Apr 2020 14:00:47 +0000 (09:00 -0500)]
Move regular expression inclusion test to RegExpEntail (#4310)

In preparation for rephrasing this inference as a rewrite.

4 years agoChange option names --default-dag-thresh and --default-expr-depth (#4309)
Andrew Reynolds [Wed, 15 Apr 2020 13:37:46 +0000 (08:37 -0500)]
Change option names --default-dag-thresh and --default-expr-depth (#4309)

4 years agoSplit TermRegistry object from TheoryStrings (#4312)
Andrew Reynolds [Wed, 15 Apr 2020 13:23:27 +0000 (08:23 -0500)]
Split TermRegistry object from TheoryStrings (#4312)

This consolidates functionalities from TheoryStrings and InferenceManager related to registering terms, including sending "preregistration lemmas" for them. The main purpose of this PR is to detangle this module from InferenceManager so that these two modules have exactly one call to OutputChannel::lemma each.

For the purposes of the theory solvers, TermRegistry contains the official SkolemCache of TheoryStrings, and can be seen as subsuming the previous interface for this class.

This PR is needed for further progress on strings proofs, marking as major since this will be a blocker shortly for this project.

A few things were cleaned in this PR. One function changed name InferenceManager::registerTerm --> TermRegistry::getRegisterTermLemma. No major behavior changes.

4 years agoDo not mark string extended functions as eliminated after reduction lemmas (#4306)
Andrew Reynolds [Wed, 15 Apr 2020 12:55:41 +0000 (07:55 -0500)]
Do not mark string extended functions as eliminated after reduction lemmas (#4306)

The current policy marked extended functions in strings as "reduced" (eliminated) when we generated their reduction lemma. The upside is that the solver can effectively ignore them. The downside is that we cannot do context-dependent simplification on them, and hence we miss out conflicts during the remainder of the check-sat call.

This changes the policy so they are not marked as reduced. Instead, reduction lemmas are cached in the standard way while allowing context-dependent simplification.

4 years agoFix assertion in enumerative instantiation (#4313)
Andrew Reynolds [Wed, 15 Apr 2020 08:02:50 +0000 (03:02 -0500)]
Fix assertion in enumerative instantiation (#4313)

Fixes regress1.

4 years agoConvert more cases of strings to words (#4206)
Andrew Reynolds [Wed, 15 Apr 2020 07:34:33 +0000 (02:34 -0500)]
Convert more cases of strings to words (#4206)

4 years agoAbort if in conflict in enumerative instantiation (#4298)
Andrew Reynolds [Wed, 15 Apr 2020 06:28:18 +0000 (01:28 -0500)]
Abort if in conflict in enumerative instantiation (#4298)

In very rare cases, quantifiers engine can be the first to detect a quantifier-free conflict while constructing term indices. When this occurs, instantiation modules can quit immediately. This was not happening in a case of enumerative instantiation.

Fixes #4293.

4 years agoAlways flush lemmas from downwards closure in sets (#4297)
Andrew Reynolds [Wed, 15 Apr 2020 05:52:33 +0000 (00:52 -0500)]
Always flush lemmas from downwards closure in sets (#4297)

Fixes #4283.

This also makes a few minor improvements to how lemmas are sent in sets. In particular, lemmas are not sent if we are already in conflict.

4 years agoDo not normalize to representatives for variable equalities in conflict-based instant...
Andrew Reynolds [Wed, 15 Apr 2020 05:15:10 +0000 (00:15 -0500)]
Do not normalize to representatives for variable equalities in conflict-based instantiation (#4280)

Conflict-based instantiation would sometimes initialize a match x -> getRepresentative(t) when a quantified formula contained x = t. This leads to issues where getRepresentative(t) is an illegal term (say, in combination with CEGQI). This makes it so the representative is accessed when necessary instead of being set as part of the match.

Fixes #4275.

4 years agoAlways assign function values in higher order (#4279)
Andrew Reynolds [Wed, 15 Apr 2020 03:02:31 +0000 (22:02 -0500)]
Always assign function values in higher order (#4279)

Fixes #4277.

4 years agoFix combinations of cegqi and non-standard triggers (#4271)
Andrew Reynolds [Wed, 15 Apr 2020 02:28:57 +0000 (21:28 -0500)]
Fix combinations of cegqi and non-standard triggers (#4271)

Counterexample-guided instantiation may produce quantified formulas with INST_CONSTANT nodes, which are also used as patterns for non-standard triggers for E-matching. This fixes a few combinations that were problematic.

Fixes #4250, fixes #4254, fixes #4269 and fixes #4281.

4 years agoDisable preregistration of instantiations for cegqi in incremental (#4251)
Andrew Reynolds [Wed, 15 Apr 2020 01:54:54 +0000 (20:54 -0500)]
Disable preregistration of instantiations for cegqi in incremental (#4251)

Fixes #4243.

4 years agoDisable macros when higher-order (#4266)
Andrew Reynolds [Tue, 14 Apr 2020 23:19:06 +0000 (18:19 -0500)]
Disable macros when higher-order (#4266)

Fixes #4160.

4 years agoFix relevant domain computation for nested quantifiers coming from CEGQI (#4235)
Andrew Reynolds [Tue, 14 Apr 2020 21:27:29 +0000 (16:27 -0500)]
Fix relevant domain computation for nested quantifiers coming from CEGQI (#4235)

Fixes #4228. That benchmark now times out.

4 years agoRemove a few options (#4295)
Andrew Reynolds [Tue, 14 Apr 2020 20:27:33 +0000 (15:27 -0500)]
Remove a few options (#4295)

These options are not robust and are not used.

Fixes #4282 and fixes #4291.

4 years agoRemove a few spurious assertions (#4294)
Andrew Reynolds [Tue, 14 Apr 2020 19:38:01 +0000 (14:38 -0500)]
Remove a few spurious assertions (#4294)

Fixes #4290 and fixes #4292.

4 years agoRemove early type check option (#4234)
Andrew Reynolds [Tue, 14 Apr 2020 18:38:20 +0000 (13:38 -0500)]
Remove early type check option (#4234)

Required to decouple options from NodeManager.

This option is now always enabled in debug, and disabled in production.

4 years agoRemove argument extender (#4223)
Andrew Reynolds [Tue, 14 Apr 2020 17:37:26 +0000 (12:37 -0500)]
Remove argument extender (#4223)

This was a utility class for dynamically changing argc/argv.

4 years agoRemove mergePredicates from EqualityEngine interface (#4305)
Andrew Reynolds [Tue, 14 Apr 2020 16:42:00 +0000 (11:42 -0500)]
Remove mergePredicates from EqualityEngine interface (#4305)

This function was equivalent to asserting an equality. Removing it for the sake of simplicity.

4 years agoFix dump-unsat-cores-full (#4303)
Andrew Reynolds [Tue, 14 Apr 2020 15:52:01 +0000 (10:52 -0500)]
Fix dump-unsat-cores-full (#4303)

This adds a fix to ensure dump-unsat-cores-full works by modifying the public options function. This options currently does not work since dumpUnsatCores is only set internally now. This fix is only required until options are refactored so that SmtEngine owns the authoritative copy of options.

4 years agoFix SyGuS define-fun printing from benchmarks coming from v1 parser (#4256)
Andrew Reynolds [Mon, 13 Apr 2020 21:27:48 +0000 (16:27 -0500)]
Fix SyGuS define-fun printing from benchmarks coming from v1 parser (#4256)

A recent change made it so that defined functions would print as the anonymous lambda corresponding to their definition if the SyGuS v1 parser was used. This was caused by comparison with the wrong kind in the new API.

Notice that the v2 parser does not have this issue.

This also adds a regression to ensure this behavior is maintained by the SyGuS v2 parser.

4 years agoFixes for extended rewriter (#4278)
Andrew Reynolds [Sun, 12 Apr 2020 20:10:31 +0000 (15:10 -0500)]
Fixes for extended rewriter (#4278)

Fixes #4273 and fixes #4274 .

This also removes a spurious assertion from the Node::substitute method that the result node is not equal to the domain. This is violated for f(f(x)) { f(x) -> x }.

4 years agoMove slow nl regression to regress3 (#4276)
Andrew Reynolds [Sun, 12 Apr 2020 16:01:24 +0000 (11:01 -0500)]
Move slow nl regression to regress3 (#4276)

Should fix nightlies.

4 years agoAdd skip predicate to node traversal. (#4222)
Alex Ozdemir [Sat, 11 Apr 2020 17:16:05 +0000 (10:16 -0700)]
Add skip predicate to node traversal. (#4222)

Sometime you want to skip specific sub-DAGs when traversing a node. For example, you might be doing a transformation with a cache, and want to skip sub-DAGs that you've already processed.

This PR would add a skipIf builder method to NodeDfsIterable, which allows the user to provide a predicate according to which nodes will be omitted from the subsequent traversal.

4 years agoEnsure exported sygus solutions match grammar (#4270)
Andrew Reynolds [Sat, 11 Apr 2020 04:37:43 +0000 (23:37 -0500)]
Ensure exported sygus solutions match grammar (#4270)

Previously we were doing rewriting/expand definitions during grammar normalization, which overwrote the original sygus operators. The connection to the original grammar was maintained via the SygusPrintCallback utility, which ensured that a sygus term printed in a way that matched the grammar.

We now have several use cases where solutions from SyGuS will be directly exported to the user, including the current use of get-abduct. This means that the terms must match the grammar, and we cannot simply rely on the print callback.

This moves the code to normalize sygus operators to datatypes utils, where the conversion between sygus and builtin terms takes place. This allows a version of this function where isExternal = true, which constructs terms matching the original grammar.

This PR enables the SyGuS API to have an accurate getSynthSolution method. It also will eliminate the need for SygusPrintCallback altogether, once the v1 parser is deleted.

4 years agoSplit the non-linear solver (#4219)
Andrew Reynolds [Sat, 11 Apr 2020 00:15:18 +0000 (19:15 -0500)]
Split the non-linear solver (#4219)

This splits the "non-linear solver" from "NonlinearExtension". The non-linear solver is the module that implements the inference schemas whereas NonlinearExtension is the glue code that manages the solver(s) for non-linear.

This also involves moving utilities from the non-linear solver to their own file.

4 years agoExplain non-emptiness by non-zero length in strings (#4257)
Andrew Reynolds [Fri, 10 Apr 2020 16:15:22 +0000 (11:15 -0500)]
Explain non-emptiness by non-zero length in strings (#4257)

Several kinds of splitting lemmas in the strings solver can sometimes be avoided by observing that str.len(x) != 0 implies that x is non-empty. This generalizes the check for whether x is non-empty is explainable in the current context.

4 years agoAdd a few stats to strings (#4252)
Andrew Reynolds [Fri, 10 Apr 2020 15:45:52 +0000 (10:45 -0500)]
Add a few stats to strings (#4252)

To give an idea of the high-level behavior.

4 years agoTowards proper use of resource managers (#4233)
Andrew Reynolds [Fri, 10 Apr 2020 00:19:40 +0000 (19:19 -0500)]
Towards proper use of resource managers (#4233)

Resource manager will be owned by SmtEngine in the future. This passes the resource manager cached by SmtEnginePrivate to the PropEngine created by SmtEngine instead of using the global pointer. It also makes a few preprocessing passes use the resource manager they already have access to and should use.

4 years agoCI: Add a step to list dependencies. (#4255)
Mathias Preiner [Thu, 9 Apr 2020 22:57:45 +0000 (15:57 -0700)]
CI: Add a step to list dependencies. (#4255)

4 years agoDisable slow sygus regression (#4232)
Andrew Reynolds [Thu, 9 Apr 2020 18:53:06 +0000 (13:53 -0500)]
Disable slow sygus regression (#4232)

A regress2 SyGuS benchmark is taking 110 seconds in production on my machine. This was likely caused by the recent update v1 -> v2, which impacts the internal representation and hence the search. Disabling for now.

4 years agoSplit ProcessAssertions module from SmtEngine (#4210)
Andrew Reynolds [Thu, 9 Apr 2020 01:26:11 +0000 (20:26 -0500)]
Split ProcessAssertions module from SmtEngine (#4210)

This is a step towards refactoring the SmtEngine. It splits several core components of SmtEnginePrivate to its own independent module, ProcessAssertions which is responsible for applying preprocessing passes , simplification and expand definitions.

The main change involved moving these functions from SmtEnginePrivate to this new class. A few other minor changes were done to make this move:

A few things changed order within processAssertions to allow SmtEnginePrivate-specific things to happen outside of the main scope of processAssertions.
processAssertions had some logic to catch incompatible options and silently disable options. This was moved to setDefaults.
A few data members in SmtEngine were moved to ProcessAssertions.
Two utilities that were sitting in smt_engine.cpp were moved to their own files.
Another refactoring step will be to make ProcessAssertions take only the utilities it needs instead of taking a SmtEngine reference. This requires further detangling of Options.

4 years agoAdded CHOOSE operator for sets (#4211)
mudathirmahgoub [Wed, 8 Apr 2020 23:24:16 +0000 (18:24 -0500)]
Added CHOOSE operator for sets (#4211)

This PR enables THEORY_UF by default for sets and adds the operator CHOOSE for sets which returns an element from a given set. The semantics is as follows:

If a set A = {x}, then the term (choose A) is equivalent to the term x.
If the set is empty, then (choose A) is an arbitrary value.
If the set has cardinality > 1, then (choose A) will deterministically return an element in A.

4 years agoPerform theory widening eagerly (#4044)
Andres Noetzli [Wed, 8 Apr 2020 21:38:09 +0000 (14:38 -0700)]
Perform theory widening eagerly (#4044)

Fixes #3971 and fixes #3991. In incremental mode, the logic can change from one
(check-sat) call to another. In the reported issue, we start with QF_NIA
but then switch to QF_UFNIA because there is a div term (which has a UF in
its expanded form). Dealing with this issue is challenging in general. As a
result, we have decided not to allow theory widening in
Theory::expandDefinitions() anymore but instead to do it eagerly in
SmtEngine::setDefaults().

4 years agoFix dump models and dump proofs (#4230)
Andrew Reynolds [Wed, 8 Apr 2020 20:24:55 +0000 (15:24 -0500)]
Fix dump models and dump proofs (#4230)

A recent commit (45e489e) made it so that dump-models did not automatically enable produce-models in the global options object, but instead the SmtEngine enabled produce-models internally. The code for dump-models and dump-proofs was (perhaps out of paranoia) checking produce-models and produce-proofs. This removes this check, which is the correct thing to do since SmtEngine internally ensures produce-models is set.

4 years agoEliminate call to currentNM within NodeManager (#4227)
Andrew Reynolds [Wed, 8 Apr 2020 13:50:14 +0000 (08:50 -0500)]
Eliminate call to currentNM within NodeManager (#4227)

Eliminates 2 unintentional calls to the global access function.

4 years agoCleanup deprecated quantifiers attribute features (#4215)
Andrew Reynolds [Tue, 7 Apr 2020 03:48:13 +0000 (22:48 -0500)]
Cleanup deprecated quantifiers attribute features (#4215)

4 years agoDisable slow regression (#4221)
Andrew Reynolds [Tue, 7 Apr 2020 01:58:17 +0000 (20:58 -0500)]
Disable slow regression (#4221)

Benchmark recently became slow, disable for now.

4 years agoEnum for all remaining string inferences (#4220)
Andrew Reynolds [Tue, 7 Apr 2020 00:00:13 +0000 (19:00 -0500)]
Enum for all remaining string inferences (#4220)

Merges the Flat Form inferences enum into Inferences. Adds documentation for (most of) these inferences. Removes the old infrastructure for inferences based on a debug string in InferenceManager.

4 years agoRemove links field in all toml files (#4201)
Andrew Reynolds [Mon, 6 Apr 2020 21:44:01 +0000 (16:44 -0500)]
Remove links field in all toml files (#4201)

This includes:

All options pertaining to SMTEngine are now handled at the top of setDefaults.
smtlibStrict was deleted in favor of a script.
statsEveryQuery enables stats by modifying a public option function. This is a slight hack but this code will likely get refactored as well soon.
A few other changes:

Fix a bug in SMTEngine: defineFunction should finalize options.
Call setDefaults before initilizing the TheoryEngine and ProofManager. This is necessary so that the PROOF(...) macro works earlier during initialization.
The next step will be to remove the links infrastructure for the options infrastructure. This will enable further detangling of our options dependencies.

4 years agoRefactor disequality processing in string solver (#4209)
Andres Noetzli [Mon, 6 Apr 2020 20:56:35 +0000 (13:56 -0700)]
Refactor disequality processing in string solver (#4209)

This commit refactors disequality processing in the core string solver.
It also adds statistics for the inferences and splits in those methods.
No semantic changes intended.

4 years agoNew C++ API: Rename Solver::mkTermInternal. (#4217)
Aina Niemetz [Mon, 6 Apr 2020 20:29:05 +0000 (13:29 -0700)]
New C++ API: Rename Solver::mkTermInternal. (#4217)

This is for consistency with the other helper functions.

4 years agoAdd missing stat for lemmas based on inferences (#4214)
Andrew Reynolds [Sun, 5 Apr 2020 20:51:20 +0000 (15:51 -0500)]
Add missing stat for lemmas based on inferences (#4214)

4 years agoAdd safe_print() support for Kind enum (#4213)
Andres Noetzli [Sun, 5 Apr 2020 16:42:59 +0000 (09:42 -0700)]
Add safe_print() support for Kind enum (#4213)

This commit changes the mkkind script to generate a toString()
method for the Kind enum. This method can be used by the
safe_print() function to print statistics if CVC4 has been terminated
before solving a problem. The stats for strings include statistics that
rely on printing kinds (e.g. the number of reductions done of each
kind).

4 years agoType-independent preregistration of empty word (#4205)
Andrew Reynolds [Sun, 5 Apr 2020 06:52:37 +0000 (01:52 -0500)]
Type-independent preregistration of empty word (#4205)

Also removes another instance of empty string in TheoryStrings for consistency sake.

4 years agoNew C++ API: Remove Op::getSort(). (#4208)
Aina Niemetz [Sat, 4 Apr 2020 01:53:41 +0000 (18:53 -0700)]
New C++ API: Remove Op::getSort(). (#4208)

4 years agoUpdate theory rewriter ownership, add stats to strings (#4202)
Andres Noetzli [Fri, 3 Apr 2020 21:52:45 +0000 (14:52 -0700)]
Update theory rewriter ownership, add stats to strings (#4202)

This commit adds statistics for string rewrites. This is work towards proof
support in the string solver. At a high level, this commit adds a pointer to a
`SequenceStatistics` in the rewriters and modifies
`SequencesRewriter::returnRewrite()` to count the rewrites done. In practice,
to make this work requires a couple of changes, some of them temporary:

- We can't have a single `Rewriter` instance shared between different
  `SmtEngine` instances anymore. Thus the `Rewriter` is now owned by the
  `SmtEngine` and calling the rewriter retrieves the rewriter associated with
  the current `SmtEngine`. This is a temporary workaround before we get rid of
  singletons.
- Methods in the `SequencesRewriter` and the `StringsRewriter` are made
  non-`static` because they need access to the statistics instance.
- `StringsEntail` now has non-`static` methods because it needs a reference to
  the sequences rewriter that it can call.
- The interaction between the `StringsRewriter` and the `SequencesRewriter`
  changed: the `StringsRewriter` is now a proper `TheoryRewriter` that inherits
  from `SequencesRewriter` and calls its `postRewrite()` before applying its
  own rewrites (this is essentially a reversal of roles from before: the
  `SequencesRewriter` used to call `static` methods in the `StringsRewriter`).
- The theory rewriters are now owned by the individual theories. This design
  mirrors the `EqualityEngine`s owned by the individual theories.

4 years agoOnly rewrite lambdas via array representations when constant (#4203)
Andrew Reynolds [Fri, 3 Apr 2020 18:07:56 +0000 (13:07 -0500)]
Only rewrite lambdas via array representations when constant (#4203)

Fixes #4170.

4 years agoSplit sequences rewriter (#4194)
Andrew Reynolds [Fri, 3 Apr 2020 14:43:12 +0000 (09:43 -0500)]
Split sequences rewriter (#4194)

This is in preparation for making the strings rewriter configurable for stats.

This moves all utility functions from SequencesRewriter to a proper place. This includes three new groupings of utility functions: those involving arithmetic entailments, those involving string entailments, those involving regular expression entailments. Here, "entailments" loosely means any question regarding a (set of) terms or formulas.

No major code changes. Added some missing documentation and lightly cleaned a few blocks of code in cpp.

4 years agoRemove undocumented/uncommon aliases (#4177)
Andres Noetzli [Thu, 2 Apr 2020 18:59:34 +0000 (11:59 -0700)]
Remove undocumented/uncommon aliases (#4177)

This commit removes aliases that are either undocumented or associated
with uncommon options.

Note: The removal of --statistics, --language, and --output-language may be controversial. The options were undocumented previously and I am in favor of simplifying the options as much as possible, however. Please let me know what you think.

4 years agoIntroduce enums for all string inferences, excluding the core solver (#4195)
Andrew Reynolds [Thu, 2 Apr 2020 05:01:21 +0000 (00:01 -0500)]
Introduce enums for all string inferences, excluding the core solver (#4195)

Introduce enum values for all calls to sendInference outside of the core solver.

This included some minor refactoring.

4 years agoInitialize theory rewriters in theories (#4197)
Andres Noetzli [Thu, 2 Apr 2020 02:35:25 +0000 (19:35 -0700)]
Initialize theory rewriters in theories (#4197)

Until now, the `Rewriter` was responsible for creating `TheoryRewriter`
instances. This commit adds a method `mkTheoryRewriter()` that theories
override to create an instance of their corresponding theory rewriter.
The advantage is that the theories can pass additional information to
their theory rewriter (e.g. a statistics object).

4 years agoSupport char smt-lib syntax (#4188)
Andrew Reynolds [Wed, 1 Apr 2020 05:30:44 +0000 (00:30 -0500)]
Support char smt-lib syntax (#4188)

Towards support for the strings standard.

Adds support to (_ char #x ... ) syntax for characters.

4 years agoFix install for ANTLR contrib script and CI dependency caching. (#4196)
Mathias Preiner [Wed, 1 Apr 2020 04:31:13 +0000 (21:31 -0700)]
Fix install for ANTLR contrib script and CI dependency caching. (#4196)

4 years agoRename checkValid/query to checkEntailed. (#4191)
Aina Niemetz [Wed, 1 Apr 2020 01:12:16 +0000 (18:12 -0700)]
Rename checkValid/query to checkEntailed. (#4191)

This renames api::Solver::checkValidAssuming to checkEntailed and
removes api::Solver::checkValid. Internally, SmtEngine::query is renamed
to SmtEngine::checkEntailed, and these changes are further propagated to
the Result class.

4 years agoSwitch to GitHub actions for CI (#4190)
Mathias Preiner [Tue, 31 Mar 2020 23:44:03 +0000 (16:44 -0700)]
Switch to GitHub actions for CI (#4190)

Enable CI with GitHub actions, add macOS builds and disable Travis CI.

4 years agoFix fmf benchmark (#4193)
Andrew Reynolds [Tue, 31 Mar 2020 20:25:01 +0000 (15:25 -0500)]
Fix fmf benchmark (#4193)

Fixes regress1.

This benchmark is too delicate in the current state.

4 years agoRemove replay and use-theory options and idl (#4186)
Andrew Reynolds [Tue, 31 Mar 2020 19:27:04 +0000 (14:27 -0500)]
Remove replay and use-theory options and idl (#4186)

Towards disentangling Options / NodeManager / SmtEngine.

This PR removes options --use-theory=NAME and --replay/--replay-log. Both of these options are highly complex, unused, and lead to complications when implementing the way options and our build system work.

The first is motivated by making TheoryEngine use an "alternate" theory, which appears to e.g. make it so that TheoryIdl could entirely replace TheoryArith. I believe this is too heavy handed of a solution: there should a consistent TheoryArith class, and options should be used to enable/disable alternate modules within it.

The second attempts to replay low level decisions from the SAT solver. It is documented as not working (in 1.0). I do not believe this is worth salvaging.

It also removes the solver in src/theory/idl, which cannot be enabled after this commit.

4 years agoFix strange bound regression (#4192)
Andrew Reynolds [Tue, 31 Mar 2020 16:49:02 +0000 (11:49 -0500)]
Fix strange bound regression (#4192)

Several things have happened with this regression lately, in chronological order:
(1) Instantiations involving bounded set quantifiers were changed to use choice to represent symbolic instantiations,
(2) fmf-bound was decoupled from finite-model-find (the latter is not enabled when the former is),
(3) choice was set to be an "unevaluated" kind (in 0060de3).

After (1) and (2), for the regression test/regress/regress1/fmf/fmf-strange-bounds.smt2, CVC4 was answering "sat" correctly but internally there was a source of incompleteness. In particular, a choice term was being generated in an instantiation that was later incorrectly evaluated, thus allowing CVC4 to skip an instantiation it shouldn't have.

The recent commit of (3) resolved this issue, making it so that choice is not an evaluated kind. This meant the benchmark went "sat" -> "unknown".

This PR fixes this issue by enabling --finite-model-find, which is now necessary to answer "sat".

It also adds a further test quantifier that was used in debugging this issue.

Fixes regress1.