CSPACE-2666 adding payload files

CSPACE-3090 Added code to create default admin and reader users for each tenancy at startup. These are tied to the respective appropriate roles. Disabled code in sql scripts to create test@collectionspace.org and other misc users/accounts.

CSPACE-3078

CSPACE-3149: Updated service pom artifact version to 1.1-SNAPSHOT -from 0.9.1-SNAPSHOT.

CSPACE-2953: A request to create a duplicate role now returns: "POST failed: 23000 : Duplicate entry 'ROLE_1_REM-1' for key 'rolename'"

CSPACE-3135: Added three fields in Loan Out records to a repeatable Loaned Object Status group.

CSPACE-1028

CSPACE-2933: Added client tests for repeatable currentLocation group in Intake service records. Renamed outer element to currentLocationGroupList for naming consistency with other recent repeatability changes.

NOJIRA modifying canonical dimension service test expected codes

NOJIRA removing @Test from DimensionXmlReplayTest.  It was just a usage example anyway.

CSPACE-3078 on trunk, security.xml and xml-replay-master.xml now succeed on multiple re-runs, so including in main test suite

CSPACE-2099: "displayName" now part of Role payload.  If not sent in create payload, it will be synthesized from the required "roleName" element.

CSPACE-3078 modified expected result codes

CSPACE-3078 modified expected result codes

NOJIRA commit

NOJIRA: merging from branch sprint

NOJIRA: merging from branch sprint

CSPACE-3158: Adding change that qualified role names with tentant ID now that App layer got a chance to update their tests.

CSPACE-3158: Backing out change that qualified role names with tentant ID until App layer gets a chance to update their tests.

CSPACE-3158: Backing out change that qualified role names with tentant ID until App layer gets a chance to update their tests.

CSPACE-3158: All new accounts created by the services need to have the "ROLE_SPRING_ADMIN" role -this is a private internal service-level only role. This role will not be exposed to the end user or service consumer

CSPACE-2932: Moved utility routine to return primary value from a multivalued list to a base class.

CSPACE-2932: Implement the Main Body group of three fields as a repeatable group in Organization item records, in the services layer. Complications include a short display name computed from one of those three fields, shortName; a missing shortName field in the UI layer reflecting possible confusion with the shortIdentifier field; and a change in the summary field for app layer mini-records to the displayName field, from the longName field. Although all services and app layer tests pass, and behavior in the UI appears appropriate, we should remain vigilant for any unexpected side effects that may crop up from this change.

CSPACE-3070: Fixed several existing boundary condition errors that were revealed by the previous commit -see http://fisheye.collectionspace.org/changelog/collectionspace/?cs=3415

CSPACE-3070: Fix a problem that was causing the Spring tables not to be updated after removing permissions.

CSPACE-2933: Moved three Current Location-related fields into a repeatable group - services portion of this work.

CSPACE-3150: Removed debugging print statements.

CSPACE-3150: Spring OID now has a mapping entry in our (CSpace) permission administration tables for clarity and debugging purposes.

CSPACE-3070 - Added support to clear the Spring ACL cache when we make changes (adding or removing perms from a role). This should fix a number of the problems we have been seeing with changes not being enforced. Awaiting better tests to consider the bug closed.
Also propagated another bug fix in AuthorizationDelegate to a separate case. Made some comments to indicate some places where we need to have a more robust (tenant-specific) name for roles, to address CSPACE-3144.

NOJIRA - Partial fix for bugs that occur when displayName of authority term changes. If the change is only in case, the terms were found in the query, but not as we built the payload specifics. This lead to a blank page when viewing the authority term (because the services were returning a 500).
If the change to a displayName is more substantive, the referencing objects will just not be found (see also CSPACE-1927).

NOJIRA: moved debug statement to before Assert statement so that debug info is available if Assertion fails

NOJIRA: added useful toSTring method

NOJIRA: made strings static final

NOJIRA: removed dead code

CSPACE-3070: Spring sid entries were not using "ROLE_" prefixed role names.

CSPACE-2987: Added Nuxeo "prefetch" to all services returning list results that appear in the "My CollectionSpace" page.

CSPACE-2987: Added Nuxeo "prefetch" to all services returning list results that appear in the "My CollectionSpace" page.

NOJIRA

CSPACE-3053: Updated read me file with a first pass at designating 'largetext' fields in object and procedural records - those which require storage of > 500 characters, which is Nuxeo's per-field default for MySQL.  The contents of this file must currently be pasted into an active Nuxeo default-repository-config.xml configuration file, such as in /usr/local/share/jboss/templates/collectionspace_mysql/config, and per a follow-on JIRA, might instead be integrated int the services deployment process.

CSPACE-2779: Added test to create a CollectionObject, one of whose fields contains non-Latin1 Unicode UTF-8 characters. Test is initially commented out so as not to fail on systems where the underlying database system is not configured to use the UTF-8 character set.

CSPACE-3029: Setup Nuxeo "prefetch" configuration for collectionobjects_common list item results for significant performance increase in result list retrieval.  This work was completed last week and only now being committed to the trunk.

CSPACE-2987: Setup Nuxeo "prefetch" configuration for persons_common list item results for significant performance increase in result list retrieval.

CSPACE-2975: Correctly removed LocationAuthorityValidatorHandler reference; added back LocationValidatorHandler reference inadvertently removed from tenant bindings.

CSPACE-2975: Temporarily removing references to LocationValidatorHandler in tenant bindings until class not found issue is identified and resolved.

CSPACE-2975: Services tenant bindings configuration now specifies validator handlers for LocationAuthority, OrgAuthority, and PersonAuthority; these had been inadvertently omitted. Added tests to Person service to verify that non-word chars in short identifiers / shortIds submitted in request payloads, when creating a Person authority or Person item, return the expected 400 BadRequest response.

CSPACE-2969: refObjs tests to retrieve records that reference a specific term now do more than just check status codes in responses.

CSPACE-2958 Add pagination info to return payloads for refObjs and authorityrefs. The latter also support pagination now, where it did not before. This may seem silly, given that it is just for a given object, but it may be useful to limit the number that are shown on the right side of the UI.

CSPACE-2902: Adding changes for upgrade of services to Nuxeo 5.3.2 (from 5.2M4).

CSPACE-2537 and CSPACE-2955. Added support for ShortDisplayName to location, org, and person authority items. Added shortIdentifier to all authority item list results, and updated the fieldsReturned properties accordingly.

CSPACE-2902: Adding new configuration settings for Nuxeo 5.3.2 upgrade.

CSPACE-2902: Undeploy no longer halts if database script directory is missing from the cspace server.

CSPACE-2723 Added information about the fields returned in list results. Returned as a string of concatenated field names delimited with '|' chars. Missed this one in earlier checkin.

CSPACE-2723 Added information about the fields returned in list results. Returned as a string of concatenated field names delimited with '|' chars.

CSPACE-2950: More ad-hoc changes to performance logging with the goal of mere adequacy for 1.0 beta work.  Generates CSV entries more readily comparable across layers, interleaved with services-specific log entries.

CSPACE-2950: Minor generalization of Profiler class. Temporary expedient in log4j config file and CSpace filter class to interleave CSV-style log messages with existing messages, to give Kasper a starting point. These CSV-style messages should instead be logged via a separate file appender.

CSPACE-2902: Some of the changes necessary for a upgrade to Nuxeo 5.3.

CSPACE-2902: Some of the changes necessary for a upgrade to Nuxeo 5.3.

CSPACE-2950: Initial placeholder log that more or less matches the format generated by the app layer.  Need to work with Chris and Kasper to ensure that this is useful for cross-layer perf evaluation.

CSPACE-2884: Service call to retrieve permissions for a user without having to go through all the roles

CSPACE-2902: Create a resource text file to contain a list of CollectionObject fields that we'll instruct Nuxeo in its config files to convert to type "longtext".

CSPACE-2863: Trivial modification of comment to reference current discussion about how to handle cases where a term is used in more than one source field in a record; happened across this when working on CSPACE-2783.

CSPACE-2783: Lists of referencing objects now return actual source field names, rather than ancestor field names.

CSPACE-2783: Trivial tweak to short identifiers, display names in Intakes service client test of referencing objects for organization items, to better distinguish organizations from persons.

CSPACE-2884: Service call to retrieve permissions for a user without having to go through all the roles

CSPACE-2021 - Updated to use more recent version of the RestEasy, that fixes a problem encoding non-latin1 Unicode chars as parameters. This caused search tests to pass unicode search terms and terms with punctuation incorrectly.
Changed the handling of partial-term and keyword search to properly escape punctuation, allowing for search on names like O'Hara.
Added beginnings of logic to support search on partial-keyword (keywords with wildcards) and search on keyword phrases (in quotes).

NOJIRA - Added comment for ease of debugging AuthZ code.

CSPACE-2926: SQL script that seeds default roles is using incorrect ID for ROLE_ADMINISTRATOR -it is using "1" instead of "0".

CSPACE-2893: In the Acquisition service, enabled the retrieval of terms used (authorityrefs) from the 'owners->owner' repeatable scalar field.

NOJIRA: Creating a branch for exploratory work on upgrading from Nuxeo 5.2 to 5.3

CSPACE-650: Added test case for keyword search on a Unicode UTF-8 string to CollectionObject tests.  Test currently fails and is commented out so as not to break the services tests. (This could potentially be due to a RESTEasy bug that Patrick identified in an SOA-Tech list posting on 2010-09-07.)

CSPACE-1886: Added explanatory comments re sample name used in partial term matching tests.

CSPACE-1886: Corrected construction of a Unicode UTF-8 term against which to test partial term querying, per Patrick's comment that \u escapes must be in chars, not Strings.

CSPACE-2671: Corrected trivial typo in comment identifying one repeatable group to be implemented in Cataloging schema.

CSPACE-2544: Values for the sortBy query parameter are now checked. The use of an invalid value will cause the 'read list' request to fail. This checking introduces a temporary limitation of sorting only on a single field name; a new JIRA will be filed for the task of expanding this to permit sorting on multiple fields.

CSPACE-2881: Search test of CollectionObject service now has tests for searches on keywords both found within a single field, and for keywords found across two different fields.

CSPACE-2654: when you create role permissions the url returned is wrong

CSPACE-2334,CSPACE-2761,CSPACE-2762: Corrected error in Movement ID pattern; added Object Exit and Transfer of Title ID pattern, to the set of default ID generators.

CSPACE-2142: When a role is deleted, its association(s) with account(s) are not deleted.  Consequently, "ghost" roles are being returned in the /accounts/{csid}/accountroles list.

CSPACE-2066: Added additional test to verify that services are correctly returning authority references from multiple value instances of a repeatable scalar field.

CSPACE-2678: actionGroup not always returned in permroles list views.  PermRoles were not being derived from existing Roles and Permissions.  Instead, they were being created as independent entities.  Now the Import util still creates them as independent payloads, but service calls will create derived entities.

CSPACE-2542 Bug was a side effect of an improperly constructed Person item (passing in a payload with inAuthority set to something different from the authority the Person was actually being added to). This is turn was not detected by services code which should have forced this to be correct. Changed services code for authorities to ensure that this cannot happen. inAuthority values in payloads will be ignored. Made analogous changes to contact service, which has parent references.

CSPACE-2338: Develop Basic Object Exit Code developed by Laramie and submitted as a patch.

CSPACE-2338: Develop Basic Object Exit Code developed by Laramie and submitted as a patch.

CSPACE-2735: Security interceptor not handling HyperJaxb3 IDs properly -preventing gets and deletes on permrole and accountrole relationships.

CSPACE-2542 Modified the handling of Authorities to support range of specifiers for authority and item, across operations. Modified authorities that support contact sub-resources to support all specifier forms for the authority and item, across operations. Refactored the AuthorityResource classes for the authorities that support contact sub-resources, to simplify code and ensure consistent support.

CSPACE-2727: AuthZ management resources were not responding to gets of /accountroles/{csid}, /permroles/{csid} correctly.  These gets now return the details of the relationship records.

CSPACE-2146: Cannot delete an accountrole... Also,  CSPACE-2632, CSPACE-2632

CSPACE-2541,CSPACE-2711: 'owner' field now a repeatable scalar ('owners->owner') in Acquisition records.  Multiple value instances of 'owner' field now returned in summary items in lists of Acquisition records, as well. 'fieldCollectionEventName' field now a repeatable scalar ('fieldCollectionEventNames->fieldCollectionEventName') in CollectionObject, Intake, and Acquisition records. Changes made to Nuxeo doctype schemas, and thus requires an 'ant deploy' and a 2-server restart to reflect these changes in the services layer.

CSPACE-1355: Removed currentLocation and normalLocation fields from authRef properties for Movement service for now, as these two fields will hold plain text values, rather than authority references, in 1.0 alpha.

CSPACE-2699: Dates in the current format emitted by the UI date picker are now recognized as valid values for date fields in the services layer.

CSPACE-2670. Added support for address and accessnote in location schema.

CSPACE-2665. Added new fields to the summary list payloads for Movement.

CSPACE-2663, CSPACE-2664. Added new fields to the summary list payloads for Loansin and Loansout.

CSPACE-2661, CSPACE 2662. Added new fields to the summary list payloads for Intake and Acquisition.

CSPACE-2660. Added first responsibleDepartment (from list) and the objectName field from the first objectName repeating structure, to the summary list schema.

NOJIRA - remove some stale comments. No functional changes.

CSPACE-2675  Add CSID to payload of Authority documents, since may be retrieved via refname, and not CSID.

CSPACE-2677: Services document framework (and Movement service, in which date fields are first being prototyped) once again allows entry of blank / empty dates in date fields, an obvious requirement in retrospect.

CSPACE-2655: Added actionGroup to results returned in authorization/roles/*/permroles

CSPACE-2671: Multiple changes to CollectionSpace record schema in the services layer, reflecting 1.0 alpha changes specified by the Functional team.  Added ten (10) fields, removed two (2) fields, and converted six (6) fields from scalar to repeatable scalar.  See comment in issue for list of fields changed.  No services tests failed after these changes, however there are no tests currently in place to verify that these fields are working; that work is identified to be carried out in CSPACE-2609.