Sequence view of uss_qualifier test run

Test run

Test characteristic Value
Test run identifier TR-9ef10e8
Start time 2026-05-27 19:55:22 UTC
End time 2026-05-27 19:56:13 UTC
Test baseline identifier TB-e2eec9b
Environment identifier TE-4f53cda
Codebase version interuss/monitoring/v0.30.0
Commit hash d1166f192120200e60d4a63515b6847f6e2311e6
Artifact generated by interuss/monitoring/v0.30.0

Resources configuration

  • Baseline
    :
    • utm_auth (resources.communications.AuthAdapterResource)
      :
      • Specification
        :
        • environment_variable_containing_auth_spec
          :
          AUTH_SPEC
        • scopes_authorized
          :
          • item_1
            :
            utm.strategic_coordination
          • item_2
            :
            utm.conformance_monitoring_sa
          • item_3
            :
            utm.availability_arbitration
          • item_4
            :
            utm.constraint_management
          • item_5
            :
            rid.service_provider
          • item_6
            :
            rid.display_provider
          • item_7
            :
            dss.write.identification_service_areas
          • item_8
            :
            dss.read.identification_service_areas
    • second_utm_auth (resources.communications.AuthAdapterResource)
      :
      • Specification
        :
        • environment_variable_containing_auth_spec
          :
          AUTH_SPEC_2
        • scopes_authorized
          :
          • item_1
            :
            utm.strategic_coordination
          • item_2
            :
            utm.conformance_monitoring_sa
          • item_3
            :
            utm.availability_arbitration
          • item_4
            :
            utm.constraint_management
          • item_5
            :
            rid.service_provider
          • item_6
            :
            rid.display_provider
          • item_7
            :
            dss.write.identification_service_areas
          • item_8
            :
            dss.read.identification_service_areas
    • utm_client_identity (resources.communications.ClientIdentityResource)
      :
      • Specification
        :
        • whoami_audience
          :
          localhost
        • whoami_scope
          :
          rid.display_provider
      • Dependencies
        :
        • auth_adapter
          :
          From utm_auth resource
    • id_generator (resources.interuss.IDGeneratorResource)
      :
      • Specification
        :
      • Dependencies
        :
        • client_identity
          :
          From utm_client_identity resource
    • kentland_service_area_volume (resources.VolumeResource)
      :
      • Specification
        :
        • template
          :
          • outline_polygon
            :
            • vertices
              :
              • item_1
                :
                • lat
                  :
                  37.1853
                • lng
                  :
                  -80.614
              • item_2
                :
                • lat
                  :
                  37.2148
                • lng
                  :
                  -80.614
              • item_3
                :
                • lat
                  :
                  37.2148
                • lng
                  :
                  -80.544
              • item_4
                :
                • lat
                  :
                  37.1853
                • lng
                  :
                  -80.544
          • altitude_lower
            :
            • value
              :
              0.0
            • reference
              :
              W84
            • units
              :
              M
          • altitude_upper
            :
            • value
              :
              3048.0
            • reference
              :
              W84
            • units
              :
              M
          • start_time
            :
            • offset_from
              :
              • starting_from
                :
                • time_during_test
                  :
                  TimeOfEvaluation
                • next_day
                  :
                  None
                • next_sun_position
                  :
                  None
                • absolute_time
                  :
                  None
                • offset_from
                  :
                  None
                • use_timezone
                  :
                  None
              • offset
                :
                1s
            • next_day
              :
              None
            • next_sun_position
              :
              None
            • time_during_test
              :
              None
            • absolute_time
              :
              None
            • use_timezone
              :
              None
          • end_time
            :
            • offset_from
              :
              • starting_from
                :
                • time_during_test
                  :
                  TimeOfEvaluation
                • next_day
                  :
                  None
                • next_sun_position
                  :
                  None
                • absolute_time
                  :
                  None
                • offset_from
                  :
                  None
                • use_timezone
                  :
                  None
              • offset
                :
                1h0m1s
            • next_day
              :
              None
            • next_sun_position
              :
              None
            • time_during_test
              :
              None
            • absolute_time
              :
              None
            • use_timezone
              :
              None
          • transformations
            :
            None
          • outline_circle
            :
            None
          • duration
            :
            None
    • kentland_service_area (resources.netrid.ServiceAreaResource)
      :
      • Specification
        :
        • base_url
          :
          https://testdummy.interuss.org/interuss/monitoring/uss_qualifier/configurations/dev/library/resources/kentland_service_area
      • Dependencies
        :
        • volume
          :
          From kentland_service_area_volume resource
    • kentland_planning_area_volume (resources.VolumeResource)
      :
      • Specification
        :
        • template
          :
          • outline_polygon
            :
            • vertices
              :
              • item_1
                :
                • lat
                  :
                  37.1853
                • lng
                  :
                  -80.614
              • item_2
                :
                • lat
                  :
                  37.2148
                • lng
                  :
                  -80.614
              • item_3
                :
                • lat
                  :
                  37.2148
                • lng
                  :
                  -80.544
              • item_4
                :
                • lat
                  :
                  37.1853
                • lng
                  :
                  -80.544
          • altitude_lower
            :
            • value
              :
              0.0
            • reference
              :
              W84
            • units
              :
              M
          • altitude_upper
            :
            • value
              :
              3048.0
            • reference
              :
              W84
            • units
              :
              M
          • transformations
            :
            None
          • start_time
            :
            None
          • outline_circle
            :
            None
          • end_time
            :
            None
          • duration
            :
            None
    • kentland_planning_area (resources.PlanningAreaResource)
      :
      • Specification
        :
        • base_url
          :
          https://testdummy.interuss.org/interuss/monitoring/uss_qualifier/configurations/dev/library/resources/kentland_planning_area
      • Dependencies
        :
        • volume
          :
          From kentland_planning_area_volume resource
    • kentland_problematically_big_area (resources.VolumeResource)
      :
      • Specification
        :
        • template
          :
          • outline_polygon
            :
            • vertices
              :
              • item_1
                :
                • lat
                  :
                  38.0
                • lng
                  :
                  -81.0
              • item_2
                :
                • lat
                  :
                  37.0
                • lng
                  :
                  -81.0
              • item_3
                :
                • lat
                  :
                  37.0
                • lng
                  :
                  -80.0
              • item_4
                :
                • lat
                  :
                  38.0
                • lng
                  :
                  -80.0
          • transformations
            :
            None
          • start_time
            :
            None
          • outline_circle
            :
            None
          • altitude_upper
            :
            None
          • end_time
            :
            None
          • duration
            :
            None
          • altitude_lower
            :
            None
    • che_non_conflicting_flights (resources.flight_planning.FlightIntentsResource)
      :
      • Specification
        :
        • file
          :
          • path
            :
            test_data.flight_intents.standard.non_conflicting
          • hash_sha512
            :
            9e49a876b0aaf78e224a6851900b06bb57f6d3b4ec6daaf7166d48a0d5e6450e595ff396c7c0c34f2ad87ea61d0f765490c38fb79573ffa921465b0750c3074a
        • transformations
          :
          • item_1
            :
            • relative_translation
              :
              • degrees_north
                :
                46.9748
              • degrees_east
                :
                7.4774
              • meters_up
                :
                605.0
    • test_exclusions (resources.dev.TestExclusionsResource)
      :
      • Specification
        :
        • allow_private_addresses
          :
          True
        • allow_cleartext_queries
          :
          True
    • scd_dss_instances (resources.astm.f3548.v21.DSSInstancesResource)
      :
      • Specification
        :
        • dss_instances
          :
          • item_1
            :
            • participant_id
              :
              uss1
            • base_url
              :
              https://dss.stage.iart.software
      • Dependencies
        :
        • auth_adapter
          :
          From utm_auth resource
    • netrid_dss_instances_v22a (resources.astm.f3411.DSSInstancesResource)
      :
      • Specification
        :
        • dss_instances
          :
          • item_1
            :
            • participant_id
              :
              uss1
            • rid_version
              :
              F3411-22a
            • base_url
              :
              https://dss.stage.iart.software
      • Dependencies
        :
        • auth_adapter
          :
          From utm_auth resource
    • netrid_dss_instances_v19 (resources.astm.f3411.DSSInstancesResource)
      :
      • Specification
        :
        • dss_instances
          :
          • item_1
            :
            • participant_id
              :
              uss1
            • rid_version
              :
              F3411-19
            • base_url
              :
              https://dss.stage.iart.software
      • Dependencies
        :
        • auth_adapter
          :
          From utm_auth resource

Full configuration

  • v1
    :
    • test_run
      :
      • resources
        :
        • resource_declarations
          :
          • utm_auth
            :
            • resource_type
              :
              resources.communications.AuthAdapterResource
            • specification
              :
              • environment_variable_containing_auth_spec
                :
                AUTH_SPEC
              • scopes_authorized
                :
                • item_1
                  :
                  utm.strategic_coordination
                • item_2
                  :
                  utm.conformance_monitoring_sa
                • item_3
                  :
                  utm.availability_arbitration
                • item_4
                  :
                  utm.constraint_management
                • item_5
                  :
                  rid.service_provider
                • item_6
                  :
                  rid.display_provider
                • item_7
                  :
                  dss.write.identification_service_areas
                • item_8
                  :
                  dss.read.identification_service_areas
            • dependencies
              :
          • second_utm_auth
            :
            • resource_type
              :
              resources.communications.AuthAdapterResource
            • specification
              :
              • environment_variable_containing_auth_spec
                :
                AUTH_SPEC_2
              • scopes_authorized
                :
                • item_1
                  :
                  utm.strategic_coordination
                • item_2
                  :
                  utm.conformance_monitoring_sa
                • item_3
                  :
                  utm.availability_arbitration
                • item_4
                  :
                  utm.constraint_management
                • item_5
                  :
                  rid.service_provider
                • item_6
                  :
                  rid.display_provider
                • item_7
                  :
                  dss.write.identification_service_areas
                • item_8
                  :
                  dss.read.identification_service_areas
            • dependencies
              :
          • utm_client_identity
            :
            • resource_type
              :
              resources.communications.ClientIdentityResource
            • dependencies
              :
              • auth_adapter
                :
                utm_auth
            • specification
              :
              • whoami_audience
                :
                localhost
              • whoami_scope
                :
                rid.display_provider
          • id_generator
            :
            • resource_type
              :
              resources.interuss.IDGeneratorResource
            • dependencies
              :
              • client_identity
                :
                utm_client_identity
            • specification
              :
          • kentland_service_area_volume
            :
            • resource_type
              :
              resources.VolumeResource
            • specification
              :
              • template
                :
                • outline_polygon
                  :
                  • vertices
                    :
                    • item_1
                      :
                      • lat
                        :
                        37.1853
                      • lng
                        :
                        -80.614
                    • item_2
                      :
                      • lat
                        :
                        37.2148
                      • lng
                        :
                        -80.614
                    • item_3
                      :
                      • lat
                        :
                        37.2148
                      • lng
                        :
                        -80.544
                    • item_4
                      :
                      • lat
                        :
                        37.1853
                      • lng
                        :
                        -80.544
                • altitude_lower
                  :
                  • value
                    :
                    0.0
                  • reference
                    :
                    W84
                  • units
                    :
                    M
                • altitude_upper
                  :
                  • value
                    :
                    3048.0
                  • reference
                    :
                    W84
                  • units
                    :
                    M
                • start_time
                  :
                  • offset_from
                    :
                    • starting_from
                      :
                      • time_during_test
                        :
                        TimeOfEvaluation
                      • next_day
                        :
                        None
                      • next_sun_position
                        :
                        None
                      • absolute_time
                        :
                        None
                      • offset_from
                        :
                        None
                      • use_timezone
                        :
                        None
                    • offset
                      :
                      1s
                  • next_day
                    :
                    None
                  • next_sun_position
                    :
                    None
                  • time_during_test
                    :
                    None
                  • absolute_time
                    :
                    None
                  • use_timezone
                    :
                    None
                • end_time
                  :
                  • offset_from
                    :
                    • starting_from
                      :
                      • time_during_test
                        :
                        TimeOfEvaluation
                      • next_day
                        :
                        None
                      • next_sun_position
                        :
                        None
                      • absolute_time
                        :
                        None
                      • offset_from
                        :
                        None
                      • use_timezone
                        :
                        None
                    • offset
                      :
                      1h0m1s
                  • next_day
                    :
                    None
                  • next_sun_position
                    :
                    None
                  • time_during_test
                    :
                    None
                  • absolute_time
                    :
                    None
                  • use_timezone
                    :
                    None
                • transformations
                  :
                  None
                • outline_circle
                  :
                  None
                • duration
                  :
                  None
            • dependencies
              :
          • kentland_service_area
            :
            • resource_type
              :
              resources.netrid.ServiceAreaResource
            • dependencies
              :
              • volume
                :
                kentland_service_area_volume
            • specification
              :
              • base_url
                :
                https://testdummy.interuss.org/interuss/monitoring/uss_qualifier/configurations/dev/library/resources/kentland_service_area
          • kentland_planning_area_volume
            :
            • resource_type
              :
              resources.VolumeResource
            • specification
              :
              • template
                :
                • outline_polygon
                  :
                  • vertices
                    :
                    • item_1
                      :
                      • lat
                        :
                        37.1853
                      • lng
                        :
                        -80.614
                    • item_2
                      :
                      • lat
                        :
                        37.2148
                      • lng
                        :
                        -80.614
                    • item_3
                      :
                      • lat
                        :
                        37.2148
                      • lng
                        :
                        -80.544
                    • item_4
                      :
                      • lat
                        :
                        37.1853
                      • lng
                        :
                        -80.544
                • altitude_lower
                  :
                  • value
                    :
                    0.0
                  • reference
                    :
                    W84
                  • units
                    :
                    M
                • altitude_upper
                  :
                  • value
                    :
                    3048.0
                  • reference
                    :
                    W84
                  • units
                    :
                    M
                • transformations
                  :
                  None
                • start_time
                  :
                  None
                • outline_circle
                  :
                  None
                • end_time
                  :
                  None
                • duration
                  :
                  None
            • dependencies
              :
          • kentland_planning_area
            :
            • resource_type
              :
              resources.PlanningAreaResource
            • dependencies
              :
              • volume
                :
                kentland_planning_area_volume
            • specification
              :
              • base_url
                :
                https://testdummy.interuss.org/interuss/monitoring/uss_qualifier/configurations/dev/library/resources/kentland_planning_area
          • kentland_problematically_big_area
            :
            • resource_type
              :
              resources.VolumeResource
            • specification
              :
              • template
                :
                • outline_polygon
                  :
                  • vertices
                    :
                    • item_1
                      :
                      • lat
                        :
                        38.0
                      • lng
                        :
                        -81.0
                    • item_2
                      :
                      • lat
                        :
                        37.0
                      • lng
                        :
                        -81.0
                    • item_3
                      :
                      • lat
                        :
                        37.0
                      • lng
                        :
                        -80.0
                    • item_4
                      :
                      • lat
                        :
                        38.0
                      • lng
                        :
                        -80.0
                • transformations
                  :
                  None
                • start_time
                  :
                  None
                • outline_circle
                  :
                  None
                • altitude_upper
                  :
                  None
                • end_time
                  :
                  None
                • duration
                  :
                  None
                • altitude_lower
                  :
                  None
            • dependencies
              :
          • che_non_conflicting_flights
            :
            • resource_type
              :
              resources.flight_planning.FlightIntentsResource
            • specification
              :
              • file
                :
                • path
                  :
                  test_data.flight_intents.standard.non_conflicting
                • hash_sha512
                  :
                  9e49a876b0aaf78e224a6851900b06bb57f6d3b4ec6daaf7166d48a0d5e6450e595ff396c7c0c34f2ad87ea61d0f765490c38fb79573ffa921465b0750c3074a
              • transformations
                :
                • item_1
                  :
                  • relative_translation
                    :
                    • degrees_north
                      :
                      46.9748
                    • degrees_east
                      :
                      7.4774
                    • meters_up
                      :
                      605.0
            • dependencies
              :
          • test_exclusions
            :
            • resource_type
              :
              resources.dev.TestExclusionsResource
            • specification
              :
              • allow_private_addresses
                :
                True
              • allow_cleartext_queries
                :
                True
            • dependencies
              :
          • scd_dss_instances
            :
            • resource_type
              :
              resources.astm.f3548.v21.DSSInstancesResource
            • dependencies
              :
              • auth_adapter
                :
                utm_auth
            • specification
              :
              • dss_instances
                :
                • item_1
                  :
                  • participant_id
                    :
                    uss1
                  • base_url
                    :
                    https://dss.stage.iart.software
          • netrid_dss_instances_v22a
            :
            • resource_type
              :
              resources.astm.f3411.DSSInstancesResource
            • dependencies
              :
              • auth_adapter
                :
                utm_auth
            • specification
              :
              • dss_instances
                :
                • item_1
                  :
                  • participant_id
                    :
                    uss1
                  • rid_version
                    :
                    F3411-22a
                  • base_url
                    :
                    https://dss.stage.iart.software
          • netrid_dss_instances_v19
            :
            • resource_type
              :
              resources.astm.f3411.DSSInstancesResource
            • dependencies
              :
              • auth_adapter
                :
                utm_auth
            • specification
              :
              • dss_instances
                :
                • item_1
                  :
                  • participant_id
                    :
                    uss1
                  • rid_version
                    :
                    F3411-19
                  • base_url
                    :
                    https://dss.stage.iart.software
      • action
        :
        • test_suite
          :
          • suite_type
            :
            suites.interuss.dss.all_tests
          • resources
            :
            • f3411v19_dss_instances
              :
              netrid_dss_instances_v19
            • f3411v22a_dss_instances
              :
              netrid_dss_instances_v22a
            • f3548v21_dss_instances
              :
              scd_dss_instances
            • utm_client_identity
              :
              utm_client_identity
            • id_generator
              :
              id_generator
            • service_area
              :
              kentland_service_area
            • planning_area
              :
              kentland_planning_area
            • problematically_big_area
              :
              kentland_problematically_big_area
            • second_utm_auth
              :
              second_utm_auth
            • flight_intents
              :
              che_non_conflicting_flights
            • test_exclusions
              :
              test_exclusions
        • on_failure
          :
          Continue
      • execution
        :
        • stop_fast
          :
          False
        • stop_when_resource_not_created
          :
          False
        • skip_action_when
          :
          None
        • include_action_when
          :
          None
      • non_baseline_inputs
        :
        None
    • artifacts
      :
      • raw_report
        :
        • redact_access_tokens
          :
          True
        • indent
          :
          None
      • sequence_view
        :
        • render_kml
          :
          True
        • redact_access_tokens
          :
          True
      • report_html
        :
        • redact_access_tokens
          :
          True
      • timing_report
        :
        • percentage_of_time_to_break_down
          :
          100.0
      • templated_reports
        :
        None
      • globally_expanded_report
        :
        None
      • tested_requirements
        :
        None
    • validation
      :
      • criteria
        :
        • item_1
          :
          • applicability
            :
            • test_scenarios
              :
          • pass_condition
            :
            • each_element
              :
              • has_execution_error
                :
                False
        • item_2
          :
          • applicability
            :
            • failed_checks
              :
              • has_severity
                :
                • higher_than
                  :
                  Low
          • pass_condition
            :
            • elements
              :
              • count
                :
                • equal_to
                  :
                  0.0

Scenarios executed

Suite / action generator Scenario uss1 <None> Time
ASTM DSS tests For each F3548 DSS instance DSS testing for ASTM F3548-21 1) ASTM SCD DSS: Operational Intent Explicit Subscription handling 0:01
2) ASTM SCD DSS: Implicit Subscription handling 0:02
3) ASTM SCD DSS: Operational Intent Reference Simple 0:01
4) ASTM SCD DSS: Constraint Reference Simple 0:00
5) ASTM SCD DSS: Constraint Reference Synchronization 0:00
6) ASTM SCD DSS: USS Availability Synchronization 0:00
7) ASTM F3548-21 UTM DSS Operational Intent Reference State Transitions 0:00
8) ASTM SCD DSS: Subscription and entity deletion interaction 0:01
9) ASTM SCD DSS: Subscription and entity interaction 0:08
10) ASTM SCD DSS: Operational Intent Reference Key Validation 0:01
11) ASTM SCD DSS: Operational Intent Reference Synchronization 0:00
12) ASTM SCD DSS: Interfaces authentication 0:02
13) ASTM SCD DSS: Subscription Simple 0:01
14) ASTM SCD DSS: Subscription Validation 0:00
15) ASTM F3548-21 UTM DSS Operational Intent Reference Access Control 0:00
16) ASTM F3548-21 UTM DSS interoperability 0:00
17) ASTM SCD DSS: Subscription Synchronization 0:01

Skipped: ASTM UTM DSS: Direct datastore access

Test suite action to run TestScenario scenarios.astm.utm.dss.DatastoreAccess could not find required resource ID "dss_datastore_cluster" used to populate child resource ID "datastore_cluster"

Skipped: OVN Request Optional Extension to ASTM F3548-21

DSS resource with ID uss1 does not support OVN requests

18) ASTM SCD DSS: Report 0:00
19) ASTM Availability DSS: USS Availability Mutation 0:00
For each F3411 DSS instance DSS testing for ASTM NetRID F3411-19 20) ASTM NetRID DSS: Endpoint encryption 0:00
21) ASTM NetRID DSS: Simple ISA 0:01
22) ASTM NetRID DSS: Submitted ISA Validations 0:00
23) ASTM NetRID DSS: ISA Expiry 0:05
24) ASTM NetRID DSS: ISA Subscription Interactions 0:00
25) ASTM NetRID DSS: Subscription Validation 0:01
26) ASTM NetRID DSS: Subscription Simple 0:01
27) ASTM F3411-19 NetRID DSS interoperability 0:00
28) ASTM NetRID DSS: Token Validation 0:00

Skipped: ASTM NetRID DSS: Direct datastore access

Test suite action to run TestScenario scenarios.astm.netrid.v19.dss.DatastoreAccess could not find required resource ID "dss_datastore_cluster" used to populate child resource ID "datastore_cluster"

29) ASTM NetRID DSS: Concurrent Requests 0:23
For each F3411 DSS instance DSS testing for ASTM NetRID F3411-22a 30) ASTM NetRID DSS: Endpoint encryption 0:00
31) ASTM NetRID DSS: Simple ISA 0:00
32) ASTM NetRID DSS: Submitted ISA Validations 0:00
33) ASTM NetRID DSS: ISA Expiry 0:00
34) ASTM NetRID DSS: ISA Subscription Interactions 0:00
35) ASTM NetRID DSS: Subscription Validation 0:00
36) ASTM NetRID DSS: Subscription Simple 0:00
37) ASTM F3411-22a NetRID DSS interoperability 0:00
38) ASTM NetRID DSS: Token Validation 0:00

Skipped: ASTM NetRID DSS: Direct datastore access

Test suite action to run TestScenario scenarios.astm.netrid.v22a.dss.DatastoreAccess could not find required resource ID "dss_datastore_cluster" used to populate child resource ID "datastore_cluster"

39) ASTM NetRID DSS: Concurrent Requests 0:01