同期対応データのリコンサイル処理とポスト処理の自動化

ArcGIS ジオデータベース管理者は、Python スクリプトを使用して、通常は複数のジオプロセシング ツールを使用して実行する多数のタスクを自動化できます。このトピックでは、フィールド スタッフが従来のバージョニングに参加するデータに対する編集を同期させた後、管理者が夜間にスケジュールされたバージョンのリコンサイルを実行するプロセスについて説明します。

サービス名に基づくジオデータベース バージョンの特定

最初に、リコンサイルする必要のあるジオデータベースのバージョンのリストを作成します。

# Create a list of user names that will be used to find versions.
userList = ['???', '###']
# Get a list of versions for the service named '???' and '###' to pass into the ReconcileVersions tool.
versions = arcpy.da.ListVersions('//connectionLocation/admin.sde')
# Create an empty list that will be used to hold version names that you want to reconcile.
verReconcileList = []
# Loop through the versions list to look for versions with appropriate names.
# if these names are found append them to the verReconcileList.
for user in userList:
    for version in versions:
        if user.lower() in version.name.lower():
            verReconcileList.append(version.name)

バージョンのバッチ リコンサイルと変更内容のポスト

[バージョンのリコンサイル (Reconcile Versions)] ツールを使用して、エンタープライズ ジオデータベースのすべての従来のバージョンをリコンサイルしてポストできます。このツールを使用して、ジオデータベース内のすべてのバージョン (ALL_VERSIONS)、またはターゲット バージョンを圧縮からブロックしているバージョン (BLOCKING_VERSIONS) のみを、ターゲット バージョンにリコンサイルできます。このツールを使用すると、一度に複数のバージョンを適切な順序でリコンサイルしてポストできるため、圧縮を効率的に実行できます。リコンサイル処理またはポスト処理の後、DELETE_VERSION キーワードを指定してバージョンを削除することができます。

この例では、バージョンは削除されず (KEEP_VERSION キーワードが指定される)、ジオデータベース管理者によってツールが実行されます。ジオデータベース管理者として接続すると、ジオデータベース内のすべてのバージョンだけでなく、他のユーザーが保有しているプライベートのバージョンやプロテクトのバージョンもリコンサイルしてポストできます。

# Get a list of versions to pass into the ReconcileVersions tool. versionList = arcpy.ListVersions('//connectionLocation/admin.sde')
# Execute the ReconcileVersions tool.
arcpy.ReconcileVersions_management('//connectionLocation/admin.sde', "ALL_VERSIONS", "sde.DEFAULT", verReconcileList, "LOCK_ACQUIRED", "NO_ABORT", "BY_OBJECT", "FAVOR_TARGET_VERSION", "POST", "KEEP_VERSION", "c:/temp/reconcilelog.txt")

ジオデータベースの圧縮

リコンサイルと変更内容のポストが完了したら、ジオデータベースを圧縮して重複する情報を削除し、編集をベース テーブルに移行することが重要です。

# Run the compress tool. 
arcpy.Compress_management('//connectionLocation/admin.sde')

インデックスの再構築と統計情報の更新

圧縮操作の実行後、インデックスの再構築と統計情報の更新を行うことをお勧めします。これらの手順は、[インデックスの再構築 (Rebuild Indexes)] ツールと [データセットの分析 (Analyze Datasets)] ツールを使用して実行できます。これらのツールでは、データセットのリストの入力が可能であり、すべてのデータセットで同時に関数を実行します。これらのツールをジオデータベース管理者で実行すると、該当するシステム テーブルの統計情報が更新され、インデックスが再構築されます。このプロセスでは、まず、データのリストおよびそれらのデータを所有するユーザーのリストを取得します。インデックスと統計情報は、データの所有者のみが更新できます。

# set the workspace arcpy.env.workspace = '//connectionLocation/dataOwner.sde'
# Get the user name for the workspace
# this assumes you are using database authentication. # OS authentication connection files do not have a 'user' property. userName = arcpy.Describe(arcpy.env.workspace).connectionProperties.user
# Get a list of all the datasets the user has access to. # First, get all the stand-alone tables, feature classes and rasters owned by the current user. oDataList = arcpy.ListTables('*.' + userName + '.*') + arcpy.ListFeatureClasses('*.' + userName + '.*') + arcpy.ListRasters('*.' + userName + '.*')
# Next, for feature datasets owned by the current user
# get all of the featureclasses and add them to the master list. for dataset in arcpy.ListDatasets('*.' + userName + '.*'):
    oDataList += arcpy.ListFeatureClasses(feature_dataset=dataset)

メモ:

ユーザーが所有するデータセットを制限するために使用されるワイルドカード トークンはオペレーティング システムに固有です。上の例では、Microsoft SQL Server、PostgreSQL、および IBM Db2 内のジオデータベースの場合、('*.' + userName + '.*') が機能します。Oracle 内のジオデータベースの場合、ワイルドカードとして (userName + '.*') を使用できます。

各ユーザーが所有するデータのリストを特定した後、その情報を [インデックスの再構築 (Rebuild Indexes)] ツールおよび [データセットの分析 (Analyze Datasets)] ツールで使用します。

複数のデータ所有者が存在する場合、データ所有者ごとにデータのリストを生成し、各ユーザーとしてジオデータベースに接続するデータベース接続ファイル (*.sde) を使用して、[インデックスの再構築 (Rebuild Indexes)] ツールおよび [データセットの分析 (Analyze Datasets)] ツールを実行します。

# Execute rebuild indexes and analyze datasets
# Note: to use the "SYSTEM" option, the user must be an administrator.
workspace = "//connectionLocation/user1.sde"
arcpy.RebuildIndexes_management(workspace, "NO_SYSTEM", oDataList, "ALL")
arcpy.AnalyzeDatasets_management(workspace, "NO_SYSTEM", oDataList, "ANALYZE_BASE", "ANALYZE_DELTA", "ANALYZE_ARCHIVE")

リコンサイルされたバージョンの削除

このプロセスの最後のステップは、リコンサイルされてポストされたバージョンを削除することです。前に versionList ステートメントを実行したときに、リコンサイルされたバージョンのリストを取得しています。次のコードでは、このリストを使用してループし、削除しても安全であるすべてのバージョンを削除します。

メモ:

ジオデータベース レプリケーションを使用している場合、レプリカによってまだ参照されているバージョンを削除しないようにすることが重要です。それらのバージョンは、ジオデータベースのレプリカの作成元になるバージョンです。ListReplicas 関数を使用して、レプリカおよびそれらのレプリカが参照しているバージョン名をリスト表示します。レプリカ バージョンを削除しようとすると失敗するはずですので、それを行わないことをお勧めします。

次の例では、すべてのレプリカについて反復することによって、レプリカ バージョンのリストを取得します。次に、リコンサイルされたバージョンのリストから、それらのレプリカ バージョンをすべて削除します。最後に、リコンサイルされたバージョンのリストの残りの部分についてループし、それらのバージョンを削除します。

# set the workspace workspace = '//connectionLocation/admin.sde'
# Get a list of all the replica versions in the geodatabase replicaVersions = [replica.version for replica in arcpy.da.ListReplicas(workspace)]
# Loop through this replica version list and remove these version names from the list of versions you reconciled earlier. # You want to remove versions from this list that are still being referenced by a replica for replicaVer in replicaVersions:
  if replicaVer in verReconcileList:
    verReconcileList.remove(replicaVer)
# Loop through the verReconcileList and delete versions. 
# These versions are no longer being referenced by a replica so you can assume it's safe to delete them. if len(versionsList) > 0:
  for version in verReconcileList:
  		arcpy.DeleteVersion_management(workspace, version)

完全なコードの例

以下のコード例では、上記のほとんどの項目を組み合わせて次の操作を実行します。

• ジオデータベースのバージョンを特定します。
• バージョンのリコンサイルと変更内容のポストを行います。
• ジオデータベースを圧縮します。
• システム テーブルのインデックスを再構築し、統計情報を更新します。
• ユーザー テーブルのインデックスを再構築し、統計情報を更新します。

メモ:

次に示すスクリプトには、このトピックの他のコード サンプルと比較して、追加のロジックが含まれています。この追加のロジックは、エラー状況をより効率的に処理するのに役立ちます。また、このスクリプトでは、コメントと変数名の一部が変更されている点にも注意してください。

import arcpy

try:
    # Set the workspace 
    arcpy.env.workspace = 'Database Connections/admin.sde'
    
    # Set variables
    workspace = arcpy.env.workspace
    arcpy.env.overwriteOutput = True
    targetVersion = 'sde.DEFAULT'
    
    # Create a list of user names that will be used to find versions.
    userList = ['???', '###']
    
    # Get a list of versions for the service named '???' and '###' to pass into the ReconcileVersions tool.
    versions = arcpy.da.ListVersions(workspace)
    
    # Create an empty list to hold version names to reconcile.
    verReconcileList = []
    
    # Loop through the list to look for versions with our user names in their name where the parent version is the target version.
    # if these names are found, append them to the verReconcileList.
    for user in userList:
        for version in versions:
            if user.lower() in version.name.lower():
                if version.parentVersionName.lower() == targetVersion.lower():
                    verReconcileList.append(version.name)
    
    # Perform maintenance if versions are found; otherwise, there is no maintenance to perform.
    if len(verReconcileList)>0:
        
        # Execute the ReconcileVersions tool.
        arcpy.ReconcileVersions_management(workspace, "ALL_VERSIONS", targetVersion, verReconcileList, "LOCK_ACQUIRED", "NO_ABORT", "BY_OBJECT", "FAVOR_TARGET_VERSION", "POST", "KEEP_VERSION", "c:/temp/reconcilelog.txt")
        
        # Run the compress tool. 
        arcpy.Compress_management(workspace)
        
        # Rebuild indexes and analyze the states and states_lineages system tables
        arcpy.RebuildIndexes_management(workspace, "SYSTEM", "", "ALL")
        
        arcpy.AnalyzeDatasets_management(workspace, "SYSTEM", "", "ANALYZE_BASE", "ANALYZE_DELTA", "ANALYZE_ARCHIVE")
        
        
        '''
        *********************
        Data Owner(s) Section
        *********************
        '''
        # Get a list of datasets owned by the data owner user (requires second connection file)
        
        # Set the workspace 
        arcpy.env.workspace = 'Database Connections/dataOwner.sde'
        
        # Set a variable for the workspace
        workspace = arcpy.env.workspace
        
        # Get the user name for the workspace
        # this assumes you are using database authentication.
        # OS authentication connection files do not have a 'user' property.
        userName = arcpy.Describe(arcpy.env.workspace).connectionProperties.user
        
        # Get a list of all the datasets the user has access to.
        # First, get all the stand alone tables, feature classes and raster datasets owned by the current user.
        oDataList = arcpy.ListTables('*.' + userName + '.*') + arcpy.ListFeatureClasses('*.' + userName + '.*') + arcpy.ListRasters('*.' + userName + '.*')
        
        # Next, for feature datasets owned by the current user
        # get all of the feature classes and add them to the master list.
        for dataset in arcpy.ListDatasets('*.' + userName + '.*'):
            oDataList += arcpy.ListFeatureClasses(feature_dataset=dataset)
        
        # Rebuild indexes and analyze the data owner tables
        arcpy.RebuildIndexes_management(workspace, "NO_SYSTEM", oDataList, "ALL")
        
        arcpy.AnalyzeDatasets_management(workspace, "NO_SYSTEM", oDataList, "ANALYZE_BASE", "ANALYZE_DELTA", "ANALYZE_ARCHIVE")
        
        '''
        *************************
        End Data Owner(s) Section
        *************************
        '''
        
        # set the workspace back to the geodatabase administrator workspace
        workspace = 'Database Connections/admin.sde'
        
        # Get a list of all the replica versions in the geodatabase
        replicaVersions = [replica.version for replica in arcpy.da.ListReplicas(workspace)]
        
        '''
        - We now have a list of versions that were created by taking a map offline (verReconcileList)
        - We also have a list of replica versions (replicaVersions)
        - The versions that we were reconciling are ready to be deleted if they are not currently pointing to a version
        - We are going to loop through the reconcile versions list and remove any versions that are still pointing to a replica
        - The versions remaining in the reconcile list are ready to be cleaned (deleted) up because there are no maps/replicas pointing to them. 
        '''
        
        # Use the list of versions associated with users/maps that we reconciled earlier. Remove any versions from the list that are still being used by a replica. 
        for replicaVer in replicaVersions:
            if replicaVer in verReconcileList:
                verReconcileList.remove(replicaVer)
        
        # Loop through the versionsList and delete versions that are no longer being referenced by a replica. 
        # Since these versions are no longer being referenced by a replica, we can assume it's safe to delete them.
        if len(verReconcileList) > 0:     #check to see that the list is not empty
            for version in verReconcileList:
                try:
                    arcpy.DeleteVersion_management(workspace, version)
                except:
                    print("Failed to delete version.")
                    print(arcpy.GetMessages(2))
        else:
            print("No versions to delete.")
    
    else:
        print("No versions to reconcile, aborting version maintenance routine.")

except:
    print(arcpy.GetMessages(2))
    
print("Done.")