S3 オブジェクト・ストレージ・システムのスキャンのベスト・プラクティス

S3-compliant のオブジェクト・ストレージ・システムをスキャンするためのベスト・プラクティスを使用します。

各スキャン後に、以下のディレクトリーにあるログ・ファイルを確認することをお勧めします。

/opt/ibm/metaocean/data/connections/s3/<connection_name>/debug/<scan_timestamp>/scanner.debug は、スキャンが成功したかどうかを示します。

/opt/ibm/metaocean/data/connections/s3/<connection_name>/error/<scan_timestamp>/scanner.error には、 IBM Data Cataloging に配信されないすべてのメッセージのリストが含まれています。

/opt/ibm/metaocean/data/connections/s3/<connection_name>/data/<scan_timestamp>/ には、スキャンされたデータ・ソース名を持つサブフォルダーが含まれます。 このフォルダー内には、データ・ソース内のオブジェクトの数、またはオブジェクトまたはスキャンされたファイルの数に関する情報を含む stats フォルダーがあります。

また、 IBM Data Cataloging で報告されるバケットの合計サイズと、ソースにある S3 オブジェクトストアの合計サイズ(利用可能な場合)を比較することもできます。