ログの保存について、一見正反対に見える二つの悩みを同時に抱えている組織は少なくありません。一つは、何を残すべきか判断できず「とりあえず全部保存」した結果、保存費用が増え続けているという悩みです。もう一つは、インシデント調査の場面で、必要だった認証ログが既定の保持期間で消えていたという悩みです。
全部保存という発想には、証拠を失いたくないという慎重さがあり、一定の合理性があります。ただし、保存する量を増やしても、必要なログが残る状態になるとは限りません。クラウドやSaaSのログの保持期間は、保存する側ではなくサービス側の既定設定に左右される場合があるためです。大量のログを保存していても、肝心の認証ログだけが短い期間で消えている状況は起こり得ます。
最初に決めたいのは、「何日保存するか」ではなく「どのような調査に答えられる状態にしておくか」です。保存期間や保存対象は、その問いから逆算して初めて、社内や監査に説明できる根拠を持ちます。
本記事では、調査ユースケースから必要なログと保存期間を逆算する「ユースケース起点のログ保存設計」を、5つのステップ、サンプルコード、チェックリストで整理します。なお、記事中の日数やデータはすべて説明用の架空のものであり、推奨値ではありません。
ログ保存の二つの失敗は、同じ原因から生じている
よくある状況を一般化して整理します。一つ目は、調査に使う予定のないログが長期間、全量で保存されている状態です。たとえば、開発時に有効化したデバッグ用のアプリケーションログが、見直されないまま長期保存され、費用を押し上げている場合があります(説明用の架空の例です)。
二つ目は、不正ログインの経緯をさかのぼって調べようとしたところ、必要な認証ログが既定の保持期間(ここでは30日とします)で消えており、侵害の起点を特定できなかったという状況です。この二つは別々の問題に見えますが、原因は共通しています。ログの量ではなく、保持期間を誰も設計していなかったことです。
ただし、これは保存量が費用に無関係という意味ではありません。量の問題は、「何のために残すか」が決まっていれば、削減や階層化といった対処で扱いやすくなります。
概念図:保存の考え方の違い
- 調査での用途が明確でないログも残る
- 保持期間はサービスの既定値に任せがち
- 費用は保存量にほぼ比例して増える
- 各ログが、どの調査に使うか紐づいている
- 必要な遡及期間を決めて実設定と照合する
- 用途のないログは削減候補として扱える
概念図であり、全量保存が常に不適切であることを意味するものではありません。
「何日保存するか」の前に、「何を調べたいか」を決める
ログは、それ自体が目的ではなく、調査や監査の問いに答えるための材料です。ログ管理の計画では、ログを生成・保存する目的を明確にし、ログソースごとに優先度を整理することが重要とされています(Kent and Souppaya, 2006)。また、インシデントの分析では、複数の情報源のログを突き合わせて経緯を再構成することが前提になります(Cichonski et al., 2012)。
ここで、検知のためのログと、調査(遡及)のためのログは別の観点で考える必要があります。検知用は直近のデータを素早く検索できることが重視されます。一方、調査用は、侵害に気づくまでに時間が経っていても、さかのぼって確認できることが重視されます。認証ログが「検知には十分だが調査には短すぎる」状態になりやすいのは、この違いが設計に反映されていないためです。ただし、これは検知用の保存が不要という意味ではありません。
ユースケース起点のログ保存設計の5ステップ
設計の流れは次の5ステップです。ユースケースから出発し、必要なログと期間を決め、現状との差を確認して、保存階層まで落とし込みます。
逆算フロー:ユースケースから保存階層まで
- 調査ユースケースの定義不正ログイン、権限変更、データ持ち出し、感染経路など
- 必要なログソースと項目の特定時刻、ユーザーID、送信元IP、端末、操作、結果
- 遡及期間とギャップの確認必要な期間と現状の実保持期間を照合
- 補強と削減延長・外部エクスポートで補い、用途のないログは削減候補に
- 保存階層の分離ホット(即時検索)とコールド(長期アーカイブ)
概念図であり、各ステップの所要期間や優先順位を示すものではありません。
Step1〜2:調査ユースケースと必要なログ項目を特定する
まず、自社で「あとから調べられなければ困る」調査を挙げます。最初から網羅する必要はなく、不正ログイン、権限変更、データ持ち出し、マルウェア感染経路といった代表的な2〜3件から始める進め方でも構いません。次に、それぞれの調査に必要なログソースと項目を整理します。
| 調査ユースケース | 主なログソース(例) | 確認したい項目 |
|---|---|---|
| 不正ログイン | 認証基盤(IdP:Identity Provider、ID管理基盤)のサインインログ、VPN接続ログ | 時刻、ユーザーID、送信元IP、端末識別子、結果(成功・失敗) |
| 権限変更 | ディレクトリ・クラウド管理操作の監査ログ | 時刻、操作者、対象、変更内容、結果 |
| データ持ち出し | ファイル共有・ストレージの操作ログ、プロキシ、メール送信ログ | 時刻、ユーザーID、操作内容、宛先、送信元IP |
| マルウェア感染経路 | エンドポイント検知ログ、プロキシ・DNSログ、メール受信ログ | 時刻、端末識別子、通信先、操作内容、結果 |
ログが存在していても、項目が不足していれば調査に使えない場合があります。たとえば、送信元IPや端末識別子が記録されない設定では、「誰が」までは分かっても「どこから」が追えません。また、時刻のタイムゾーンや形式が揃っていないと、複数のログを突き合わせる際に手間が増えます。
Step3:必要な遡及期間と現状のギャップを確認する
遡及期間は、「侵害が起きてから気づくまでの時間」と「調査・報告に要する期間」を見込んで検討します。発見が遅れる場合があるため、検知できる期間ではなく、気づいた時点からさかのぼれる期間として考えます。ここに、法令、業界のガイドライン、取引先との契約、社内規程で定められた保存要件が加わる場合があります。これらは業種や対象によって異なるため、自社に適用される要件を、法務・監査部門と確認する必要があります。
必要な遡及期間が決まったら、現状の実保持期間と並べます。次の表は説明用の架空データであり、日数は推奨値ではありません。
| ログソース(架空) | 実保持期間 | 必要な遡及期間 | 判定 |
|---|---|---|---|
| IdPサインインログ | 30日 | 90日 | 不足 |
| VPN接続ログ | 180日 | 90日 | 充足 |
| プロキシログ | 14日 | 30日 | 不足 |
| デバッグ用アプリログ | 365日 | 調査ユースケースなし | 削減候補 |
この表から、「保存している期間が長いこと」と「必要な期間を満たしていること」は別であると分かります。VPN接続ログは必要以上に保持されている可能性があり、認証ログは不足しています。ただし、「削減候補」は直ちに削除してよいという意味ではありません。障害対応や性能分析など、調査以外の用途がないかを担当部門に確認したうえで判断します。
ギャップチェックをコードで確認する
ログソースが増えると、表を目視で照合する作業は負担になります。ユースケースごとのポリシーをYAML(設定を記述するデータ形式)で定義し、現状の保持期間と自動で比較する例を示します。以下は公開可能な汎用サンプルで、値は架空です。hot_daysは即時検索できる期間、archive_daysはその後に長期アーカイブで保管する期間を表します。
# log_policy.yaml(説明用の架空の定義。推奨値ではありません)
policies:
- use_case: unauthorized_login
log_sources: [idp_signin, vpn_connection]
required_fields: [timestamp, user_id, src_ip, device_id, operation, result]
lookback_days: 90
hot_days: 30
archive_days: 60
- use_case: malware_path
log_sources: [proxy]
required_fields: [timestamp, device_id, destination, operation, result]
lookback_days: 30
hot_days: 14
archive_days: 16YAML次のPythonコードは、ポリシーの遡及期間と現状の実保持期間を比較し、不足しているログソースと、ユースケースに紐づかない削減候補を表示します(PyYAMLが必要です)。
import yaml # PyYAML
# 現状の実保持期間(架空のサンプルデータ。単位は日)
current_retention = {
"idp_signin": 30,
"vpn_connection": 180,
"proxy": 14,
"debug_app_log": 365,
}
def load_required(path):
"""ログソースごとに、全ユースケースの中で最長の遡及期間を求める"""
with open(path, encoding="utf-8") as f:
policies = yaml.safe_load(f)["policies"]
required = {}
for p in policies:
for src in p["log_sources"]:
required[src] = max(required.get(src, 0), p["lookback_days"])
return required
def check_gap(required, current):
shortage, sufficient = [], []
for src, need in required.items():
have = current.get(src)
if have is None or have < need:
shortage.append((src, have, need))
else:
sufficient.append((src, have, need))
unlinked = [src for src in current if src not in required]
return shortage, sufficient, unlinked
if __name__ == "__main__":
required = load_required("log_policy.yaml")
shortage, sufficient, unlinked = check_gap(required, current_retention)
print("【不足】")
for src, have, need in shortage:
label = "不明" if have is None else f"{have}日"
print(f" {src}: 実保持 {label} / 必要 {need}日")
print("【充足】")
for src, have, need in sufficient:
print(f" {src}: 実保持 {have}日 / 必要 {need}日")
print("【削減候補(ユースケースに紐づかない)】")
for src in unlinked:
print(f" {src}: 実保持 {current_retention[src]}日")Python保存階層を分けた場合の費用感を比べたいときは、日次ログ量、保存期間、階層別の単価から相対的に比較する方法もあります。次の単価は仮の値であり、実際の料金は各サービスの公式情報で確認する必要があります。
# 単価は仮の値です。案どうしの相対比較にのみ使い、実際の料金は各サービスで確認してください。
UNIT_PRICE = {"hot": 1.0, "archive": 0.2} # 1GB・1日あたりの仮単価(任意単位)
def estimate_cost(daily_gb, hot_days, archive_days):
hot = daily_gb * hot_days * UNIT_PRICE["hot"]
archive = daily_gb * archive_days * UNIT_PRICE["archive"]
return hot + archive
# 例:同じ総保存期間(90日)で、ホットの日数だけを変えた二つの案を比べる
print(estimate_cost(daily_gb=10, hot_days=90, archive_days=0))
print(estimate_cost(daily_gb=10, hot_days=30, archive_days=60))Pythonここまでの手順を自社に当てはめる際に、「どのユースケースを想定すべきか」や「複数のクラウド・SaaSのログソースを横断的に棚卸ししたい」といった点で迷う場合は、技術・DX相談(KAMUSHIRUBE)を壁打ちの場としてご利用いただけます。
Step4〜5:不足分の補い方、削減候補、ホットとコールドの使い分け
不足が見つかった場合の対応は、大きく二つあります。一つは、サービス側の保持期間の設定を延長する方法です。もう一つは、ログを外部のログ基盤やストレージへエクスポートし、自社で保持する方法です。クラウドやSaaSの既定の保持期間や延長可否は、サービス、プラン、ライセンスによって異なります。そのため、特定の日数を前提にせず、公式ドキュメントと管理画面で自社の実設定を確認することが出発点になります。
用途のないログは、削除だけが選択肢ではありません。保存期間の短縮、記録項目の絞り込み、より低コストな階層への移動といった段階的な対応が考えられます。保存階層は、検索性とコストのバランスで使い分けます。
| 観点 | ホット(即時検索) | コールド(長期アーカイブ) |
|---|---|---|
| 検索性 | すぐに検索・相関分析ができる | 取り出しに時間や手順が必要な場合がある |
| コスト | 相対的に高くなりやすい | 相対的に低くなりやすい |
| 主な用途 | 日常の監視、検知、一次調査 | 遡及調査、監査対応、証跡の保管 |
注意したいのは、コールドに移したログを実際に取り出して検索できるかどうかです。復元の手順や所要時間を決めていないと、「保存しているが、調査の場面で使えない」状態になります。コールドの設計は、保存先の選定だけでなく、復元手順の確認までを含めて考える必要があります。
この設計だけでは足りないこと
ユースケース起点の設計は、保存対象と期間を整理する出発点であり、すべてを解決するものではありません。主な限界を挙げます。
- ログ自体が出力されていない場合:監査ログの有効化が前提であり、保持期間の議論はその後になります。
- 法令・契約・規程の要件:保存義務の有無や期間は業種や対象によって異なるため、ユースケースから導いた期間とは別に確認が必要です。
- ログの信頼性:時刻同期、改ざん防止、アクセス制御が不十分だと、保存していても証跡として扱いにくくなります。
- 想定外の調査:ユースケースは網羅しきれないため、定期的な見直しを前提にします。
なお、本記事の架空の例から、特定の日数が妥当だと結論づけることはできません。保存期間は、自社のユースケース、規程、契約、費用のバランスで決めるものです。
今日から試せる確認作業
完璧な棚卸しを終えてから始める必要はありません。まずは小さな範囲で、次の二つを確認します。
- 認証系のログソース(IdP、VPN、主要なSaaS)について、保持期間の実設定を管理画面と公式ドキュメントで確認し、「ログソース・現状の保持期間・必要と考える期間」の3項目だけを表に並べる。
- 保存量が多い上位3件のログソースについて、「どの調査ユースケースで使うか」を一行ずつ書く。書けないものが、削減や階層変更を検討する入口になる。
棚卸しの記録には、次の項目を使うと整理しやすくなります。ログソース、用途のユースケース、必要な項目、現状の保持期間、必要な期間、保存先、担当者の7項目です。
ログ保存ポリシー見直しチェックリスト
| 確認項目 | 確認内容 | 状態の目安 |
|---|---|---|
| 保持期間の実設定 | 管理画面で実際の設定値を確認したか | 既定値の思い込みがない |
| 時刻同期 | ログソース間で時刻が揃っているか | 同期方法と形式が定まっている |
| 改ざん防止 | 保存後のログが書き換えられにくいか | 変更・削除の権限と記録が管理されている |
| アクセス制御 | ログを閲覧できる人が適切に限られているか | 閲覧権限が定期的に確認されている |
| 復元テスト | コールドのログを実際に取り出せるか | 手順と所要時間が確認済みである |
| 定期見直し | ユースケースと保存期間を見直す機会があるか | 見直しの周期と担当が決まっている |
まとめ
全ログの保存による費用増と、認証ログの消失による調査不能は、どちらも「保持期間が設計されていない」という共通の原因から生じる場合があります。調査ユースケースを起点に、必要なログと項目、遡及期間、保存階層を逆算すれば、保存対象と期間の根拠を説明できる状態に近づきます。
次に確認することは三つです。認証系ログの保持期間の実設定、保存量の多いログソースの用途、そして法令・契約・規程で求められる保存要件の有無です。
ユースケースの網羅性、複数のクラウド・SaaSの横断的な整理、規程・契約要件との整合は、自力で着手したあとに判断が難しくなりやすい点です。KANAMEBA(セキュアなDX推進支援・ITコンサルティング)では、セキュリティとDX推進の両面から、ログの保存対象・保存期間・保存先の整理や運用ルールづくりを支援しています。「費用が増え続けている」「調査に必要なログが残っているか不安」という段階でもご相談いただけます。担当者のスキル向上が課題の場合は、調査・研修講師(セキュリティ研修)もご案内しています。
参考文献
- Kent and Souppaya. 2006. Guide to Computer Security Log Management. National Institute of Standards and Technology. NIST Special Publication 800-92. https://doi.org/10.6028/NIST.SP.800-92
- Cichonski et al. 2012. Computer Security Incident Handling Guide. National Institute of Standards and Technology. NIST Special Publication 800-61 Revision 2. https://doi.org/10.6028/NIST.SP.800-61r2