ほぼテク8月13日ITセキュリティの新時代？ChatGPTによるシステムログのレポート作成！？ワードクラウド編①！

AI生成AIChatGPTGPTAPIログ監視レポート作成ワードクラウド

8月13日

著者裕太我妻

ほぼテク読者の皆様、いつも大変ありがとうございます！
我妻裕太です。

本日もよろしくお願いいたします。GPTに関する連続投稿約111日目です！
本日はこちら！

ITセキュリティの新時代？システムログのレポート作成！

っということで昨日はシステムログのレポートをGPTで実現できないか実験をしました！
記事の詳細はこちらをご覧ください。

昨日は正常なログ、警告、エラーなどアクセスログの内容を集計して、どのログが多いか分析しました。
シンプルな棒グラフとコメントが出力されました！

今までは簡単なレポート作成もコツコツ作業をしてそれなりに手間がかかる作業だったのではないでしょうか。
それを代替えしてくれそうな予感がしたので、とても参考になりました。

本日はもう少し違った可視化を挑戦してみたいと思います。

テキストの可視化！ワードクラウド！

ワードクラウド（Word Cloud）は、テキストデータの視覚化手法の一つです。

テキスト内の単語の出現頻度に応じて、単語の大きさや色を変えて表示します。
出現頻度が高い単語は大きく、低い単語は小さく表示されることが一般的です。

ワードクラウドは、以下のような用途に使用されます。

1.テキスト分析
テキスト内のキーワードの出現パターンを一目で把握することができます。特に、大量のテキストデータから主要なテーマやトピックを素早く特定するのに役立ちます。

2.プレゼンテーション
レポートやプレゼンテーションの視覚的な要素として、視聴者に対して重要な単語や概念を強調するために使用されます。

3.教育
教育的な環境で、学生がテキストの主要な概念を理解するのを助けるために使用されることがあります。

ワードクラウドは、美しい視覚的表現を提供するだけでなく、テキストデータの分析において直感的な洞察を提供するため、多岐にわたる分野で人気があります。
今回はアクセスログをワードクラウドにして直感的に状況を把握してみよう！の会です。

それでは早速試してみよう！

【実験ルール】
・サンプルのログデータを分析し、ワードクラウドが作成できるか実験する。
・GPT-4で実験する。
・プロンプトは以下で実行します。

【プロンプト】
あなたは弊社の優秀なネットワーク管理者です。
アップロードしたファイルは弊社のWebサービスのシステムログです。
システムログを形態素解析してどんなイベントやエラーが多いかワードクラウドにしてください。
ワードクラウドにする際は見ていて楽しいワクワクするカラーリングでお願いします。
最終的にレポートにしてください。レポートはjpg形式でデザインしてください。
レポートにはワードクラウドと分析結果のコメントを記載してください。
システムログの説明は以下の通りです。

【システムログの説明】
システムログファイルは、さまざまなシステムイベントとユーザーアクティビティを記録しています。
以下はログファイル内の各列とその内容の説明です。

Timestamp (タイムスタンプ): イベントが発生した日時を示します。フォーマットは "YYYY-MM-DD HH:MM:SS" です。

Log Level (ログレベル): イベントの重要度を示します。以下の種類が含まれています。
INFO: 情報レベルのイベント。
WARNING: 警告レベルのイベント。潜在的な問題を示すことがあります。
ERROR: エラーレベルのイベント。問題や障害を示します。
SUCCESS: 成功レベルのイベント。特定の操作が成功したことを示します。
Event Description (イベントの説明): 発生したイベントの内容や詳細を説明します。ログメッセージがここに含まれます。
User (ユーザー): イベントに関与したユーザーの名前を示します。ログインやファイルアクセスなどのアクティビティが関連しています。
IP Address (IPアドレス): アクティビティが発生したIPアドレスを示します。ユーザーのログイン元などに使用されます。
File (ファイル): アクセスされたファイルのパスや名前が示されます。ファイルのアップロードやアクセスに関連しています。

このシステムログファイルは、異なるユーザーのログインとログアウト、ファイルのアクセス、セキュリティイベントなどを記録しており、システムの監視とトラブルシューティングに役立つ情報が含まれています。各行はタイムスタンプから始まり、イベントの詳細がその後に続きます。ログファイルはシステム管理者にとって重要な情報源となります。

システムログのイメージはこのようなデータを300行程度準備しました。

【デモデータ（一部抜粋）】

2023-08-12 08:00:23 [INFO] User 'alice' logged in from IP 192.168.1.10.

2023-08-12 08:05:34 [INFO] User 'alice' accessed file /data/report.txt.

2023-08-12 08:07:45 [WARNING] Multiple failed login attempts from IP 192.168.1.11.

2023-08-12 08:10:12 [ERROR] Unauthorized access attempt to /admin from IP 192.168.1.11.

2023-08-12 08:12:30 [INFO] User 'alice' logged out.

2023-08-12 08:15:23 [INFO] User 'bob' logged in from IP 192.168.1.12.

【デモ動画】

～GPTとのやりとり～

【GPT】

了解しました、システムログファイルを分析し、ワードクラウドを生成してレポートにまとめます。まずはファイルの内容を確認して、形態素解析の準備をします。少々お待ちください。

システムログのプレビューを見ると、次のような形式で記録されていることがわかります。

2023-08-12 08:00:23 [INFO] User 'alice' logged in from IP 192.168.1.10.
2023-08-12 08:05:34 [INFO] User 'alice' accessed file /data/report.txt.
2023-08-12 08:07:45 [WARNING] Multiple failed login attempts from IP 192.168.1.11.
2023-08-12 08:10:12 [ERROR] Unauthorized access attempt to /admin from IP 192.168.1.11.
2023-08-12 08:12:30 [INFO] User 'alice' logged out.

次に、このデータを形態素解析し、ワードクラウドを作成してみましょう。解析を進めますので、しばらくお待ちください。

申し訳ございませんが、現在の環境には形態素解析ライブラリ「Janome」がインストールされていないようです。そのため、別の方法でテキストの解析を進める必要があります。

シンプルな単語の分割とカウントを使用してワードクラウドを作成します。少々お待ちください。

ワードクラウドの生成が完了しました。このワードクラウドから、システムログに頻繁に現れる単語とイベントを視覚的に把握することができます。

次に、このワードクラウドと分析結果のコメントを組み合わせて、レポートをjpg形式でデザインします。少々お待ちください。

申し訳ございません、フォントの読み込みに問題が発生しました。デフォルトのフォントを使用して、再度レポートを作成します。少々お待ちください。

申し訳ございません、コードの再実行に際して変数がリセットされてしまいました。変数を再定義して、もう一度レポートを作成します。少々お待ちください。

レポートの作成が完了しました。以下のリンクからレポートをダウンロードしてご確認いただけます。