Logstashを利用し、Docker logsをコンポーネント名.logファイルに出力したい

Question

Greengrass Coreデバイスにおいて、docker-composeでオーケストレーションする複数のコンテナを持ったユーザー定義コンポーネントを配信しました。その際、各コンテナのlogsをコンポーネントのlogファイルに書き込みたいですが、Logstashをコンポーネントに追加し、Dockerコンテナのログをコンポーネントのログファイルに出力する具体的な方法が分かりません。
以下の内容でlogstash.confファイルを作成しましたが、解決できませんでした。
input {
    file {
        path => "/var/lib/docker/containers/*/*-json.log" # すべてのコンテナのログを監視
        type => docker
        codec => json
        sincedb_path => "/tmp/logstash_sincedb" # sincedb を一時ディレクトリに設定
    }
}
output {
    stdout { }
}

re:Post Agent · Answer

AWS IoT Greengrass環境でDockerコンテナのログをコンポーネントのログファイルに出力する方法について、以下のアプローチを提案します：

1. Logstashの代わりに、AWS IoT Greengrassの組み込みログ機能を活用することをお勧めします。Greengrassは既にコンポーネントのログを管理する機能を持っています。

2. Greengrassコンポーネントの設定で、Lifecycleのrunを例えば以下のように指定します。

```json
    "Lifecycle": {
        "run": "docker-compose -f {artifacts:path}/docker-compose.yaml up"
    },
    ```

3. Greengrassの`logs`コマンドを使用して、ログを確認できます：

```
    greengrass-cli logs get --log-file path/to/a/log/file
    ```

このアプローチにより、DockerコンテナのログをGreengrassのログシステムと統合し、コンポーネント名.logファイルに出力することができます。Logstashを使用する複雑さを避け、Greengrassの既存の機能を最大限に活用できます。

**参考資料**  
[Amazon ECRまたは Docker Hub のパブリックイメージから Docker コンテナを実行する](https://docs.aws.amazon.com/ja_jp/greengrass/v2/developerguide/run-docker-container.html#run-docker-container-public-ecr-dockerhub)  
[ログ - AWS IoT Greengrass](https://docs.aws.amazon.com/ja_jp/greengrass/v2/developerguide/gg-cli-logs.html)  
[Community | Deploying Docker Compose with Greengrass!](https://community.aws/content/2arcdg4saNZnRcllCV5PCAdnl5J/deploying-docker-compose-with-greengrass)  
[AWS IoT Greengrass の特徴 - Amazon Web Services](https://aws.amazon.com/jp/greengrass/features/)

Logstashを利用し、Docker logsをコンポーネント名.logファイルに出力したい

関連するコンテンツ