dev.classmethod.jp

S3に置いたログをTiDB Cloud Lakeへ継続的に取り込んでみた

S3に出力されるアプリログをTiDB Cloud Lakeで継続的に取り込むため、AWS – SQS(S3)データソースとIntegration Taskを試してみました。設定方法から実際の動作、エラーハンドリングまで、実装の流れを紹介します。