Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Stackdriver LoggingとBQシンクの差(料金と検索性、保存期間)を知りたい #25

Closed
rhoboro opened this issue Jan 22, 2020 · 7 comments
Assignees
Labels

Comments

@rhoboro
Copy link

@rhoboro rhoboro commented Jan 22, 2020

下記あたりがブログになってたら嬉しいです。

  • Stackdriver LoggingからBQシンクする手順
  • BQシンクするのがおすすめなログ(GCE、BQあたりのログで?)
  • 料金、保存期間の差
  • 実例交えたBQシンクの(検索)例
    • 最近の参照テーブルとかいい例だと思う
@na0fu3y

This comment has been minimized.

Copy link
Owner

@na0fu3y na0fu3y commented Jan 28, 2020

保存期間

BigQuery の insert job は Stackdriver Logging で 30 日しか保持されない(insert dataset とかは 400 日のはず)ので、それでサポート体制に影響があるのであれば、ログシンクする必要がありそうですね。

https://cloud.google.com/logging/quotas

@na0fu3y

This comment has been minimized.

Copy link
Owner

@na0fu3y na0fu3y commented Jan 28, 2020

書いてみたんですが、文章の構成がいまいち読みづらいです。
リンク参照前提の記事だと辛い感じありますが、構成レビューいただけませんか。
https://www.queuery.com/2020/01/28/gcp-logging.html

@rhoboro

This comment has been minimized.

Copy link
Author

@rhoboro rhoboro commented Jan 28, 2020

勉強になった!
監査ログとそのほかのログの違いですが、アプリケーションが吐くログ(例えばCloudFunctionでprint()とか)って監査ログなんですかね? 🤔
意識してStackdriverに書き込んでるわけじゃない気もするけど監査ログではなさそうな気がした。
Stackdriverの画面で見分ける方法があればあると嬉しいかも。

構成はこの方が見やすいかもしれないなと思いました。
ログの表示(自分で書き込んでないという暗黙の前提で)
ログベースの指標
ログの種類(実はここまでのは監査ログで、そのほかに自分でも書き込めるよ)
ログの除外

@na0fu3y

This comment has been minimized.

Copy link
Owner

@na0fu3y na0fu3y commented Jan 29, 2020

監査ログとそのほかのログの違いですが、アプリケーションが吐くログ(例えばCloudFunctionでprint()とか)って監査ログなんですかね?

監査ログではない通常のログのようですね。監査ログは Audit オブジェクトが内包されるため、それで見分けられそうですが、詳しくみたことなかったです。確認します。
https://cloud.google.com/functions/docs/monitoring/logging#writing_logs

構成

修正してみます!

@na0fu3y

This comment has been minimized.

Copy link
Owner

@na0fu3y na0fu3y commented Jan 29, 2020

監査ログのフィルタについて言及されてました。

https://cloud.google.com/blog/products/gcp/best-practices-for-working-with-google-cloud-audit-logging

@na0fu3y

This comment has been minimized.

@na0fu3y

This comment has been minimized.

Copy link
Owner

@na0fu3y na0fu3y commented Jan 29, 2020

#39
構成の修正と、監査ログフィルタ、stdout や stderr が通常ログになる点の言及を追加しました。

@na0fu3y na0fu3y closed this Jan 29, 2020
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Projects
None yet
Linked pull requests

Successfully merging a pull request may close this issue.

None yet
2 participants
You can’t perform that action at this time.