データベースのnoteテーブルの使用量を定期的に削減したい

[kanade]

Summary

リレーサーバーに参加していると他サーバーのノートも大量に流れてきて、運用しているサーバーの規模によらずDBのサイズが肥大化していきますが、noteテーブルの中身を定期的にダイエットさせることはできないでしょうか？
（リレーには参加していたいですが、ノートがDBに際限なく溜まっていくのを解決したいです）

定期的にと書いてありますが手動実行でかまいません。

[nakkaa]

過去に似たようなissueを起票したのを思い出しました。
#9972

2023.10.1以前の時はこんな感じのSQLを叩いて消してましたね。最新版ではcreatedAtカラムは消えたので使えないです。
(似たようなことを実施している方の記事: https://nanasi-apps.xyz/Misskey-oldremotenote )

DELETE FROM note
 WHERE "userHost" is NOT NULL
 AND "reactions" = '{}'
 AND "repliesCount" = 0
 AND "renoteCount" = 0
 AND ("visibility" = 'public' OR "visibility" = 'home')
 AND "createdAt" < now() - interval '12 month';

ただ、Misskey側の機能として用意していただけた方がサーバー運営者としては助かります。

[kanade]

過去のIssueがうまく検索できておらず、気付けずにすみませんでした！
クエリの共有ありがとうございます、助かります！
直接SQLを発行して消す方法でもいいのですが、小規模なサーバーあるあるな悩みかと思い共有した次第です。
可能であればMisskeyのコントロールパネルあたりから操作できたらいいなと思っています。

[fruitriin]

ちょうどノートを1ヶ月単位でパーティション切りたいなと思っていたらcreatedAtがなくて困っている

参考
https://www.postgresql.jp/document/10/html/ddl-partitioning.html
https://lab.mo-t.com/blog/introduce-table-partitioning-in-aurora-postgres

[kanade]

createdAtなくなっちゃったの不便ですね…単純にリアクションや返信のないリモートの公開ノートを消しちゃってもいいのかなと思いつつ、なにか弊害があったら嫌だなと思って実行できずにいます。

[syuilo]

古いリモートのコンテンツ定期的に消すオプション作るか
クリップやお気に入りされている可能性はあるけど、ひとつひとつチェックするのは現実的ではなさそうだから問答無用で消しちゃう

[kanade]

あー…クリップに保存されている可能性なども考えないといけないのですね、、
サーバー内で参照しているものについては極力残したい気持ちと、全部消してもいいやという気持ちが拮抗しています。
消す前のクリップやお気に入り登録のチェックってかなり面倒くさいですかね…？（手間がかかりそうではある）

[kakkokari-gtyih]

古いリモートのコンテンツ定期的に消すオプション作るか クリップやお気に入りされている可能性はあるけど、ひとつひとつチェックするのは現実的ではなさそうだから問答無用で消しちゃう

クリップ・お気にいりにリモートの投稿を登録するときは内部の投稿ID以外にオリジナルURLをもたせた状態で記録して、もしローカルに投稿がなければ再取得（フォールバック）するようにすればいいのでは

[syuilo]

なるほど
それを実現する場合先に脱CASCADE削除する必要があるわね

[kakkokari-gtyih]

クリップ・お気にいりにリモートの投稿を登録するときは内部の投稿ID以外にオリジナルURLをもたせた状態で記録して、もしローカルに投稿がなければ再取得（フォールバック）するようにすればいいのでは

これするくらいならいっそのことリモートのノート（内部ID・オリジナルURL以外）はRedis（保持数に上限があるやつ）に突っ込んでおいてもいい気がしてきた

[backrunner]

Any updates? Really need this feature. QAQ