Replies: 7 comments 2 replies
-
|
オブジェクトストレージかメディアプロクシの設定がおかしそう |
Beta Was this translation helpful? Give feedback.
-
|
@fruitriin |
Beta Was this translation helpful? Give feedback.
-
|
R2を解除して叩いてみました
|
Beta Was this translation helpful? Give feedback.
-
|
Beta Was this translation helpful? Give feedback.
-
|
|
Beta Was this translation helpful? Give feedback.
-
●そもそもうちはおひとり様なので以下を無効にしました ●コントロールパネルからリモートファイルのキャッシュを全削除 ● ●Cloudflareの設定を見直しました
Cloudflare側の設定はいい感じっぽいのですが、相変わらず一部リモートユーザーのアバターは表示できません。 表示できない場合 表示できる場合 どうも、うちのfilesを参照してるとダメ（ファイルがない）で、キャッシュを無効にしてリモートを直に見に行くようになってからはいけるみたいです。filesの参照をやめさせるにはどうすればよいのか… あと、カスタム絵文字も不調です。 
左は直接アップしたやつ コントロールパネルでカスタム絵文字を参照すると？になってしまう
ここで参照しているファイルは下記 直接アップした絵文字は？だけど使える。 |
Beta Was this translation helpful? Give feedback.
-
|
↑で試していた輸入カスタム絵文字は、問題発生時点でインポートしていたものなので、別のはじめましての絵文字をインポートしたらうまく行ったかも
|
Beta Was this translation helpful? Give feedback.
-
|
他の鯖主から凄く似っている問題聞いたので自分のコミット関連性あるかもしれません サーバーURLを1xまたはMedia proxyを2x以上変えた場合はデータベースのURLは既にProxy使用しているかの判定が乱れてAvatar/Emoji URLをネストされて安全上アタックのかないかわからないので拒否したかもしれない。このコミットをrevertして一時的な修正できるけどは安全上推奨しません。 48d1539 対策はちょっと難しい。。 完全に修正しする方法はDBにローカルユーザーAvatarとEmojiのProxy URLに記入しない方がいいと思います。 このセキュリティコミットがなくても同じ根本的な原因で他の鯖主も廃止されたMedia ProxyがDBに残存してシャットダウンできませんの問題も聞いた。 他の鯖主のため書いたテンプレート： このSQL Queryはデータを変更しません、問題あるアバターが統計でぎるだけ (nested count > 0 -> with typed as (
select *,
case
when "avatarUrl" ~ '%2Fproxy%2F' then 'nested'
when "avatarUrl" ~ '^https://[PROXY/CDN/etcはこれで]' then 'proxied'
when "avatarUrl" ~ '^https://mi\.yumechi\.jp' then 'direct'
else 'unknown'
end AS proxy_type
FROM "user"
WHERE "avatarUrl" IS NOT NULL
)
select count(*),
proxy_type
from typed
group by proxy_type;
+--------+------------+
| count | proxy_type |
|--------+------------|
| 181360 | proxied |
+--------+------------+
SELECT 1以下のQueryは自分も他の問題のために使ったけど危険 begin transaction read write;
CREATE TEMPORARY TABLE "user_avatar_update" (
"id" CHARACTER VARYING(32) PRIMARY KEY NOT NULL,
"updatedAvatarUrl" CHARACTER VARYING(512) NOT NULL
)
CREATE INDEX "user_avatar_update_url" ON "user_avatar_update" ("updatedAvatarUrl")
with typed as (
select *,
case when "avatarUrl" ~ '%2Fproxy%2F' then 'nested'
when "avatarUrl" ~ '^https://mproxy\.mi\.yumechi\.jp' then 'proxied'
when "avatarUrl" ~ '^https://mi\.yumechi\.jp' then 'direct'
else 'unknown' end
AS proxy_type
FROM "user" WHERE "avatarUrl" IS NOT NULL)
INSERT INTO "user_avatar_update" ("id", "updatedAvatarUrl")
SELECT "id", [ 特定の状況に違います ] AS "updatedAvatarUrl" FROM typed WHERE proxy_type = 'direct'
SAVEPOINT collected;
-- 結果を確認 (URLをコピペにてブラウザにテストして！！）
SELECT * FROM "user_avatar_update" LIMIT 10;
UPDATE "user" SET "avatarUrl" = "user_avatar_update"."updatedAvatarUrl" FROM "user_avatar_update" WHERE "user"."id" = "user_avatar_update"."id"
SAVEPOINT updated;
-- Commit 前に結果を確認
with typed as (
select *,
case
when "avatarUrl" ~ '%2Fproxy%2F' then 'nested'
when "avatarUrl" ~ '^https://mproxy\.mi\.yumechi\.jp' then 'proxied'
when "avatarUrl" ~ '^https://mi\.yumechi\.jp' then 'direct'
else 'unknown'
end AS proxy_type
FROM "user"
WHERE "avatarUrl" IS NOT NULL
)
select count(*),
proxy_type
from typed
group by proxy_type;
select * from "user" limit 10;
COMMIT; |
Beta Was this translation helpful? Give feedback.
-
-- ご教示いただいたSQLを実行してみました。
WITH typed AS (
SELECT
*,
CASE
WHEN "avatarUrl" ~ '%2Fproxy%2F' THEN 'nested'
WHEN "avatarUrl" ~ '^https://misskey-r2.eri-sunaga.com/files' THEN 'proxied'
WHEN "avatarUrl" ~ '^https://misskey\.eri-sunaga\.com' THEN 'direct'
ELSE 'unknown'
END AS proxy_type
FROM "user"
WHERE "avatarUrl" IS NOT NULL
)
SELECT
COUNT(*) AS count,
proxy_type
FROM typed
GROUP BY proxy_type;
-- 結果
count | proxy_type
-------+------------
25165 | direct
(1 row)
-- directの内容を確認すべく、proxyに該当するavatarUrlのurlを抽出
SELECT
REGEXP_REPLACE("avatarUrl", '^https://misskey\.eri-sunaga\.com/proxy/avatar\.webp\?url=', '') AS extracted_text
FROM "user"
WHERE "avatarUrl" ~ '^https://misskey\.eri-sunaga\.com/proxy/avatar\.webp\?url=';
-- 結果
extracted_text
-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F1d5716e6-0de9-4f78-9b8e-8b53b297e4fd&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2Fac0ae6d2-b336-4f01-a385-706fdd6e082d&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F06574676-2ee4-45a8-afc0-b9be9b45e2f5&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F938be048-9668-42a3-8213-ba257127839b&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F4b0d435d-672f-4582-aa51-056ce3e5e7c6&avatar=1
misskey-r2.eri-sunaga.com%2F%2Fa1c525ab-5f4b-4137-bd11-4bc0d7475a06.png&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F03271ea8-f2a3-4b17-8aa7-23a526846494&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F51822fa7-b799-44ee-be71-a4b4a067fb68&avatar=1
https%3A%2F%2Fmisskey.eri-sunaga.com%2Ffiles%2F16c9651a-6221-44de-ad53-a1133117783f&avatar=1
（省略）
-- https%3A%2F%2Fmisskey.eri-sunaga.comを除外します。
SELECT
REGEXP_REPLACE("avatarUrl", '^https://misskey\.eri-sunaga\.com/proxy/avatar\.webp\?url=', '') AS extracted_text
FROM
"user"
WHERE
"avatarUrl" ~ '^https://misskey\.eri-sunaga\.com/proxy/avatar\.webp\?url='
AND REGEXP_REPLACE("avatarUrl", '^https://misskey\.eri-sunaga\.com/proxy/avatar\.webp\?url=', '') NOT LIKE '%https%3A%2F%2Fmisskey.eri-sunaga.com%';
-- 結果
extracted_text
-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
misskey-r2.eri-sunaga.com%2F%2Fa1c525ab-5f4b-4137-bd11-4bc0d7475a06.png&avatar=1
https%3A%2F%2Frss-mstdn.studiofreesia.com%2Ffile%2Faccounts%2Favatars%2F110%2F887%2F911%2F251%2F917%2F122%2Foriginal%2Fff378175b41e613e.png&avatar=1
misskey-r2.eri-sunaga.com%2F%2F7fa2984c-36cf-460f-9049-49883943ea3e.jpeg&avatar=1
https%3A%2F%2Ffiles.nakn.jp%2Fnaakey%2Fimages%2F874c9e58-f54c-415e-8730-cb81b64b6f9c.png&avatar=1
misskey-r2.eri-sunaga.com%2F%2Fec6b33fb-dbd4-4d3c-92c3-646dd68b2b4e.webp&avatar=1
misskey-r2.eri-sunaga.com%2F%2F4b55ca78-8ef0-4f00-a5bc-2132a2bc5e93.png&avatar=1
misskey-r2.eri-sunaga.com%2F%2F4003d0ef-54af-4a09-b5c5-1572cfb15135.png&avatar=1
https%3A%2F%2Fpub-dd2fff42f08f4cea91a62d1a0d5155a6.r2.dev%2Ffile%2F026d4f08-7236-4b2b-bea9-b8e45a40b816.png&avatar=1
https%3A%2F%2Fmedia.odakyu.app%2Faccounts%2Favatars%2F113%2F249%2F263%2F990%2F249%2F138%2Foriginal%2F7e4e03736fe3b155.jpeg&avatar=1
https%3A%2F%2Ffiles.nakn.jp%2Fnaakey%2Fimages%2Fwebpublic-49b799ba-a62e-4747-9cad-b0fcc038d304.webp&avatar=1
https%3A%2F%2Fpub-dd2fff42f08f4cea91a62d1a0d5155a6.r2.dev%2Ffile%2Fca55ad51-9d09-4ce4-91cf-913805ab6567.png&avatar=1とりあえずまとめるとオブジェクトストレージなし時代
url=https%3A%2F%2Fmisskey.eri-sunaga.com〜を参照している画像について
これですが、リモートファイルのキャッシュをやめて数日経ったからか、だいぶ改善されてきていそうです。 出勤しなきゃなので一旦ここまでで、今後の対応とかはまた追って考えます汗 |
Beta Was this translation helpful? Give feedback.
-
💡 Summary
2024年10月にインスタンスを立てました。
当初
13.13.2で立て（参考サイトがそうだったからで、深い意味はないです）、先月？から下記不調（きっかけとかは不明、立てた当初は問題なかったです）で、
2024.10.2-alpha.2にアップデートした後も自力で対処できそうになく、こちらにあげさせていただきます。できないこと
13.13.2のときは、猫モードだと耳が透けて見える2024.10.2-alpha.2にしたら、元画像のざっくりした色のキャンバスで表示（画像の表示はできていない）🥰 Expected Behavior
全ての画像が問題なく読み込める
🤬 Actual Behavior
ほとんどの画像が表示できない
📝 Steps to Reproduce
No response
💻 Frontend Environment
🛰 Backend Environment (for server admin)
Do you want to address this bug yourself?
Beta Was this translation helpful? Give feedback.
All reactions