rails console経由で実行した状況から判断するに、chewy:reset 叩くと 1000件ずつバルクでインデックスしていってるようで、1000件分のデータ合計が http.max_content_length のデフォルト値 (100MB) を超えると ECONNRESET が発生して落ちる、という流れかと予想される・・・
Conversation
Notices
-
あくあーら@イワテドン鯖缶 (aquarla@iwatedon.net@iwatedon.net)'s status on Thursday, 23-Aug-2018 13:13:57 JST
あくあーら@イワテドン鯖缶
-
あくあーら@イワテドン鯖缶 (aquarla@iwatedon.net@iwatedon.net)'s status on Thursday, 23-Aug-2018 13:24:40 JST
あくあーら@イワテドン鯖缶
アホみたいにデカい列データをインデックスする場合は、ElasticsearchのHTTPリクエストサイズ上限値に気を付けましょうね、というオチでした
ランラン ? :sabacan: ?? repeated this. -
あくあーら@イワテドン鯖缶 (aquarla@iwatedon.net@iwatedon.net)'s status on Thursday, 23-Aug-2018 13:25:50 JST
あくあーら@イワテドン鯖缶
なおマストドンのTootはデカいデータでもなんでもないので、このような現象は起こり得ないけど、1トゥート本文のみで1MBを超えられるようなインスタンスがあればあるいは・・・?
-