Elasticseaechのbulk apiのタイムアウト、たまーに見かけるわね
Conversation
Notices
-
FATBOSS@イワテドン鯖缶 (aquarla@iwatedon.net)'s status on Friday, 26-Nov-2021 11:37:11 JST FATBOSS@イワテドン鯖缶
-
のえる (noellabo@fedibird.com)'s status on Friday, 26-Nov-2021 11:37:11 JST のえる
@aquarla Elasticsearch鯖の能力とバッチサイズをバランスさせるとめっちゃ早くなりますね。タイムアウトするパターンは、完全にキャパオーバーということだなー。
-
のえる (noellabo@fedibird.com)'s status on Friday, 26-Nov-2021 11:46:24 JST のえる
@aquarla 現状1_000で、4スレッド実行でも250ずつ投入って感じなるんですけど、ESのJVMに2Gあててもだめなので、
100にして25投入とかにすると超スムースです。-Xms512mぐらいに下げてもぜんぜん平気。
ま、Sudachiもいるので、通常はもっと軽いかと思いますが、でもこの調整絶対要りますね。
-