しばらく山とランは遠のいています

仕事、そしてコロナの関係でしばらく山やランからは遠ざかっています。来年の春から復帰できるようそろそろ運動再開していきたいと思います。ちなみに今、BIツールのPower BIが半分趣味になって、完全な運動不足になっています。20201020

2020年6月15日月曜日

【Power BI】ソースデータの読み込み速度の改善3 グルーピング処理を減らす  

この5月6月は完全に山とランは諦めました。

現在、Power BIのソースデータをPowerQueryで読み込む時間の短縮に没頭しています。

Power Query の処理の中で一番重いのはどうやらグルーピング処理のようです。複数行にまたがって集計する場合は、どうしてもグルーピング処理が必要になってきます。
このグルーピング対象のテーブルサイズとグルーピングの回数のいかに小さくするかが処理の速さに大きく影響しています。

ソースは大きく変更しないといけませんが、やはりこれがもっとも効果があります。グルーピング処理の回数を減らしても対象のテーブルが大きくなるとその処理に時間がかかるので、よーく考えて、最後はやってみないとわからないです。今回はこれで何度も作り直すことを続けています。



0 件のコメント: