A.K.I.です。

Accessでは「パススルークエリ」を使っていますか？
それ以外だと、Accessのクエリで処理するため、データをごっそり持ってきてロー
カルで処理されてしまうようです。
どうしてもAccessでしかできない処理がある場合は抽出条件だけパススルークエ
リで書いて、そのクエリをAccessのクエリで処理する等するとかなり速度がかわ
りますよ。