専門機関で学習障害ではないとのことなので、もしかしたら学校や塾での一般的な教え方が本人に合ってなくて、なかなか理解できないという可能性は無いでしょうか？

学習障害でなくても、学習障害用？のドリルなどがあれば、普段と違う視点から学べて、達成感も味わえ楽しめるようになるかもしれません。

うちは小3息子が書字障害を疑い検査しましたが、違うと言われ、書字障害用のドリルや学校とは違う方法で文字を教えたら、以前よりすんなり出来るようになりました。

家で勉強のフォローを全部するのは、教えてるうちにケンカにもなったりとっても大変だと思います。（ホントにお疲れ様です！）

教育支援センターなどに相談してみたらどうでしょうか？何か教えてくれるかもしれません。
あとは、市やボランティアの無料の学習支援はありますか？学校を退職した先生や学生さんがボランティアで教えてくれていたりして、色々な方が寄り添ってくれるようなので、息子さんに合った教え方や困り感に寄り添ってくれる人が見つかるかもしれません。算数が苦手な息子の5年生の友達が利用しているそうで、とても助かっていると、先日お母さんと話したばかりだったので、どうかなーと思いました。

少しでも息子さんと親御さんの負担が減ると良いですね。

指摘だけして丸投げは辛いですよね💦
今、巷には個々に合わせた学習塾が個別やオンラインでもあるようなのでまずは苦手な算数だけ受けてみるというのはいかがでしょうか？本人も苦手なままだと自信をなくしてしまいそうですし、少しでもカバーしてあげれるといいですね！