铝件冲完孔位老偏一两个丝，模具没问题啊咋回事

干冲压十来年了，最近换了一批6061的料做新能源电池托盘加强件，板厚3mm，冲孔孔位老是偏0.1~0.2mm，检具卡得死死的，模具研配的时候试过别的料是准的，一换上6061就飘。模具师傅说是材料回弹大，可孔位偏又不是翻边整形，是冲孔直接出来的，回弹影响应该没那么大吧？

想问问各位，铝件冲孔孔位精度到底咋控？跟模具研配有没啥讲究，还是得从热处理或者应力释放这块下手？