농협·서금원·신복위 노조, 이전에 반발…"피해는 취약계층 몫"