親に肩代わりしてもらった学費の返済について

未成年のとき、大学に進学するため奨学金を借り、残り数百万を親に肩代わりしてもらいました。そのときは口頭で社会人になったら親に返すと約束したのですが、正直社会人になっても余裕は無いと思うので、払いたくありません。こういうとき、訴えられたら負けてしまうんでしょうか。