过高的违约金！！！

我是一名刚毕业的大学生，由于在高考填志愿时不清楚地质行业的就业情况，所以签了定向就业协议，当时单位口头承诺把我分配到家附近，但最后通知把我分配到一个离家很远的地方，而且单位情况不好，现在想回家庭所在城市工作，但违约金订的是6万再加赔偿金是2万再加单位出的学费是1.8万一共是9.8万，所以这是一笔不小的数目，我觉得这个违约金很不公平，单位违约只需赔偿我1万元，这个明显不公平，当时高考填志愿时我不成熟而且父母文化水平较低不懂，而且单位违反了他们的口头协议，所以综合考虑，是不是可以申请调解，或是法院仲裁更改协议，降低违约金数额呢？谢谢您