我跟别人签了合同写明非质量问题发生退货按照价格结算价目表未下浮价格计算出的退货情况总额5%收取包装及重检费用。并由乙方（就是我）承担退货所发生的费用。现在我东西卖了还有点剩还有2万多块现在想退货对方不给退说自己也不做这个产品了可以起诉他吗

合同解除应该是双方同意，并自愿签字为原则的，单方面解除合同应该属于违约，合同一般有注明违约金占合同总额的比例的。
单方面终止合同，属于单方面违约。这样的情况适用合同法。
合同法第一百二十二条 因当事人一方的违约行为，侵害对方人身、财产权益的，受损害方有权选择依照本法要求其承担违约责任或者依照其他法律要求其承担侵权责任。
根据自己认为合理的百分比要求赔偿，最后法院会要求双方之间协商，如果自己拒绝协商，那么法院会有司法衡量权，判决赔偿百分之几做为赔偿金。