如果打架造成他人轻伤二级，且拒绝赔偿受害人的损失，可能会面临以下后果：
1. 刑事责任：根据《刑法》第234条，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。如果拒绝赔偿，可能会加重刑罚。
2. 民事责任：受害人可以提起民事诉讼，要求侵权人承担赔偿责任。如果法院判决支持受害人的请求，但侵权人拒不执行判决的，可能会被司法拘留或强制执行财产。
3. 社会影响：拒绝赔偿可能会导致公众对侵权人的负面评价，影响其声誉和形象。
4. 赔偿金额可能更高：如果侵权人在刑事案件中被判处罚金，那么罚金加上原本应该支付的赔偿金，总额可能会更高。
总之，拒绝赔偿可能会导致更严重的法律后果和社会负面影响。建议在与受害人协商解决纠纷时，尽量寻求和解方式，以减轻可能的法律责任。