事实上，并不是没有约定违约责任，保证人就不需要承担保证责任。而且很多人还会误以为，签订保证合同的自己才算是担保人，而且自己作为保证人也仅仅只是承担主债务的保证责任。
首先，在实践中，保证人与债权人之间签订保证合同是最典型也是普通大众最了解的保证方式，除去这种，保证人与债权人、主债务人一同签订保证合同；保证人单独出具保证书都属于保证合同的情况，即使没有独立签订保证合同的保证人，同样也是需要承担保证责任。
其次，保证人担保的责任除去主债权外还包括利息、违约金、损害赔偿、实现债权的费用等等。合同中没有具体违约责任，并不能免除保证人的担保责任，只要担保合同没有其他的效力瑕疵，保证人就应当承担担保责任。
当然，保证人对于这些违约责任的承担会受到具体的保证方式的影响。
法律依据:
《中华人民共和国担保法》第十九条