法律解析：

一般情况下，饭店不给发票，消费者可以据此提出合理诉求，但直接拒付可能不太合适。

发票是指一切单位和个人在购销商品、提供或接受服务以及从事其他经营活动中，所开具和收取的业务凭证，是会计核算的原始依据，也是审计机关、税务机关执法检查的重要依据。

当饭店不给发票时，这是不符合相关规定的行为。消费者有权要求饭店提供发票，因为这是消费者的合法权益。直接拒付餐费可能会引发一些争议和纠纷。

从法律角度来看，消费者与饭店之间存在着餐饮服务合同关系。消费者支付餐费是基于享受了饭店提供的餐饮服务，而饭店有义务按照规定提供发票。如果饭店拒绝提供发票，消费者可以采取以下措施：可以与饭店进行沟通和协商，明确表达要求发票的意愿，并说明发票的重要性。如果协商无果，可以向相关税务部门进行投诉举报，让税务部门介入处理，督促饭店依法开具发票。

但是，直接拒付餐费可能并非是最恰当的解决方式。因为这样可能会导致双方矛盾激化，甚至可能引发肢体冲突等不良后果。在处理这类问题时，消费者应该保持理性和冷静，通过合法合理的途径来维护自己的权益。

饭店也应该认识到提供发票是其应尽的义务，不能以各种理由拒绝开具发票。否则，不仅会损害消费者的权益，也可能会面临税务部门的处罚。总之，在遇到饭店不给发票的情况时，消费者可以通过合法途径来解决，但不建议直接拒付餐费。

法律依据：

《发票管理办法》第十九条

销售商品、提供服务以及从事其他经营活动的单位和个人，对外发生经营业务收取款项，收款方应当向付款方开具发票；特殊情况下，由付款方向收款方开具发票。

第二十条

所有单位和从事生产、经营活动的个人在购买商品、接受服务以及从事其他经营活动支付款项，应当向收款方取得发票。取得发票时，不得要求变更品名和金额。