不履行合同不退还定金不算诈骗的，属于合同纠纷，即对方违约。可以要求对方履行合同，也可以要求解除合同，并要求对方承担违约责任，赔偿损失。合同的履行是合同法规定的双方的义务，一方不履行合同就是违反了法律关规定，要付相应的法律责任。
但是仅仅是不履行合同义务还不是诈骗的必然要素，只能算是民事责任而不构成诈骗罪，可以按照合同的规定追究其违约责任要求赔偿。 《民法典》第一百八十六条 因当事人一方的违约行为，损害对方人身权益、财产权益的，受损害方有权选择请求其承担违约责任或者侵权责任。
但是有下列情形之一的，会构成刑法上的合同诈骗罪，需要承担相应的刑事责任：
(一)以虚构的单位或者冒用他人名义签订合同的;
(二)以伪造、变造、作废的票据或者其他虚假的产权证明作担保的;
(三)没有实际履行能力，以先履行小额合同或者部分履行合同的方法，诱骗对方当事人继续签订和履行合同的;
(四)收受对方当事人给付的货物、货款、预付款或者担保财产后逃匿的;
(五)以其他方法骗取对方当事人财物的。
如果行为人具有诈骗的故意和非法占有的目的，并且是以欺诈手段骗取对方签订、履行合同，且数额较大的，则构成合同诈骗罪，处三年以下有期徒刑或者拘役，并处或者单处罚金。
法律依据：
《中华人民共和国民法典》
第一百八十六条 因当事人一方的违约行为，损害对方人身权益、财产权益的，受损害方有权选择请求其承担违约责任或者侵权责任。
第五百七十七条 当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
《中华人民共和国刑法》
第二百二十四条 【合同诈骗罪】有下列情形之一，以非法占有为目的，在签订、履行合同过程中，骗取对方当事人财物，数额较大的，处三年以下有期徒刑或者拘役，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产：
（一）以虚构的单位或者冒用他人名义签订合同的；
（二）以伪造、变造、作废的票据或者其他虚假的产权证明作担保的；
（三）没有实际履行能力，以先履行小额合同或者部分履行合同的方法，诱骗对方当事人继续签订和履行合同的；
（四）收受对方当事人给付的货物、货款、预付款或者担保财产后逃匿的；
（五）以其他方法骗取对方当事人财物的。