不能直接不还抵押物，需依法行使抵押权。针对此问题，以下详细分析：
一、抵押权的行使条件

1. 合法有效的抵押合同：根据《中华人民共和国民法典》第四百条，设立抵押权，当事人应当采用书面形式订立抵押合同，并明确被担保债权的种类和数额、债务人履行债务的期限、抵押财产的名称和数量等情况。
2. 主债权到期且未受清偿：债权人需在债务履行期限届满，且债务人未履行还款义务时，方可行使抵押权。
3. 依法优先受偿：依据《中华人民共和国民法典》第四百零一条，抵押权人在债务履行期限届满未受清偿时，不能直接取得抵押财产所有权，只能依法就抵押财产优先受偿。
   二、非法扣押财产的后果

• 法律责任：根据《中华人民共和国民事诉讼法》第一百二十条，任何单位和个人采取非法拘禁他人或非法私自扣押他人财产追索债务的，应当依法追究刑事责任，或予以拘留、罚款。
• 侵权风险：未经债务人同意，私自扣押其财产可能构成侵权，需承担相应法律责任。
  三、合法维权途径

1. 协商处置：债权人与抵押人可协商以抵押物折价或拍卖、变卖抵押物所得价款受偿。
2. 法律诉讼：若协商不成，债权人可向人民法院提起诉讼，请求法院拍卖、变卖抵押物。