借款人死亡后，其债务一般由继承人来偿还。具体分为以下情形：
一、借款人死亡后债务偿还

1. 由法定继承人清偿：根据《中华人民共和国民法典》第一千一百六十三条，既有法定继承又有遗嘱继承、遗赠的，由法定继承人清偿被继承人依法应当缴纳的税款和债务。这意味着，当借款人（被继承人）死亡后，其法定继承人需要负责清偿其依法应当缴纳的税款和债务。
2. 遗产实际价值为限：同样依据《中华人民共和国民法典》第一千一百六十一条，继承人以所得遗产实际价值为限清偿被继承人依法应当缴纳的税款和债务。超过遗产实际价值部分，继承人无义务清偿，但继承人自愿偿还的不在此限。这表明，继承人在偿还债务时，以其所得遗产的实际价值为限。
3. 特殊情况处理：若借款人没有遗产，或者其债务属于个人债务（如赌债等非法债务），则无法向配偶或其他非法定继承人追偿，此类债务在借款人死亡后自然消灭。
   二、债务偿还的特殊情况
4. 个人债务不追偿配偶：如果债务是借款人个人的，如未经配偶同意的个人消费或投资产生的债务，配偶无需承担偿还责任，只能向借款人的继承人追偿。
5. 无遗产则债务消灭：若借款人没有留下任何遗产，或者其债务远超遗产价值，那么超出部分无需偿还，债务在借款人死亡后自然消除。
   三、法律依据与总结
   《中华人民共和国民法典》中关于继承与债务清偿的相关规定，为处理借款人死亡后的债务问题提供了明确的法律依据。继承人需按照法律规定，以所得遗产实际价值为限，清偿被继承人的税款和债务。对于超出遗产价值的债务，继承人无偿还义务，但可选择自愿偿还。若债务为借款人个人债务，且未留下遗产，则该债务随借款人死亡而消灭。
   综上所述，借款人死亡后，其债务主要由继承人来偿还，且以遗产实际价值为限。对于个人债务或超出遗产价值的部分，无法追偿。这一规定既保护了继承人的合法权益，也确保了债务的合理清偿。