一般情况下，小孩在学校不小心把老师车前窗玻璃砸坏，通常是需要赔偿的，但不一定是全部赔偿，以下为你详细分析：

    小孩一方的责任

   根据《中华人民共和国民法典》第一千一百八十八条规定，无民事行为能力人、限制民事行为能力人造成他人损害的，由监护人承担侵权责任。监护人尽到监护职责的，可以减轻其侵权责任。有财产的无民事行为能力人、限制民事行为能力人造成他人损害的，从本人财产中支付赔偿费用；不足部分，由监护人赔偿。

   所以，如果小孩是无民事行为能力人（不满八周岁）或者限制民事行为能力人（八周岁以上的未成年人），其造成老师车玻璃损坏，通常由小孩的监护人来承担赔偿责任。如果小孩自己有财产，比如有压岁钱等个人财产，先从其本人财产中支付赔偿费用，不足部分再由监护人赔偿。

    学校可能承担的责任

   依据《中华人民共和国民法典》第一千一百九十九条和第一千二百条的规定，如果小孩是无民事行为能力人，在学校学习、生活期间受到人身损害或者造成他人损害的，学校应当承担侵权责任；但是，能够证明尽到教育、管理职责的，不承担侵权责任。如果小孩是限制民事行为能力人，在学校学习、生活期间受到人身损害或者造成他人损害，学校未尽到教育、管理职责的，应当承担侵权责任。

   例如，学校如果存在管理疏漏，比如在小孩活动区域没有设置必要的警示标志或者防护措施，导致小孩有机会拿到可能砸坏玻璃的物品并造成损害，那么学校可能要根据其过错程度承担相应的赔偿责任。在这种情况下，小孩的监护人就不需要承担全部赔偿责任。

    老师自身可能存在的责任

   如果老师自身存在一定过错，例如将车停在了不允许停车的学校区域，或者没有采取合理的安全措施来保护车辆，那么老师自身也可能需要对玻璃损坏的后果承担部分责任。

   综上所述，小孩把老师车前窗玻璃砸坏后，是否需要全部赔偿要综合考虑多方面因素。建议双方家长、老师以及学校进行友好沟通，根据各自的过错程度协商确定赔偿比例和金额；若协商不成，也可以通过法律途径解决。