人拿你的驾驶证扣分是有可能的，建议及时办理补办驾驶证，可以先办理临时身份证，然后用临时身份证到就近的车管所申请补办驾驶证。
《机动车驾驶证申领和使用规定》：
第六十三条机动车驾驶证遗失的，机动车驾驶人应当向机动车驾驶证核发地或者核发地以外的车辆管理所申请补发。申请时应当填写申请表，并提交以下证明、凭证：
（一）机动车驾驶人的身份证明；
（二）机动车驾驶证遗失的书面声明。
符合规定的，车辆管理所应当在一日内补发机动车驾驶证。
驾驶证丢了之后，要马上去办理补证手续，这样发了新证就可以有效防止有人捡了旧证用于扣分，因为有了新证后，旧证就作废了，在车管所去扣分，上网一查就知道这个驾驶证已经声明作废，不再具有扣分的功能，就会扣下这个旧驾驶证的。也就不会让你有损失了。