谁借你的车就用谁的驾照去扣分，借给他人的那段时间你可以要求别人给你处理，如果是当场被交警抓住，交警是扣他的分；如果是电子眼拍照，那么让他拿着他的驾驶证，到交警大队去接受罚款扣分，还是扣他的。
根据《中华人民共和国道路交通安全法》第一百一十四条规定，“公安机关交通管理部门根据交通技术监控记录资料，可以对违法的机动车所有人或者管理人依法予以处罚。对能够确定驾驶人的，可以依照本法的规定依法予以处罚。”因此，若车辆出借人无法向交警证明违章时的实际驾驶人，则对车辆登记人进行处罚。
罚款肯定记在你名下，记分应当让实际用车人去认领，罚款也可以让用车人出。如果用车人拒不承担责任，只要没有计满12分，你就认栽吧。如果计满12分或者有其他严重的后果，你最好收集证据申请复议，让交警判定违章责任。实在不行，可以到法院起诉，行政诉讼，要求撤销交警错误的行政行为。证据不足就别折腾了，如果你朋友连这点责任都不愿意承担，建议远离，下次别再借车了。
