以约定为准。如有证据证明你主张过权利,则以主张之日起计算3年诉讼时效。如无证据证明,则适用20年时效期间,在借款之日起的20年内可随时直接起诉。但如果你在第一次主张权利后,又超过3年才起诉或者再次向对方提出要求的,则超过诉讼时效,有可能丧失胜诉机会。