У меня 2 гражданства(РФ и литва) могу ли я выехать в Белорусию по паспорту рф(без загранника, он закончился) а потом из белорусии в литву по паспорту литвы?

Нет. Потому что вы для России гражданин России, для Литвы гражданин Литвы. И въехать в Беларусь как гражданин РФ, по недействующему документу, вы не можете. А как гражданин Литвы для въезда в Беларусь, надо подождать. Если нет визы. Безвизовый порядок въезда для граждан указанных государств будет действовать по 31 декабря 2023 года. Граждане Литвы и граждане (неграждане) Латвии могут следовать (въезжать в Беларусь и выезжать из нее) через международные пункты пропуска только на белорусско-литовском или белорусско-латвийском участках границы.

Для въезда в Беларусь достаточно внутреннего российского паспорта, загран не нужен. А выезжая из Беларусь, уже даёте паспорт Литвы. Мои знакомые так делают с паспортом Израиля вторым. Никаких проблем не возникает.