ويُلاحَظ أن بيريز ظهر دائماً ضمن ثنائي يقف من ورائه بن جوريون، والأول في هذا الثنائي كان موشى ديان. وكان تعيين بيريز في منصب المدير العام لوزارة الدفاع راجعاً إلى أن بن جوريون كان يستهدف أن يضمن الولاء الشخصي لقيادته، فبيريز ليس من العسكريين أساساً، ولا من الأسماء اللامعة في المنظمة الصهيونية أو الوكالة اليهودية، ولكنه استمد خبراته من الحقل النقابي الطلابي ومن العمل الحزبي في نطاق حركة العمل. وقد تغلغل نفوذ بيريز في كل من المجتمع العسكري والمؤسسة العسكرية وصارت كلمته نافذة في الجيش، كما صارت له مكانة خاصة لدى بن جوريون وحزب الماباي أيضاً، الأمر الذي أثار تخوف القادة المخضرمين مثل ليفي إشكول وإسحق سابير وجولدا مائير.

وإثر انسحاب بن جوريون من حزب الماباي عام 1965، بسبب تداعيات فضيحة لافون، شارك بيريز مع بن جوريون وموشي ديان في تأسيس حزب رافي، وعُيِّن سكرتيراً عاماً للحزب. ولكن الحزب فشل في الحصول على أغلبية نسبية تمكنه من تشكيل الحكومة (10 مقاعد في انتخابات عام 1965) . ولكن شخصية وطموحات كل من بيريز وديان جعلتهما يرفضان الانتظار في صفوف المعارضة. ومع تصاعد نذر حرب عام 1967 تم تشكيل حكومة وحدة وطنية عُيِّن ديان فيها وزيراً للدفاع. وفي أواخر عام 1967 قرر كل من ديان وبيريز أن يعودا إلى حزب العمل بعد أن أعلنا حل رافي تاركين بن جوريون في الفراغ. وعكف بيريز على العمل الدؤوب داخل الآلة الحزبية من أجل الاندماج من جديد في الحزب والتعبير عن ولائه بجهد يعوض اهتزاز ذلك الولاء سابقاً.