على الرغم من أهمية قضية السجناء إلا أنها لا تشكل جوهر المسألة. ذلك أن القضية الحقيقية تكمن في السياسة أحادية الجانب التي انتهجتها الأحزاب الكبرى التي حكمت إسرائيل. كما أثبت الانسحاب على نحو غير منسق من جنوب لبنان (بقرار من حزب العمل بعد اثنين وعشرين عاماً من الاحتلال) ثم من غزة (بقرار من حزب الليكود بعد تسعة وثلاثين عاماً من الاحتلال) أن أي دولة محتلة لا يجوز لها ببساطة أن تجلي قواتها عن منطقة كانت تحتلها لمدة طويلة ثم تتناسى أي صلة بينها وبين تلك المنطقة. فالسكان الذين ستخلفهم من ورائها لابد وأن تتولى حكومة راسخة ومؤسسات فاعلة إدارة أمورهم. على سبيل المثال، وعلى أبسط المستويات، كان لابد من حصول سكان جنوب لبنان على خرائط الألغام التي زرعتها القوات الإسرائيلية في أرضهم، لكن هذا لم يحدث قط.
但是，尽管囚犯们很重要，他们还不是问题的核心。真正的问题是以色列的各主要执政党派所奉行的单边主义。两个没有协调的撤军，即从南黎巴嫩(占领22年后工党决定)以及从加沙(占领39年后利库德集团决定)撤军证明，不能简单地撤离某个地区并把它抛在脑后。遗留下来的人民必须有安全的政府以及机构。例如，在最基本的层面上，南黎巴嫩的人民需要以色列埋设地雷地区的地图，但是却从来没有提供。