وكانت اليهود الموادعون بالمدينة وما حولها ثلاث طوائف: بني النضير، وبني قريظة، وبني قينقاع.
ولقد عرض لبعض السفهاء شبهة في قتل ابن الأشرف، فروى الواقدي عن إبراهيم بن جعفر عن أبيه قال: قال مروان بن الحكم وهو على المدينة وعنده ابن يامين النضيري: كيف كان قتل ابن الأشرف؟ قال ابن يامين: كان غذرًا. ومحمد بن مسلمة جالس شيخ كبير، فقال: يا مروان! أيغدر رسول الله ﷺ عندك؟! والله ما قتلناه إلا بأمر رسول الله، والله لا يؤويني وإياك سقف بيت إلا المسجد، وأما أنت يا ابن يامين فلله علي لا قدرت عليك وفي يدي سيف إلا ضربت به رأسك. فكان ابن يامين لا ينزل من بني/ قريظة حتى يبعث رسولاً ينظر محمد بن مسلمة، فإن كان في بعض ضياعه نزل فقضى حاجته ثم صدر، وإلا لم ينزل. فبينا محمد في جنازة وابن يامين بالبقيع، فرأى محمد نعشًا عليه جرائد رطبة لامرأة، جاء فحله، فقام إليه الناس فقالوا: يا أبا عبد الرحمن ما تصنع؟ فنحن نكفيك. فقام إليه، فلم يزل يضربه بها جريدة جريدة حتى كسر ذلك الجريد على وجهه ورأسه حتى لم يترك فيه مصحًا ثم أرسله ولا طباخ به، قال: والله لو قدرت على السيف لضربتك.