الحاشية المحيطة بالرئيس الأمريكي (ويلسون) وبنتيجة هذه العلاقة، أخذت الإدارة الإفرنسية في الجزائر باتهامه بإقامة علاقات غير مباشرة مع الرئيس ويلسون والإيحاء له: (لوضع مبادئه في حقوق الشعوب لتقرير مصيرها، وبالتالي استعادة الجزائر لاستقلالها).
واستطاع الأمير خالد باستمرار الدفاع عن نفسه، وتحدي متهميه لإثبات صحة أقوالهم. وكان يردد: (لو فعلت ذلك، لغادرت الجزائر منذ عهد بعيد، ولما بقيت فيها). وظهر أن تلك الاتهامات لم تكن تستند إلا على تقارير الشرطة، وهي تقارير كانت تفتقر إلى الصحة والدقة، كما أن التقارير التي قدمها - المتطوعون - عن علاقاته بالحزب الدستوري التونسي، لم تكن صحيحة. الأمر الذي دفع الإدارة الإفرنسية في الجزائر إلى طي الموضوع، وعدم رفعه إلى حكومة باريس، ووضع حد حاسم للحوار حول هذا الموضوع. غير أن الحقيقة الثابتة هي أن المبادىء التي طرحها ويلسون بشأن (حق تقرير المصير) قد تركت أصداء قوية في أوساط المواطنين الجزائريين حتى بات الحديث عن هذا الحق هو محور أحاديث العامة والخاصة في المجتمع الجزائري لمدة طويلة من الزمن.
بقي الأمير خالد محافظا على ولائه لفرنسا بصورة عامة، على الرغم من كل المداخلات والإغراءات. وها هو أحد رؤسائه (العقيد كلوزيه) سجل في تقريره عنه سنة ١٩١٩ ما يلى: (أعرف النقيب خالد منذ واحد وعشرين عاما، إنه ضابط يتمتع