كان لآلِ بَرْمَك نفوذٌ كبيرٌ في دولة الرشيد؛ إذ كان يحيى بن خالدٍ مُربِّيًا للرشيدِ، وكان أولادُه جعفر والفضل وموسى ومحمَّد أترابَ الرَّشيد، ثمَّ تغيَّرَت أحوالُ البرامكة وتبدَّلَ لهم الرشيدُ فجأةً، فقتل جعفرَ بنَ يحيى وسجَنَ يحيى وابنَه الفضلَ، وصادرَ أملاكَهم، وقد قيل في سبب ذلك أشياءُ؛ منها: أنهم- يعني البرامِكةَ- زاد نفوذُهم كثيرًا، وزادت مصروفاتُهم كثيرًا، حتى فاقوا الخليفةَ بذلك؛ ممَّا جعل أمرَهم مُريبًا مُخيفًا؛ فقد بنى جعفرٌ بيتًا له كلَّفَه عشرينَ مليونَ درهم، وعندما عاد الفضلُ بن يحيى مِن حَربِه في الديلم أطلق لمادِحيه ثلاثةَ ملايين درهم. وهذا السَّرفُ جعل الرشيدَ يتابِعُهم في الدواوينِ والكتاباتِ، فاكتشفَ وُجودَ خَلَلٍ كبير في مصاريفِ الدولة. وقيل: لتشَيُّعِهم وتعاطُفِهم مع العَلَويِّينَ؛ فقد حمل يحيى بن خالد البرمكي إلى يحيى بن عبد الله الطالبي في أثناء ثورتِه بالديلم مئتي ألفِ دينارٍ، كما أنَّ جعفرًا أطلَقَه بعد سَجنِه مِن دونِ عِلمِ الخليفة. وقد أحضر الخليفةُ جعفرًا وسأله، فأقرَّ بالأمرِ، فأظهرَ الرَّشيدُ أنَّه راضٍ عن عَمَلِه، فلمَّا خرج مِن مجلِسِه قال: "قتلني اللهُ بسَيفِ الهُدى على عمَلِ الضَّلالةِ إنْ لم أقتُلْك", وقد يُعدُّ هذا من أقوى أسبابِ نِقمةِ الرشيدِ عليهم، وقيل: لتعصُّبِهم للفُرسِ ومحاولةِ إقصاءِ العَرَب عن المناصبِ المُهِمَّة؛ فقد أبدَوا كراهيَتَهم لمحمَّد بن الليث لِمَيله عن العجَم، وسَعَوا لدى الرشيدِ للإيقاع بيزيدَ بن مزيد الشيباني، واتَّهَموه بالتراخي في قتالِ الخوارج. وقيل: بل لأنَّ الرشيدَ لَمَّا كان يحِبُّ أن يجتَمِعَ مع جعفر وأختِه العبَّاسة (أخت الرشيد) وهي مُحَرَّمة على يحيى، فزَوَّجَها الرشيدُ مِن جَعفرٍ على ألا يقرَبَها، بل فقط ليجتَمِعوا ويَسمُروا سويًّا، ولكِنَّ جعفرًا أتاها فحَمَلت العبَّاسةُ منه، ولَمَّا ولَدَت وجَّهَته إلى مكَّةَ، ثمَّ عَلِمَ الرشيدُ بذلك من بعضِ حواضِنِ العبَّاسة، فعَدَّ ذلك خيانةً مِن جعفرٍ، وقد تناقل المؤرِّخونَ قِصَّةَ عبَّاسة وجعفرٍ البرمكيِّ، وكأنَّها أحدَثَت فِعلًا، بينما عليَّةُ بنتُ المهدي تقولُ للرَّشيدِ بعد إيقاعِه بالبرامكة: ما رأيتُ لك يومَ سرورٍ تامًّا منذ قتَلْتَ جعفرًا، فَلأيِّما شيءٍ قَتَلْتَه؟ فقال: لو عَلِمتُ أنَّ قَميصي يعلمُ السَّببَ الذي قتلْتُ به جعفرًا لأحرقتُه. فهل كانت عليَّة بنت المهدي جاهلةً السَّبَبَ لو كان هناك مِثلُ هذه الفضيحة (قِصَّة عبَّاسة وجعفر البرمكيِّ) في قصرِ الخلافة؟!