174 إذا قلت لصاحبك: أَنْصِتْ يوم الجمعة والإمام يَخْطُبُ، فقد لَغَوْتَ
If you said to your companion: "Be quiet and listen" on Friday while the Imām is delivering the sermon, then you would be guilty of idle talk

عن أبي هُريرة رضي الله عنه مرفوعًا: «إذا قلتَ لصاحبك: أَنْصِتْ يوم الجمعة والإمام يَخْطُبُ، فقد لَغَوْتَ».

Abu Hurayrah (may Allah be pleased with him) reported that the Prophet (may Allah's peace and blessings be upon him) said: "If you said to your companion: 'Be quiet and listen' on Friday while the Imām is delivering the sermon, then you would be guilty of idle talk."

صحيح - ( متفق عليه ). Sahih/Authentic. [Al-Bukhari and Muslim]

من أعظم شعائر الجمعة الخطبتان، ومن مقاصدها وعظ الناس وتوجيههم، ومن آداب المستمع الواجبة: الإنصات فيهما للخطيب، ليتدبر المواعظ، ولذا حذر النبي صلى الله عليه وسلم من الكلام، ولو بأقل شيء، مثل نهي صاحبه عن الكلام ولو بقوله: " أنصت"، ومن تكلم والإمام يخطب فقد لغا فيحرم من فضيلة الجمعة؛ لأنه أتى بما يشغله ويشغل غيره عن سماع الخطبة.
From the greatest rites of Friday is the two sermons, and one of its purposes is to advise and direct the people. One of the obligatory manners the listener has to observe is to listen attentively to the orator in order to contemplate the admonition. That is why the Prophet (may Allah's peace and blessings be upon him) warned against speaking, even with a few words, such as forbidding one's companion from speaking by merely saying: "Be quiet and listen." Whoever speaks while the Imām is delivering the sermon is guilty of idle talk, and is thus deprived of the virtue of attending the Friday prayer, because he has done something that distracts him as well as others from listening to the sermon.

وجوب الإنصات للخطيب يوم الجمعة، وقد اتفق العلماء على وجوب ذلك. تحريم الكلام حال سماع الخطبة وأنه منافٍ للمقام ولو بالنهي عن المنكر ورد السلام وتشميت العاطس وكل ما فيه مخاطبة للآخرين. يستثنى من هذا من يخاطِبُ الإمام أو يُخاطِبُهُ الإمام. استثنى بعض العلماء من كان لايسمع الخطيب لِبُعْد، فإنه لاينبغي له السكوت بل يشتغل بالقراءة أو الذكر، أما من لا يسمعه لصمم، فلا ينبغي أن يشغل من حوله بالجهر بالقراءة، ويكون ذلك بينه وبين نفسه. عقوبة المتكلم حرمانه من فضيلة الجمعة. جواز الكلام بين الخطبتين. إذا ذكر النبي -صلى الله عليه وسلم- والإمام يخطب فإنك تصلي عليه وتسلم سرا ويحصل لك بذلك العمل بالأحاديث، وكذلك تأمين الدعاء.
One is required to attentively listen to the Friday sermon. The scholars agreed that this is obligatory. It is prohibited to talk during the Friday sermon, for this contradicts the solemnity of the situation, even if one speaks to prevent something wrong,