聚众斗殴罪的构成不仅取决于参与人数，而是基于行为的严重破坏公共秩序程度。无论一方是否聚众，只要斗殴行为对社会秩序造成严重破坏，都可构成聚众斗殴罪。因此，一方有三人以上，另一方只有一人或两人的斗殴行为仍属于聚众斗殴。这一观点在法律和司法实践中得到认可。
法律分析
聚众斗殴罪指为了报复他人、争霸一方或者其他不正当目的，纠集众人成帮结伙地互相进行斗殴，破坏公共秩序的行为。一方人数不少于三人就可以构成聚众斗殴，也就是说四个人打架，一方有三人，另外一方只有一人，也可以构成聚众斗殴。
从犯罪后果讲，一方构成聚众所实施的斗殴行为也会对社会公共秩序造成严重破坏，其严重程度并不一定会轻于双方都聚众进行斗殴。从法理上分析，他人行为不能作为判断犯罪嫌疑人是否构成犯罪的依据，也就是说，对方是否聚众，不影响一方已经构成聚众斗殴罪的事实。
总言而之，认为一方有三个人或三个人以上，而另外一方只有一个人或两个人的斗殴行为不属于聚众斗殴是既没有法律依据也没有法理依据的，司法实践中也并未如此认定。
拓展延伸
聚众斗殴：法律界限与刑事责任
聚众斗殴是指在公共场所或私人场地上，多人之间发生暴力冲突的行为。根据我国法律，聚众斗殴属于违法行为，严重者可能构成犯罪。根据刑法规定，聚众斗殴行为的界限主要取决于参与人数、斗殴方式和结果严重程度等因素。一般来说，聚众斗殴的参与人数较多、采用危险工具或武器、致人重伤甚至死亡的情况下，刑事责任将更为严重。对于聚众斗殴行为，法律将依法追究相关人员的刑事责任，可能面临拘役、有期徒刑等刑罚。因此，为了维护社会秩序和公共安全，我们应当遵守法律法规，避免参与聚众斗殴行为，以免承担刑事责任的后果。
结语
聚众斗殴罪严重破坏公共秩序，无论是一方多人还是双方都构成犯罪。参与人数多、使用危险工具或武器、造成重伤甚至死亡的情况下，刑事责任更为严重。法律将依法追究相关人员的刑事责任，可能面临拘役、有期徒刑等刑罚。为维护社会秩序和公共安全，请遵守法律法规，远离聚众斗殴行为，避免承担刑事责任的后果。
法律依据
《中华人民共和国治安管理处罚法》第二十六条有下列行为之一的，处五日以上十日以下拘留，可以并处五百元以下罚款；情节较重的，处十日以上十五日以下拘留，可以并处一千元以下罚款：
（一）结伙斗殴的；
（二）追逐、拦截他人的；
（三）强拿硬要或者任意损毁、占用公私财物的；
（四）其他寻衅滋事行为。