孙楠被一些网友称为“渣男”，主要基于以下几个方面的行为和事件：

感情生活不专一

孙楠与前妻辛欣的关系在公众中曾备受关注。辛欣为了孙楠放弃了日本的学业，两人经历了同居生活，但最终还是分道扬镳。

孙楠与买红妹的闪婚也备受争议。两人在认识24小时后便求婚，婚后买红妹独自带娃，而孙楠则忙于事业，对家庭疏于关心。

孙楠与潘蔚的婚姻也未能长久，且孙楠在争夺孩子抚养权的问题上表现出了不负责任的一面。

对家庭责任的逃避

孙楠在与买红妹离婚后，将女儿送入一所没有教学资质的“女德学校”，而他的继女却在正常学校就读，这种做法引发了广泛的争议和批评。

在《我是歌手》总决赛上的“退赛门”事件中，孙楠在没有知会节目组的情况下突然宣布退出，这种不负责任的做法让现场一片混乱，也反映了他对待工作和家庭的态度。

不实指控和谣言

孙楠曾被指控婚内出轨，但真相大白后，他的渣男本质暴露无遗。此外，他还在拿到女儿抚养权后，将女儿送入一所没有教学资质的“女德学校”，而他的继女却在正常学校就读。

在公众面前的形象与私下行为的不符

孙楠在公众面前一直以才华横溢的歌手形象出现，但他的个人生活和行为却多次引发争议，这种反差也让人质疑他的人品。

综上所述，孙楠之所以被称为“渣男”，主要是因为他在感情生活、家庭责任、以及公众形象等方面存在诸多争议和不负责任的行为。这些行为让公众对他的评价大打折扣，也影响了他在娱乐圈的声誉。