不少“黑中介”，专门左右物价、垄断市场、狡猾欺诈。所以，牙人一行经常被人看低了。没办法，大部分牙人的生意都是小生意，不弄一些小手段，吞没一些钱银，怎么维持一家大小的开支？但是这么一来，就自然引起了各阶层的厌恶，更受到文人士大夫的鄙视和排斥，大多数牙人的社会地位是低贱的，属于三教九流里的“下九流”。
俗话讲，车船店脚牙，无罪也该杀。这五种职业，分别是车夫、船家、店家、脚夫和牙人，因为其中某些人作恶的缘故，导致这五种职业在社会上都不受待见。或许可以说是职业歧视吧，但也不算太冤枉了他们。毕竟真的有些黑心的“车船店脚牙”，是吃人不吐骨头的。
而牙人让人痛恨的地方在于，地方黑势力渗透严重，大多数情况下都没有官府监管——在多一事不如少一事的宋朝，能有官府监管才怪了。所以，牙行是个典型的黑色产业，没有规范，市场垄断、欺行霸市是常有的事。百姓极其讨厌这个行业的人，但又离不开这个行业，如一些牲口买卖，没有牙人做中间人，根本无法完成交易。
就好像后世的黄牛一样，牙人就是宋朝的黄牛，只不过他们倒腾的是牲口、房地产、宅院、商铺罢了。
对了，被张正书称为“