砖雕由明代徽州窑匠鲍四首创。相传鲍四跟父辈学会了烧窑活计，砖瓦生意虽好，但烧砖要花去不少时间和人力，赚不了几个钱。他看那些徽商会做生意的往往都富了回来，大把大把的钱钿往外掏，眼馋得很，便买了砖窑到淮安去做生意。鲍四几年生意一做，赚了无数的钱财，竟成了徽州首富。他非常得意，就处处表现自己有钱，在淮安修了鲍四庙，塑了自己的全身像，又揭榜要造一条鲍四街，说自己钱财无数。这时一个手抱长颈瓶，瓶插杨柳枝的中年妇女，来到鲍四面前一个嵇首说：“鲍老板，你别吹牛，世上只有技艺无尽头，哪有什么钱财无限。”鲍四听了涨红了脸，说：“你会什么技艺！”中年妇女说：“我会做莲花”鲍四不信，凭借自已钱多，提出要打赌，自己一步放一个元宝，对方得跟着放一朵莲花，一决输赢。那妇人满口答应，向前走一步，用手往地上一指，地上便现出一朵莲花，鲍四便跟在后面放上一只元宝。这样一步一放，半里路下来，那妇人的莲花还有，但鲍四的元宝没有。鲍四只好认输，淮安人使用地上的元宝在那放莲花的路面上盖了街房，起名叫“莲花街”。鲍四一下身无分文，只得砸了庙 中的自身像，凑了点盘缠，回到徽卅，只得又重操旧业——烧窑。有人告诉他那以莲花赌元宝的妇女是观世音，鲍四领悟，“钱财有限，技艺无穷”是神仙教诲，从此一心归门烧砖，由于对莲花印象太深，便烧起莲花砖，渐渐又在砖上刻了花木、虫鱼、人物、楼阁。三年后，鲍四技艺逐渐娴熟，收了几个门人一心研究砖雕。其时，一些徽商发财致富后，纷纷回故乡大兴土木，修词堂，建宅第，往往不惜重金。秀丽精美、清新淡雅的砖雕被广泛应用。从此徽州砖雕发展起来，名扬全国。
砖雕有平雕、浮雕、立体雕刻，题材包括翎毛花卉、龙虎狮象、林园山水、戏剧人物等，具有浓郁的民间色彩。明代砖雕的风格过趋粗扩、推拙而朴素；明末清初，由于富商们对豪华生活的追求，因此清代砖雕的风格渐趋细腻繁复，注重情节和构图，透雕层次加深。在见方尺余，厚不及寸的砖坯上雕出情节复杂，多层楼空的画面，从近景到远景，前后透视，层次分明，最多约有9个层面，令人产生精妙无比的美感。
徽州砖雕装饰重点是门楼、门罩；作为古民居出入口标志的门楼、门罩、造型多样。祠堂、书院、寺庙和窗户第装饰的门楼、八安墙：有垂花门楼，字匾门楼、四柱牌楼等数种。有一间三楼，也有四柱三间五楼，还有的用石块和水磨砖混合建成，下部还有鼓石，式样和牌坊很相似。门罩装饰起初比较简单，但到清初就有较多装饰比较华丽的门罩。徽州民宅上门楼、门罩，即是在大门外框上方，用水磨青砖砌成的向外凸出的线脚装饰，顶上附以瓦檐。除了具有一种装饰美外，其实有功能，则是挡住墙面上方流下的雨水，避免门上方墙体受潮湿。使石灰剥落出现不美的斑痕。把门楼砌成牌坊楼式的是祠堂、寺庙、民居中大多是阀阅富室之法：如西递镇有一家四柱三间五楼牌坊式的门楼、中间高，两边对称略底一点，檐口上方复瓦，四角上跷，并饰有砖雕鳌鱼吻。其鳌鱼吻长须是镌刻的弯曲向上扬，既美观又兼作避雷之用。门楼西向上凸起部分，高出墙体的尺半许，而后再从檐口向内用青砖减起线三道，下面饰雕花边，以此下延再递减，安装额枋、方框、元宝、横坊、匾额等，直至和墙面平并临近在大门门坊上尺许。上面每层均有砖雕图案，其中最精彩部位，即是两三层额坊，尤其是通景额坊，还有四至十二只元宝，三间均有对称的方框，还有雀替，悬柱头、榫饰、屋脊屋翎饰，均为门楼砖雕之重点。要递潘氏宗祠，门厅为五凤楼式，气势壮观，门厅两侧的八字墙上装饰有大面积精美细腻的砖雕，描以额枋和框，元宝雕刻更为精彩刻着江南风光、楼台亭阁、水榭、飞禽走兽。运用高浅、透雕、半圆雕手法、高低起伏有度，别具一格的韵味，犹如一幅幅水默画，清新淡雅。
