倪瓒从小得长兄抚养，生活极为舒适，无忧无虑，倪昭奎又为他请来同乡“真人”王仁辅为家庭教师。倪瓒受到这样的家庭影响和教育，养成了他不同寻常的生活态度，清高孤傲，洁身自好，不问政治，不愿管理生产，自称“懒（嬾）瓒”，亦号“倪迂”，常年浸习于诗文诗画之中，和儒家的入世理想迥异其趣，故而一生末仕。性好洁，服巾日洗数次，屋前后树木也常洗拭。家中藏书数千卷，亲手勘定。其祖父为本乡大地主，富甲一方，赀雄乡里。父早丧，弟兄三人，同父异母长兄倪昭奎（字文光），是当时道教的上层人物，曾“宣受常州路道录”、“提点杭州路开元宫事”、“赐号元素神应崇道法师，为主持提点”、又“特赐真人号，为玄中文洁真白真人。”二哥（同胞）倪子瑛。在元代，道教的上层人物地位很高，有种种特权，既无劳役租税之苦，又无官场倾轧之累，反而有额外的生财之道。倪瓒，元末明初画家、诗人。初名珽，字泰宇，后字元镇，号云林子、荆蛮民、幻霞子等。江苏无锡人。倪瓒家富，博学好古，四方名士常至其门。一个山水画家倪云林，这个人与其说有洁癖，不如说有极大的强迫症，这个人爱干净到了极致。
青少年时期的倪瓒虽然家境富裕，生活优裕，但未染上纨绔子弟习气，对自身的学习修养，抓得挺紧。家中有一座三层的藏书楼“清閟阁”，内藏经、史、子、集、佛经、道籍千余卷。倪瓒每日在楼上读书作诗，除精心研读典籍外，对佛道书籍也多有涉猎。“清閟阁”内还藏有历朝书法名画，时间较远的有三国锺繇的《荐季直表》，较近的有宋代米芾的《海岳庵图》等。倪瓒对这些名作朝夕把玩，心摹手追，尤其对董源的《潇湘图》、李成的《茂林远岫图》、荆浩的《秋山图》，潜心临摹，揣摹其神韵气质。同时，他常外出游览，见到有价值的景和物随手描绘，他精细地观察自然界种种现象，认真地写生，归后往往画卷盈笥。倪瓒一方面注意继承传统技法，博采各家所长，勤奋的学习，为他后来在绘画上的创新打下了坚实的基础。他的厕所都是他独自重新设计的，他的厕所搭建在一个阁楼之上，是悬空的。然后用香木搭好格子隔开，下面放泥土，上面放着有鹅毛。每当排泄物落下都会带起飞扬的鹅毛，煽起香木的味道，便可遮盖秽气。
据历史记载，他绘画的所有工具以及文房四宝每天都要安排别人实时擦拭，在他院里有一颗很有诗意的的梧桐树，他也安排人每天进行清洗。就是说他家的东西也是一个小主人，全部有相应的仆人照应。他的这个洁癖习惯十分严重，就算朋友拜访也不会给他面子。一日，他的好朋友来访，聊的尽兴夜色渐深，便住宿于他家。虽然住的客房，但是还是令他十分不放心，夜里起来巡视多次。其中有一次，刚好听见朋友咳嗽，这可把他急坏了，一夜都睡不着，唯恐他讲那个痰乱吐。第二天客人一走，他便急忙安排仆人去寻找他听到的那口痰，仆人翻来翻去也没有找到，但为了交差，便找了一片脏脏的树叶上去，这才作罢。他看到这个之后，十分厌恶地斜视了一眼，捂住鼻子命人丢到三里开外。
他甚至洁癖到不近女色，有一回，他看中了一个貌美的歌姬，便带回家来过夜。但是他一直嫌这个女子不干净，便让她去洗澡，洗完之后他上下摸一遍闻一闻，还是觉得不干净，让她再去洗，如此往复，一直不能令他满意，这样到了天亮，这样子的循环还没有结束，最后没有办法直接作罢，这样的操作让这个歌姬受不了，无法理解。倪瓒有个清秘阁，旁人不让进。还有一匹白马，爱护备至。有一次他母亲病了，他求葛仙翁看病，葛仙翁要求用白马来接。那天正下着雨，倪瓒是孝子，只好同意。雨中的白马弄的一塌糊涂。到了倪家，葛仙翁要求上清秘阁看看。倪瓒只好同意。葛仙翁在清秘阁乱翻一气，到处吐痰。倪瓒终身不再进清秘阁。
倪本身也是古怪之人，当他寄住在邹家的时候，邹先生有个女婿叫金宣伯，这天来拜访他。倪瓒闻知金宣伯是个读书人，连鞋子也没穿好就出来迎接。可当见到他说话长相都很粗鲁后，竟然很是愤怒，打了他一巴掌。金宣伯又是惭愧又是忿怒，也不见邹先生就走了。邹先生出来后，很是责怪他。倪瓒说：“金宣伯面目可憎，言语无味，我把他骂走了！”再后来，他因为一些原因进牢房了，即便如此，他还是如此的坚持爱干净。当时狱卒送牢饭过来，他让狱卒把饭举到眉毛平齐，干什么呢？原来是防止狱卒的唾沫跑进饭里面。这可让狱卒很气愤，一个阶下囚还这么大的架子，十分气愤地直接把他和马桶绑在一起，最后经过别人的求情才了罢。这样的一个洁癖近癫狂的人最后却死在一个肮脏至极的地方。据一些历史记载他居然是被朱元璋扔进粪坑淹死的，他一生不愿碰到任何一点不干净的东西，却在最后死在了茅坑里。
倪瓒是影响后世最大的元代画家，他简约、疏淡的山水画风是明清大师们追逐的对象，如董其昌、石涛等巨匠均引其为鼻祖，石涛的书法题画，从精神到体式皆是以倪瓒为法的。倪瓒亦是一个以复古为旗帜，而追求艺术个性化的书法家，他与张雨、杨维桢一样，既属于这个时代，又不属于这个时代，这就是艺术对时代的超越性价值。倪瓒性情清高孤傲，个性迂癖，不事俗务，一生没做过官。没想到却已这个结局收场，也是一种悲哀啊。