回国后，杨卫民又做了一件更为疯狂的事，收藏中国古代雕塑，“当时市场上明清瓷器价格已经开始攀升，我一个工薪阶级已经买不起了，而古代雕刻却因为年代久远而且多为残件而无人问津。1999年我在潘家园市场花200元买到一个唐代菩萨胸像残件，自己喜欢的不得了，但朋友们却认为一个破石头不值钱，都说我疯了。它成为我的第一件造像藏品。”杨卫民不断的把这样的破石头搬回家，也因此被朋友称做“雕塑痴”。行为看似疯狂，杨卫民的头脑却是冷静的，他并不是盲目的收集，时常会反思一些最根本的问题。杨卫民认为现在中国正经历着史无前例的收藏热，人们谈论最多的是怎么收藏，怎么从中获利，然而为什么收藏？这个关键问题却很少被提及：“收藏源自每一个人与生俱来的不安全感，人的一生各个阶段需要各种符号，参照物来做参照，制造假象延长生命，战胜对死亡的恐惧。一旦你对生命不安全感有了体察，认清了它将永远伴随着我们直到生命结束，这些所谓藏品也就变得不很重要，一些知名大藏家往往将自己珍藏多年极其珍贵的藏品在有生之年捐献给社会。”

杨卫民的工作室中有一尊北齐的佛像，虽然残缺，仍能感受到佛教艺术品特有的宁静。指着这尊塑像杨卫民十分感慨：“比如我身边这尊北齐雕像，距今大约已有1500年，我收藏了它，暗示我的生命向前延伸了1500年，其实这只是一种假象。当你一个人面对它的时候，会有种恍惚的感觉，他历经千年岁月，即使我不在了，它还将在世间流传，从这个意义上讲不是我收藏了它，而是它收藏了我。”