存当了童工，因为干活勤快又机灵，成为了张家二少爷张静江的贴身仆人。
这个张家在江浙一带也是巨富之一，有南浔四象之称。
后来张静江也是国民党的四大元老之一。
张静江身体不好，所以需要卢芹斋贴身伺候，而且卢芹斋又聪慧，所以很多事情张静江就委托卢芹斋干了，一来二去，卢芹斋从仆人变成了一个管事儿的掌柜的，张家的势力也滔天，在随张静江出使巴黎担任外交参赞的时候，卢芹斋成了但是张家成立的国际贸易公司的掌柜的。
卢芹斋一边打点两地生意，一边学习还通过张家的实力认识了不少文玩界的大人物，很快成为了文玩高手。
1905年，张静江结识了蒋校长，成为挚友，开始倾尽家产支持蒋校长的革命事业。
1908年，卢芹斋另立门户脱离了张家，创建了跨国文玩公司，有了跨国资源的卢芹斋开始在国内开商号，与人合作在全国收购盗卖股东，当时正值战乱年间，古董文玩这个东西最不值钱，所以让卢芹斋占了很大的先机。
而刚好那时由敦煌藏经洞引起的全世界考古对于华夏文化的兴趣，华夏的文物是当时国际最炽手可热的文玩，卢芹斋借此机会大赚了一笔，将大量的文物运往国外变卖。
其中包括很多国宝级的壁画，佛像，字画等。
古董这种东西，利润是无法想象的大，对于当时正处于战乱中的华夏，古董这种东西对于大多数人来说没有任何价值，这其中的利润让卢芹斋可能有些控制不住自己的欲望。
或者说，他也许根本没有意识到，这些通过这种类似‘走私’的方式贩卖到国外的文物，跟被掠夺似乎没有什么区别。
而国际上给卢芹斋的称呼是一个促进国际文化交流的文物保护者。
但是对于华夏来说，他是一个发了国难财的人。
尽管他的童年过的凄苦，但是他毕竟是生长在这片土地的人，什么东西能卖，什么东西不能卖，作为一个人，应该有所界定。
卢芹斋在昭陵六骏的贩卖过程中担任什么样的角色，有很多人说是袁世凯在背后唆使，但是再怎么唆使，袁世凯应该也不会傻到让人把它敲碎分批运走吧。
如果袁世凯想要征用，当时他自然能堂而皇之的拉到京城，完全不必要敲碎。
卢芹斋为了商业目的，除了敲碎了昭陵六骏之外，还敲碎了龙门石窟上很多佛像和壁画，那些佛像当年被西方的考古学者称之为比罗马万神庙过之不及的顶级雕塑文物。
但是卢芹斋毫不犹豫的敲碎了一块又一块，运往海外，换成英镑和法郎。
1914年《泰晤士报》反对卢芹斋等人对华夏龙门石窟的偷盗破坏行为。
臭名昭著的敦煌文物盗窃犯，也是所谓近代美国著名的探险家、考古学者兰登·华尔纳在去往龙门石窟看到那些被破坏的雕塑的时候，都忍不住对这种行为表示了谴责。
能让一个同行谴责的行为，那应该是多么卑劣的行径？
华尔纳访问了龙门石窟，发现那里连一个晚上也待不下去。洛阳的治安官警告他说，仅在龙门石窟外面就有1000名盗贼。
“军队每晚都出动，与盗贼发生冲突。两天前，军队遭遇了一场激战，杀掉了100多名盗贼。”华尔纳抵达龙门石窟时，看到墙上挂着被砍掉的盜贼脑袋。
华尔纳在给妻子的信中说：“……在我看来，我们所熟知的那组女士浮雕人物像，是中国艺术的最佳之作。我所见过的所有东西，都无法与其媲美……至于大平台上面那尊高近23米的坐佛及其8位侍从一一不用说，那是全世界最伟大的圣地之一……龙门石窟最近遭受的破坏，如我们听说的一样糟糕，随处可见被打掉雕塑头像的新茬儿。有的雕像被蓄意挖出，有的被士兵随意敲落……那种场面惨不忍睹，几乎使人感到恶心。”
9年后，华尔纳重返龙门。他在报告中写道：“……古董贩子为了我们的博物馆，正是从那些佛龛岩石上敲掉了人物雕像或头像。”此时，在吴佩孚元帅的领导下，故意破坏公物的行为已被阻止，但政府官员仍有把石窟珍宝当作礼物送给外国显贵和游客的习惯。
尽管国际上那些考古和文物专家们对于卢芹斋有着很中肯的评价，说他是想全世界推广了华夏的文化，丰富了世界文物市场的种类，并且还让很多文物免遭受战火的毁灭。
但是要明白一个事实，卢芹斋的所有商业运作，都是非法的，当时民国有明确针对文物贩卖的法律，禁止出口，而卢芹斋并不能定义为一个商人，只能是一个——走私商人。
而且所谓的文物保护也只是一句事后诸葛亮，没人能预测到会发生那十年对文物的破坏，所以保护根本不存在，反到是龙门石窟和昭陵六骏残破的身躯能够证实着他的罪行。
另外推广华夏的文化，对于一个只了解古董价值，不了解文物含义的商人，他能对华夏的文化有多少了解？如果他真的了解，会做出把文物打破这种丧心病狂的事情？