“胥餘”常见有以下几种含义：
《庄子·大宗师》：“ 子桑户 、 孟子反 、 子琴张 三人相与友…… 莫然有间，而 子桑户 死，未葬。 孔子 闻之，使 子贡 往侍事焉。或编曲，或鼓琴，相和而歌曰：‘嗟来 桑户 乎！嗟来 桑户 乎！而已反其真，而我犹为人猗！’ 子贡 趋而进曰：‘敢问临尸而歌，礼乎？’二人相视而笑曰：‘是恶知礼意！’ 子贡 反，以告 孔子 ，曰：‘彼何人者邪？修行无有，而外其形骸，临尸而歌，颜色不变，无以命之。彼何人者邪？’ 孔子 曰：‘彼，游方之外者也；而丘，游方之内者也。外内不相及，而丘使女往吊之，丘则陋矣。彼方且与造物者为人，而游乎天地之一气。彼以生为附赘县疣，以死为决㱔溃痈，夫若然者，又恶知死生先后之所在！假于异物，托于同体；忘其肝胆，遗其耳目；反复终始，不知端倪；芒然彷徨乎尘垢之外，逍遥乎无为之业。彼又恶能愦愦然为世俗之礼，以观众人之耳目哉！’ 子贡 曰：‘然则夫子何方之依？’ 孔子 曰：‘丘，天之戮民也。虽然，吾与汝共之。’ 子贡 曰：‘敢问其方。’ 孔子 曰：‘鱼相造乎水，人相造乎道。相造乎水者，穿池而养给；相造乎道者，无事而生定。故曰，鱼相忘乎江湖，人相忘乎道术。’ 子贡 曰：‘敢问畸人。’ 孔子 曰：‘畸人者，畸于人而侔于天。故曰，天之小人，人之君子；人之君子，天之小人也。’ 颜回 问 仲尼 曰：‘ 孟孙才 ，其母死，哭泣无涕，中心不戚，居丧不哀。无是三者，以善处丧盖 鲁国 。固有无其实而得其名者乎？ 回 壹怪之。’ 仲尼 曰：‘夫 孟孙才 尽之矣，进于知矣。唯简之而不得，夫已有所简矣。 孟孙氏 不知所以生，不知所以死；不知就先，不知就后；若化为物，以待其所不知之化已乎！且方将化，恶知不化哉？方将不化，恶知已化哉？吾特与汝，其梦未始觉者邪！且彼有骇形而无损心，有旦宅而无情死。 孟孙氏 特觉，人哭亦哭，是自其所以乃。且也相与吾之耳矣，庸讵知吾所谓吾之乎？且汝梦为鸟而厉乎天，梦为鱼而没于渊。不识今之言者，其觉者乎，其梦者乎？造适不及笑，献笑不及排，安排而去化，乃入于寥天一。’ 意而子 见 许由 ， 许由 曰：‘ 尧 何以资汝？’ 意而子 曰：‘ 尧 谓我：“汝必躬服仁义而明言是非。”’ 许由 曰：‘而奚来为轵？夫 尧 既已黥汝以仁义，而劓汝以是非矣，汝将何以游夫遥荡恣睢转徙之涂乎？’ 意而子 曰：‘虽然，吾愿游于其藩。’ 许由 曰：‘不然。夫盲者无以与乎眉目颜色之好，瞽者无以与乎青黄黼黻之观。’ 意而子 曰：‘夫无庄 之失其美， 据梁 之失其力， 黄帝 之亡其知，皆在炉捶之间耳。庸讵知夫造物者之不息我黥而补我劓，使我乘成以随先生邪？’ 许由 曰：‘噫！未可知也。我为汝言其大略。吾师乎！吾师乎！齑万物而不为义，泽及万世而不为仁，长于上古而不为老，覆载天地刻雕众形而不为巧。此所游已。’ 颜回 曰：‘回 益矣。’ 仲尼 曰：‘何谓也？’ 曰：‘回 忘仁义矣。’ 曰：‘可矣，犹未也。’ 他日，复见，曰：‘回 益矣。’ 曰：‘何谓也？’ 曰：‘回 忘礼乐矣。’ 曰：‘可矣，犹未也。’ 他日，复见，曰：‘回 益矣。’ 曰：‘何谓也？’ 曰：‘回 坐忘矣。’ 仲尼 蹴然曰：‘何谓坐忘？’ 颜回 曰：‘堕肢体，黜聪明，离形去知，同于大通，此谓坐忘。’ 仲尼 曰：‘同则无好也，化则无常也。而果其贤乎！丘 也请从而后也。’ 子舆 与 子桑 友，而霖雨十日。 子舆 曰：‘ 子桑 殆病矣！’裹饭而往食之。至 子桑 之门，则若歌若哭，鼓琴曰：‘父邪！母邪！天乎！人乎！’有不任其声而趋举其诗焉。 子舆 入，曰：‘ 子之歌诗，何故若是？’ 曰：‘吾思夫使我至此极者而弗得也。父母岂欲吾贫哉？天无私覆，地无私载，天地岂私贫我哉？求其为之者而不得也。然而至此极者，命也夫！’ 子桑 曰：‘ 子舆 ，子舆 ，女恶知之！夫相造乎道者，无事而生定。今 子 与我，相造乎天者也。吾又安知夫造物者之不息我黥而补我劓，使我乘成以随先生邪？’ 子舆 曰：‘噫！未可知也。我为汝言其大略。吾师乎！吾师乎！齑万物而不为义，泽及万世而不为仁，长于上古而不为老，覆载天地刻雕众形而不为巧。此所游已。’ 子贡 曰：‘敢问畸人。’ 孔子 曰：‘畸人者，畸于人而侔于天。故曰，天之小人，人之君子；人之君子，天之小人也。’ 颜回 问 仲尼 曰：‘ 孟孙才 ，其母死，哭泣无涕，中心不戚，居丧不哀。无是三者，以善处丧盖 鲁国 。固有无其实而得其名者乎？ 回 壹怪之。’ 仲尼 曰：‘夫 孟孙才 尽之矣，进于知矣。唯简之而不得，夫已有所简矣。 孟孙氏 不知所以生，不知所以死；不知就先，不知就后；若化为物，以待其所不知之化已乎！且方将化，恶知不化哉？方将不化，恶知已化哉？吾特与汝，其梦未始觉者邪！且彼有骇形而无损心，有旦宅而无情死。 孟孙氏 特觉，人哭亦哭，是自其所以乃。且也相与吾之耳矣，庸讵知吾所谓吾之乎？且汝梦为鸟而厉乎天，梦为鱼而没于渊。不识今之言者，其觉者乎，其梦者乎？造适不及笑，献笑不及排，安排而去化，乃入于寥天一。’ 意而子 见 许由 ， 许由 曰：‘ 尧 何以资汝？’ 意而子 曰：‘ 尧 谓我：“汝必躬服仁义而明言是非。”’ 许由 曰：‘而奚来为轵？夫 尧 既已黥汝以仁义，而劓汝以是非矣，汝将何以游夫遥荡恣睢转徙之涂乎？’ 意而子 曰：‘虽然，吾愿游于其藩。’ 许由 曰：‘不然。夫盲者无以与乎眉目颜色之好，瞽者无以与乎青黄黼黻之观。’ 意而子 曰：‘夫无庄 之失其美， 据梁 之失其力， 黄帝 之亡其知，皆在炉捶之间耳。庸讵知夫造物者之不息我黥而补我劓，使我乘成以随先生邪？’ 许由 曰：‘噫！未可知也。我为汝言其大略。吾师乎！吾师乎！齑万物而不为义，泽及万世而不为仁，长于上古而不为老，覆载天地刻雕众形而不为巧。此所游已。’ 颜回 曰：‘回 益矣。’ 仲尼 曰：‘何谓也？’ 曰：‘回 忘仁义矣。’ 曰：‘可矣，犹未也。’ 他日，复见，曰：‘回 益矣。’ 曰：‘何谓也？’ 曰：‘回 忘礼乐矣。’ 曰：‘可矣，犹未也。’ 他日，复见，曰：‘回 益矣。’ 曰：‘何谓也？’ 曰：‘回 坐忘矣。’ 仲尼 蹴然曰：‘何谓坐忘？’ 颜回 曰：‘堕肢体，黜聪明，离形去知，同于大通，此谓坐忘。’ 仲尼 曰：‘同则无好也，化则无常也。而果其贤乎！丘 也请从而后也。’ 子舆 与 子桑 友，而霖雨十日。 子舆 曰：‘ 子桑 殆病矣！’裹饭而往食之。至 子桑 之门，则若歌若哭，鼓琴曰：‘父邪！母邪！天乎！人乎！’有不任其声而趋举其诗焉。 子舆 入，曰：‘ 子之歌诗，何故若是？’ 曰：‘吾思夫使我至此极者而弗得也。父母岂欲吾贫哉？天无私覆，地无私载，天地岂私贫我哉？求其为之者而不得也。然而至此极者，命也夫！’ 子桑 曰：‘ 子舆 ，子舆 ，女恶知之！夫相造乎道者，无事而生定。今 子 与我，相造乎天者也。吾又安知夫造物者之不息我黥而补我劓，使我乘成以随先生邪？’ 子舆 曰：‘噫！未可知也。我为汝言其大略。吾师乎！吾师乎！齑万物而不为义，泽及万世而不为仁，长于上古而不为老，覆载天地刻雕众形而不为巧。此所游已。’ 其中提到“胥餘”作为乐官名。
《尸子》卷下记载：“ 箕子胥餘 ，漆身为厉，被发佯狂。” 也有说法认为是箕子获封之地，后用作箕子的代称。
因箕子曾佯狂，后世便用“胥餘”表示佯狂避世。如清代顾炎武 《哭归高士》诗：“ 蕭條歷下狱，憔悴 胥餘 容。” 这里就是借“胥餘”体现一种避世的姿态与心境。