地摊商的神农信仰是在上述医药始祖信仰的基础上发展起来的。《易经》曰：“神农斫木为耜，揉木为耒，耒耨之利，以教天下，盖取诸益。日中为市，致天下之民，聚天下之货，交易而退，各得其所，盖取诸噬嗑。”是说神农不仅教民农耕，还是聚市交易的开创者。江户幕府第五代将军德川纲吉（1646—1709）所绘神农像的赞语也说“初艺五谷，尝百草，制医药，始为日中之市”，强调了神农 “始为日中之市”的功绩。因此，至江户时代中后期，日本的的屋们开始把神农作为地摊商行业的守护神。
　　关于的屋，日本民间历来有“七成商人，三成地痞”的说法，意思是说，在被称为“的屋”或“香具师”的流动商贩中，70%是正经的生意人，30%是属于黑道的地痞流氓。的屋大多善于鉴貌辨色，巧舌如簧，弄虚作假，套路丛生，加上他们形貌乖张，人多势众，消费者受骗上当后很难讨回公道。
　　的屋的帮会组织大多借神农之名义。昭和时代初期，在东京、横滨一带的地摊商帮会联合成立了“昭和神农实业组合”，开始以现代民间社团组织的形式维护地摊商业的运作。首任理事长仓持忠助在某杂志上发表题为《神农道的提倡》一文，说要“感受自悠久太古以来象征爱及其体验，并君临全人类的神农皇帝的余荣，在无限错综复杂的现代，高举热爱家庭的信念和共存共荣的标语”走向社会；《昭和神农实业组合宣言》也宣称，要“以我等团结之力获得牢固不拔的社会地位，积极为社会公共尽瘁”，表达了以神农精神规范行业行为、争取社会地位的决心，以及热爱家庭、贡献社会的良好愿望。
　　“二战”以后，日本各地成立了名为“神农商业协同组合”的民间社团，在当地政府部门注册登记，受到政府的认可。神社、寺庙举行庙会，或者公园、广场举办公众活动时，即有当地的“神农商业协同组合”和主办单位进行协商，向警察、卫生等有关部门递交出摊申请，然后组织地摊商届时设摊营业。事实上，“神农商业协同组合”控制了当地流动商贩的经营地盘，是处于黑白两道之间的民间组织。
　　作为流动商贩的的屋群体是日本黑帮组织成员的三大来源之一。日本的黑帮根据其成员来源可分三大系统：一是由赌场老板及其赌徒们所组成，称为“博徒系”；二是由流动商贩组成的“的屋系”；三是以退伍軍人、不良少年为主要成员的系统，日本人称之为“愚连队”。后来，这三大系统的帮会互相吸收合并，山口组就是吸收了三大系统中某些帮会而形成的日本最大的黑帮组织。
　　的屋系和博徒系的帮会一样，有特定的行会切口，有超越血缘关系的拟制亲属组织，有严格的帮会规矩。但两者亦有诸多不同。例如，的屋系多以“某某组”或“某某一家”作为他们组织的名称，以神农为守护神，举行仪式时设 “神农皇帝”的神位，和博徒系的“天照大神”“八幡神”等有所不同；他们奉 “神农道”为行商道德，和博徒系帮会标榜的“仁侠道”也不一样。现在，的屋系的帮会大多丧失了独立组织的功能，作为较大势力黑帮组织的下属帮会进行活动。
　　随着日本经济的发展和社会保障制度的完善，居无定所、靠赶场子摆地摊谋生的人也越来越少，的屋群体在社会发展的洪流中正逐渐被淘汰。特别是2011年实施了《暴力团排除条例》以来，的屋群体因和黑社会有千丝万缕的瓜葛而往往成为警方打击的对象。2013年，兵库县“神农商业协同组合”就因长期向黑社会提供保护费而受到县公安委员会的通报，最后不得不宣布解散。近年，各地有关部门加强了对的屋群体的管制，以的屋为主体的地摊商的生存空间正在不断缩小。或许在不远的将来，代表日本城市烟火气的地摊商将和他们的神农信仰一起，迎来不可避免的消亡之日。