卢梭一生和多位女性有染，主要的有两位。其一是华伦夫人，她在卢梭早年的生活中扮演了保护人、朋友、情妇、精神上的母亲等多重角色。
离开华伦夫人后，卢梭后来开始与黛莱丝同居。对于黛莱丝，卢梭同样抱有多种复杂的感情。黛莱丝陪伴卢梭走完了后半程人生，卢梭只是在晚年和其举行了一个极为简单的形式上的婚礼。黛莱丝为卢梭共生育了五个孩子，全部被卢梭送进了巴黎的育婴堂。而卢梭只是在后来草草地寻找了一下他留了标签的第一个孩子。
一本匿名发表的专门攻击卢梭的名为《公民们的感情》的书记录了卢梭抛弃其亲生孩子的事实，而这本书的作者正是卢梭的敌人——伏尔泰。 卢梭的父亲修理钟表技术精湛；母亲是牧师的女儿，颇为聪明，端庄贤淑。母亲因生他难产去世。他一出生就失去了母爱，他是由父亲和姑妈抚养大的。比他大7岁的哥哥离家出走，一去不返，始终没有音讯。这样，家里只剩下他一个孩子。
卢梭懂事时，知道自己是用母亲的生命换来的，他幼小的心灵十分悲伤，更加感到父亲的疼爱。他的父亲嗜好读书，这种嗜好无疑也遗传给了他。卢梭的母亲遗留下不少小说，父亲常常和他在晚饭后互相朗读。每读一卷，不一气读完是不肯罢休的，有时通宵达旦地读，父亲听到早晨的燕雀叫了，才很难为情地说：“我们去睡吧，我简直比你还孩子气呢。”在这种情况下，卢梭日复一日地读书，无形之中养成了读书的习惯，渐渐充实并滋养了他年幼的心灵。
7岁的卢梭就将家里的书籍遍览无余。他还外出借书阅读，如勒苏厄尔著的《教会与帝国历史》、包许埃的《世界通史讲话》、普鲁塔的《名人传》、那尼的《威尼斯历史》、莫里哀的几部剧本等等，他都阅读过。
由于这些历史人物的典范影响和他父亲的谆谆教诲，卢梭深深体会到了自由思想和民主精神的可贵。他既有父亲的爱国血统，又以这些伟人为榜样，甚至言行之间常把自己比作那些历史中的人物。有一天，他在桌旁叙说斯契瓦拉的事迹，在座的人全都很惊讶地看到卢梭走上前去，把手放在熊熊燃烧的炉火之上，来表演斯契瓦拉的英雄壮举。这种早熟早慧的表现，正是卢梭特有天资的最初显露。 卢梭快活的童年生活很快就结束了，在他13岁时，舅舅决定将他送往马斯隆先生那里，在他手下学当律师书记，希望他能赚点生活费用。但卢梭非常讨厌这种只为了赚钱而缺乏趣味的职业，每天琐碎的杂务使他头晕目眩，难以忍受。马斯隆先生似乎也不怎么喜欢卢梭，常常骂他懒惰愚蠢。卢梭无法忍受这种侮辱，便辞掉了工作。
不久，卢梭又换了一个职业，在一位雕刻匠手下当学徒。鉴于以前做书记时得到的不少教训，所以他对这个新工作依命而行，毫无怨言。卢梭本来很喜欢这种工作，因为他爱好绘画，挥动刻刀也觉得很有趣，而且镂刻零件，用不着多么高超的技术，所以他很希望在这方面取得卓越的成就。
有一天，卢梭在空余时间为几位朋友刻骑士勋章，他的师傅发现后，以为他在制造假银币，便痛打了他一顿。其实，当时卢梭年纪很小，对于银币根本没有什么概念，他只是以古罗马时期的钱币形状，做为模型罢了。师傅的暴虐专横，使卢梭对本来喜爱的工作感到苦不堪言。 卢梭离城出走后，经由一位朋支的介绍，结识了华伦夫人。他原以为华伦夫人是个老态龙钟的丑老婆子，不料她却是一位满脸和气、风韵十足的年轻女子。这使他大感惊讶和激动，正是这位夫人影响了他日后的生活。
卢梭听从华伦夫人的劝告，开始他的远途旅行。这也正适合他那早已形成的漫游癖好，他觉得这样的年纪就有机会爬山越岭，登临阿尔卑斯山的高峰，真是件美事。一路上，卢梭心情十分愉快，没有什么可担心的。这次旅程虽短，但卢梭喜爱自然风光，沿途的美景尽收眼底，他将感情寄托于大自然，虽然身处漂泊之中，却没有精神空虚之感。凡是映入卢梭眼帘的东西，都令他内心感到一种醉人的享受。大自然的奇伟、多彩和实际的美，深深地影响了卢梭的人生观。
以后他又经历了多次旅行，不论是旅途中的美景，还是乡村的田园生活，仍使他陶醉着迷。他热爱自然，崇尚自然。“他最伟大的教师，并不是任何一种书籍，他的教师是‘自然’”。
从少年期起，卢梭便酷爱自然。这种热忱，他曾不厌其烦的摹写、表现于他的著作中。自然，渗透了他整个生命。他用华伦夫人的某些清醒而夺人心目的特质，表现了自身，并使他陷入剧烈的情绪，这在他较晚的生活中，显得特别明晰，且使他和东方的大神秘主义者，呈现出相似之点。