小人国里并不太平，首先是根据鞋跟高低区分的高跟党和低跟党两个党派间斗争激烈，此外还有邻国布莱夫斯古国不时发动侵略威胁他们，皇帝希望格列佛可以帮忙。在两国作战时，格列佛采取特殊战略，将敌舰缚在一起拖走，取得了战争的胜利，令敌国遣使求和。但他拒绝消灭布莱夫斯古国，引起了皇帝的不满。一天夜里皇宫失火，情急之下格列佛撤了一泡尿将火扑灭，违反了该国法律，又加上别人的挑拨弹劾，皇帝疏远了格列佛并决定对他处以刑罚。格列佛逃到了布莱夫斯古国，并在那里找到一只小船出航，后被一艘英国商船搭救回国。 
但生性爱冒险的格列佛回国两个月后就搭乘“冒险号”再次出航，不幸遇上大风偏离航线，他被遗落在了布罗卜丁奈格国（大人国）。和小人国相反，这里的人都是身高七十多英尺的“巨人”，这里的一切在格列佛眼中都是骇人的庞然大物。他被一个农夫发现后带回家里，农夫九岁的女儿成为照料他的小保姆。在别人怂恿之下，农夫将格列佛作为玩物带到镇上展览演出挣钱，令他精疲力竭。在格列佛奄奄一息之际，农夫又将他卖给了朝廷。格列佛进入皇宫后，成为国王和王后的宠臣，常常进行各种表演为他们解闷。 
大人国民风淳朴，国王也非常博学，他很喜欢和格列佛谈话，询问关于欧洲风俗、宗教、法律和学术等的情形，并对格列佛所夸耀的英国国情提出了很多疑问甚至加以嘲笑。这使格列佛很恼火，认为国王目光短浅狭隘，使自己受到了侮辱。在大人国，格列佛处处显得很渺小，需要和老鼠、蜜蜂等搏斗，一个苹果或冰雹就可以砸死他，一碗奶酪也会把他淹死，猴子可以把他抱在怀里，从腮帮子里抠出食物喂他……他的所作所为往往会成为大人国人们的笑柄。有一天仆人带着格列佛出去，装着他的箱子被一只鹰叼走抛到海上，不久他被一艘船救起，回到了英国。但他回去之后，经过了一段时间才重新习惯了原来那种正常“尺寸”的生活。当然，他还在计划着下一次的航行。