Le second album de ce projet secondaire de Cassie Ramones (Vivian Girls) et de Kevin Morby (Woods) frappe d'emblée par son cachet sympathique et bon enfant. Le rock du quatuor new-yorkais est plus jovial que celui des Vivian Girls, plus vigoureux que celui de Woods. En revanche, on perçoit un manque d'assurance et de finition qui nuit d'abord à l'écoute. On commence par se dire que ces Babies sont à plusieurs tours de vis de pouvoir se réclamer des Pixies, de Sonic Youth et de Dinosaur Jr., leurs influences les plus manifestes. Il y a néanmoins plusieurs bons moments sur Our House on the Hill. Voilà un album qui agrippe par-derrière, au fil d'écoutes répétées. Le groupe a une force de frappe certaine et un flair pour les mélodies obliques propres à faire lever même les riffs les plus banals du sol.