The phrase «Я хочу выпить» / «Я хотел бы выпить» without a direct object definitely means ‘I want to drink alcohol’ while «Я хочу пить» means ‘I want to drink’ / ‘I’m thirsty’.