Мне кажется, кроме книг важна и практика.
Читайте чужой код, старайтесь понять каждую строчку, достоинства и недостатки, спрашивайте опытных коллег, не стесняйтесь показаться нубом. Вырабатывайте стиль, учитесь отличать плохой код от хорошего.
Попробуйте написать свой (интересный вам) проект, не сильно сложный для начала. Пишите его как можно правильнее, умейте обосновать ваши решения. Растите над собой. Всё равно через 2 года старый код всегда кажется плохим (если нет, вы не растёте над собой и это плохо).
Выберете предметную область (графика, базы данных, сетевые технологии, сайты, вычисления, что угодно) и совершенствуйтесь в ней. Пробуйте ответить на все вопросы тут и на StackOverflow по данной тематике, читайте чужие ответы. Дискутируйте! Выясняйте, почему чужие ответы лучше (или хуже). Обязательно выучите английский, чтобы свободно читать документацию (её в разы больше на английском!) и общаться на SO (а также при случае и с заграничными заказчиками).
По поводу книг: по C++ я бы посоветовал Брюса Эккеля "Философия С++". Когда осилите, читайте что угодно Скотта Майерса, Херба Саттера и Андрея Александреску, они затащат вас в мир современного программирования, и мы все будем казаться вам динозаврами.
Мне как-то помогли разобраться в основах и дисциплинировать мышление "Алгоритмы и структуры данных" Никлауса Вирта. Учтите, диалект Паскаля, на котором он пишет там, далёк от современности, но правильному пониманию структурного программирования книга научит.
Если хотите развиваться в мир управляемых языков (не самая плохая идея, кстати), я бы посоветовал Албахари "C# x.x in a Nutshell", Джона Скита "C# in Depth" (отличная штука!). По Java отличая книга Джошуа Блоха "Java. Эффективное программирование", маст рид.
Если хотите знать нижний уровень (как всё на самом деле устроено) для настоящих индейцев, читайте что угодно Джеффри Рихтера (по всем направлениям). Но учтите: это изменит ваше сознание почище наркотиков. :) Одноклассники вот ещё советуют Арта Бейкера, для понимания уровня драйверов.
Из книг, которые меняют мироощущение, просто нельзя не назвать Абельсона/Сассмана "Структура и интерпретация компьютерных программ". Она об очень высокоуровневых штуках, понимании того, что же такое программирование. Когда осилите, достигнете дзена. Мозговые вирусы "Хаскель" и "Лисп" идут в комплекте.
Ну и обязательная ссылка на основоположника Вообще Всего Дональда Кнута: стащите в библиотеке "Искусство программирования" в хорошем переводе и почитайте. Он сложный и умопомрачительно офигенный, я предупреждал.