В паре с другим знаменитым французским альпинистом Луи Лашеналем Эрцог 3 июня 1950 года совершил первое в истории восхождение на гималайскую вершину Аннапурна I - десятый из четырнадцати восьмитысячников планеты (8091 м), расположенный в центральном Непале.
Покорение вершины стало настоящим подвигом - спортсмены сделали это за один сезон, в легких ботинках и без использования кислорода. Возвращение оказалось едва ли не сложнее, чем подъем - в результате обморожения двое альпинистов, добравшихся до пика, потеряли все пальцы ног, а Эрцог, который потерял свои перчатки, лишился почти всех пальцев на руках.
Позднее Эрцог занимал пост госсекретаря в министерстве молодежи и спорта Франции, девять лет был мэром Шамони, в течение 25 лет - членом Международного Олимпийского комитета. В декабре 2011 года удостоен звания кавалера Большого креста ордена Почетного легиона. Он также был награжден Военным крестом 1939-1949 годов как член французского сопротивления.