کاخ الیزه بین سال‌های 1718 تا 1722 توسط آرماند-کلود مویه آرشیتکت فرانسوی به سبک کلاسیک جهت محل اقامت کنت دِورو ساخته شد. پس از مرگ کنت در سال 1753 این کاخ به منظور اقامت مارکز دو پمپیدور یکی از معشوقه‌های لویی پانزدهم از سوی وی خریداری شد.
پس از این دوران، این کاخ برای اقامت پرنسس باتیلد دورلئان دختر پرنس کنده مورد استفاده قرار گرفت. اما بعدها و پس از انقلاب و در دوران ناپلئون به عنوان کاخ ریاست جمهوری در نظر گرفته شد.
از آن تاریخ نیز در دوره‌های مختلف بار‌ها محل کاخ ریاست جمهوری فرانسه تغییر پیدا کرد اما سرانجام این کاخ در دوره والری ژیسکار دیستن دوباره به عنوان کاخ ریاست جمهوری انتخاب شد و تاکنون نیز این موقعیت را داراست.
مقر اقامت بسیاری از سفرای کشور‌های خارجی در نزدیکی این کاخ قرار دارد. کاخ الیزه دارای باقی بزرگ است که همه ساله جشن معروف به روز باستیل در آن برگزار می‌شود.
همچنین کاخ رسمی ریاست جمهوری، محل اقامت رئیس جمهور و محل تشکیل جلسات هیت وزیران کشور فرانسه می باشد که در محله سنت اونوره پاریس واقع است.
