Lá cờ Olympic làm bằng vải màu trắng không viền, thêu 5 vòng tròn với 3 vòng bên trên màu xanh, đen, đỏ, còn 2 vòng bên dưới màu vàng và lục, lần lượt xếp từ trái sang phải. 5 màu này là màu quốc kỳ của các nước tham gia cuộc vận động Olympic thời bấy giờ. Về sau, có một cách giải thích khác: 5 vòng tròn này tượng trưng cho 5 lục địa trên thế giới: Màu xanh - châu Âu, màu vàng - châu Á, màu đen - châu Phi, màu lục - châu Đại Dương, màu đỏ - châu Mỹ.
Năm 1979, IOC đã chính thức nêu rõ trên Tạp chí Olympic rằng, theo Hiến chương Olympic, 5 vòng tròn này tượng trưng cho sự đoàn kết giữa 5 lục địa, đồng thời tượng trưng cho tinh thần thi đua công bằng thẳng thắn và hữu nghị giữa các vận động viên toàn thế giới đến tập trung tại TVH Olympic.