Lavia gia nhập Chelsea từ Southampton trong kỳ chuyển nhượng mùa hè 2023 với giá 58 triệu bảng. Nhưng anh đã bỏ lỡ phần lớn thời gian nửa đầu mùa giải này vì những vấn đề liên quan đến chấn thương và thể lực. Lavia cuối cùng đã có trận ra mắt Chelsea từ băng ghế dự bị trong chiến thắng 2-1 trước Crystal Palace vào ngày 27/12/2023.
Cầu thủ 20 tuổi người Bỉ vào sân thay Ian Maatsen, thi đấu 32 phút cuối trận và đã gây ấn tượng mạnh. Một số cổ động viên Chelsea kêu gọi BHL tung Lavia vào đội hình chính trong trận đấu tiếp theo của The Blues. Tuy nhiên, Lavia gặp vấn đề về gân kheo sau khi vào sân và anh đã phải ngồi ngoài kể từ đó.
Chelsea xác nhận, Lavia sẽ phải nghỉ thi đấu trong phần còn lại của mùa giải