일년쯤 지나서 업데이트하면 해결되겠지 했는데 뭐 전혀 그럴 기미가 보이지 않아서, 검색해서 해결방법을 찾았다. 사실 프로필 창에서 이전 사진이 뜨는 것보다는 Edge 브라우저에서 자꾸 이전 프로필 사진이 뜨는게 너무나 화나서 찾음.
일단 프로필 사진 기록들을 제거하는 방법
%Appdata%\Microsoft\Windows\AccountPictures
탐색기로 진입하여 쓰지 않는 전 사진을 제거한다.
그 다음,
C:\Users\(사용자 이름)\AppData\Local\Microsoft\Edge\User Data\Default
에서 Edge Profile Picture.png을 지워준다음 엣지를 실행하면 된다.