Что значит выражение ты мне не по фасону? Как понять?

"Ты мне - не по фасону" - это короткое выражение, видимо означает, что человек не подходит по статусу, или не подходит по внешнему виду, или по интеллекту не подходит. Наверно хочет сказать, что паре надо расстаться.