Ленчик Ажурная часть тянется сильнее, чем просто лицевое поле. Так что, думаю, если готовый пуловер в мокром виде растянуть по выкройке (как собственно, всегда и рекомендуют), то он выровняется. А пряжа у Вас какая? По составу, в смысле?
Можете сфотографировать и показать? Все вместе будем думать, как быть?