针对跨模态检索任务中图像与文本模态的语义特征复杂度不一致问题，提出了一种局部细粒度对齐与全局特征推理相结合的图文匹配方法。首先将图像和文本特征输入自适应交叉注意网络，该网络在交叉注意机制内设置门控单元，利用文本（图像）模态中的相关语义特征，自适应地引导图像（文本）模态的交叉注意。突出关键的局部对齐特征的同时及时高效地过滤掉冗余的交互信息，从而实现更精准的细粒度对齐。然后利用自适应交叉注意网络输出的包含文本（图像）引导信息的特征，在全局推理网络中逐步合成图像（文本）全局对齐特征。不仅利用这些特征之间的长短期记忆关系灵活地将细粒度对齐特征融合为全局特征，并且在迭代更新当前全局特征时能够根据跨模态交互信息加深对整体潜在语义信息的理解。最后采用交叉熵损失函数训练整个模型。提出的模型在公开数据集MS COCO和Flickr 30k上进行一系列实验，利用Recall@K指标对比实验结果，证明该模型优于目前的先进模型。