Azureの機能のみでは満たすことができません。

構成案
Azure側でExpressRoute、AWS側でDirectConnectをご用意いただき、
プロバイダー様のルーターで適切にルーティングいただくことで
ご要望の構成を実現することは可能かと存じます。