Merhaba,
Compose dosyanız aynı network'deyse bağlantı hostuna container name kullanabilirsiniz.
Test için istedğiniz container'dan üzerinden telnet atabilirsin, yanıt veriyorsa devam..

telnet c-mysql 3306