با استفاده از robots.txt نمیتونید برای یک دامنهی خاص این کار رو انجام بدید
مگر اینکه اول با استفاده از htaccess بررسی کنید که دامنهی فعلی چه دامنهای هست و اگر دامنهی مورد نظر بود و درخواست مربوط به فایل robots.txt بود یک فایل دیگه در یک زیرشاخه هست رو به گوگل بفرستید تا دسترسی اون مسدود بشه