User-Agent: *
Disallow: */web/*
Disallow: /web/
Disallow: /web/*
Disallow: /ar/web/*
Disallow: /pt/web/*
Disallow: /ca/web/*
Disallow: /de/web/*
Disallow: /hu/web/*
Disallow: /zh/web/*
Disallow: /nl/web/*
Disallow: /fi/web/*
Disallow: /fr/web/*
Disallow: /ja/web/*
Disallow: /es/web/*
Disallow: /sv/web/*
Sitemap: https://www.ussteel.com/sitemap.xml