User-agent: *
Allow: /

# 指向sitemap
Sitemap: https://houlang.cloud/sitemap.xml

# 禁止爬取临时文件和缓存文件
Disallow: /.vitepress/
Disallow: /node_modules/
Disallow: /.git/
Disallow: /.DS_Store
Disallow: /*.json$
Disallow: /*.lock$

# 禁止爬取开发和构建相关文件
Disallow: /dist/
Disallow: /.trae/

# 允许爬取所有语言版本
Allow: /zh-CN/
Allow: /zh-Hant/
Allow: /en/

# 允许爬取重要资源
Allow: /logo.svg
Allow: /favicon.ico
Allow: /*.webp$
Allow: /*.jpg$
Allow: /*.png$

# 特定搜索引擎优化
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Baiduspider
Allow: /