src/server/handlers/robots-handler.ts

   1 import type { Response } from "express";
   2
   3 export default async ({ res }: { res: Response }) => {
   4   res.setHeader("content-type", "text/plain; charset=utf-8");
   5
   6   res.send(`User-Agent: *
   7   Disallow: /login
   8   Disallow: /login_reset
   9   Disallow: /settings
  10   Disallow: /create_community
  11   Disallow: /create_post
  12   Disallow: /create_private_message
  13   Disallow: /inbox
  14   Disallow: /setup
  15   Disallow: /admin
  16   Disallow: /password_change
  17   Disallow: /search/
  18   Disallow: /modlog
  19   `);
  20 };