src/main.rs

   1 #[macro_use]
   2 extern crate diesel_migrations;
   3
   4 use crate::diesel_migrations::MigrationHarness;
   5 use actix::prelude::*;
   6 use actix_web::{web::Data, *};
   7 use diesel::{
   8   r2d2::{ConnectionManager, Pool},
   9   PgConnection,
  10 };
  11 use diesel_migrations::EmbeddedMigrations;
  12 use doku::json::{AutoComments, Formatting};
  13 use lemmy_api::match_websocket_operation;
  14 use lemmy_api_common::{
  15   lemmy_db_views::structs::SiteView,
  16   request::build_user_agent,
  17   utils::{
  18     blocking,
  19     check_private_instance_and_federation_enabled,
  20     local_site_rate_limit_to_rate_limit_config,
  21   },
  22 };
  23 use lemmy_api_crud::match_websocket_operation_crud;
  24 use lemmy_db_schema::{source::secret::Secret, utils::get_database_url_from_env};
  25 use lemmy_routes::{feeds, images, nodeinfo, webfinger};
  26 use lemmy_server::{
  27   api_routes,
  28   code_migrations::run_advanced_migrations,
  29   init_logging,
  30   root_span_builder::QuieterRootSpanBuilder,
  31   scheduled_tasks,
  32 };
  33 use lemmy_utils::{
  34   error::LemmyError,
  35   rate_limit::{rate_limiter::RateLimiter, RateLimit},
  36   settings::{structs::Settings, SETTINGS},
  37 };
  38 use lemmy_websocket::{chat_server::ChatServer, LemmyContext};
  39 use reqwest::Client;
  40 use reqwest_middleware::ClientBuilder;
  41 use reqwest_retry::{policies::ExponentialBackoff, RetryTransientMiddleware};
  42 use reqwest_tracing::TracingMiddleware;
  43 use std::{
  44   env,
  45   sync::{Arc, Mutex},
  46   thread,
  47   time::Duration,
  48 };
  49 use tracing_actix_web::TracingLogger;
  50
  51 pub const MIGRATIONS: EmbeddedMigrations = embed_migrations!();
  52
  53 /// Max timeout for http requests
  54 pub const REQWEST_TIMEOUT: Duration = Duration::from_secs(10);
  55
  56 #[actix_web::main]
  57 async fn main() -> Result<(), LemmyError> {
  58   let args: Vec<String> = env::args().collect();
  59   if args.len() == 2 && args[1] == "--print-config-docs" {
  60     let fmt = Formatting {
  61       auto_comments: AutoComments::none(),
  62       ..Default::default()
  63     };
  64     println!("{}", doku::to_json_fmt_val(&fmt, &Settings::default()));
  65     return Ok(());
  66   }
  67
  68   let settings = SETTINGS.to_owned();
  69
  70   init_logging(&settings.opentelemetry_url)?;
  71
  72   // Set up the r2d2 connection pool
  73   let db_url = match get_database_url_from_env() {
  74     Ok(url) => url,
  75     Err(_) => settings.get_database_url(),
  76   };
  77   let manager = ConnectionManager::<PgConnection>::new(&db_url);
  78   let pool = Pool::builder()
  79     .max_size(settings.database.pool_size)
  80     .min_idle(Some(1))
  81     .build(manager)
  82     .unwrap_or_else(|_| panic!("Error connecting to {}", db_url));
  83
  84   // Run the migrations from code
  85   let settings_cloned = settings.to_owned();
  86   blocking(&pool, move |conn| {
  87     let _ = conn
  88       .run_pending_migrations(MIGRATIONS)
  89       .map_err(|_| LemmyError::from_message("Couldn't run migrations"))?;
  90     run_advanced_migrations(conn, &settings_cloned)?;
  91     Ok(()) as Result<(), LemmyError>
  92   })
  93   .await??;
  94
  95   // Schedules various cleanup tasks for the DB
  96   let pool2 = pool.clone();
  97   thread::spawn(move || {
  98     scheduled_tasks::setup(pool2).expect("Couldn't set up scheduled_tasks");
  99   });
 100
 101   // Initialize the secrets
 102   let conn = &mut pool.get()?;
 103   let secret = Secret::init(conn).expect("Couldn't initialize secrets.");
 104
 105   // Make sure the local site is set up.
 106   let site_view = SiteView::read_local(conn).expect("local site not set up");
 107   let local_site = site_view.local_site;
 108   let federation_enabled = local_site.federation_enabled;
 109
 110   if federation_enabled {
 111     println!("federation enabled, host is {}", &settings.hostname);
 112   }
 113
 114   check_private_instance_and_federation_enabled(&local_site)?;
 115
 116   // Set up the rate limiter
 117   let rate_limit_config =
 118     local_site_rate_limit_to_rate_limit_config(&site_view.local_site_rate_limit);
 119
 120   // TODO this isn't live-updating
 121   // https://github.com/LemmyNet/lemmy/issues/2508
 122   let rate_limiter = RateLimit {
 123     rate_limiter: Arc::new(Mutex::new(RateLimiter::default())),
 124     rate_limit_config,
 125   };
 126
 127   println!(
 128     "Starting http server at {}:{}",
 129     settings.bind, settings.port
 130   );
 131
 132   let reqwest_client = Client::builder()
 133     .user_agent(build_user_agent(&settings))
 134     .timeout(REQWEST_TIMEOUT)
 135     .build()?;
 136
 137   let retry_policy = ExponentialBackoff {
 138     max_n_retries: 3,
 139     max_retry_interval: REQWEST_TIMEOUT,
 140     min_retry_interval: Duration::from_millis(100),
 141     backoff_exponent: 2,
 142   };
 143
 144   let client = ClientBuilder::new(reqwest_client.clone())
 145     .with(TracingMiddleware::default())
 146     .with(RetryTransientMiddleware::new_with_policy(retry_policy))
 147     .build();
 148
 149   // Pictrs cannot use the retry middleware
 150   let pictrs_client = ClientBuilder::new(reqwest_client.clone())
 151     .with(TracingMiddleware::default())
 152     .build();
 153
 154   let chat_server = ChatServer::startup(
 155     pool.clone(),
 156     rate_limiter.clone(),
 157     |c, i, o, d| Box::pin(match_websocket_operation(c, i, o, d)),
 158     |c, i, o, d| Box::pin(match_websocket_operation_crud(c, i, o, d)),
 159     client.clone(),
 160     settings.clone(),
 161     secret.clone(),
 162   )
 163   .start();
 164
 165   // Create Http server with websocket support
 166   let settings_bind = settings.clone();
 167   HttpServer::new(move || {
 168     let context = LemmyContext::create(
 169       pool.clone(),
 170       chat_server.to_owned(),
 171       client.clone(),
 172       settings.to_owned(),
 173       secret.to_owned(),
 174     );
 175     let rate_limiter = rate_limiter.clone();
 176     App::new()
 177       .wrap(actix_web::middleware::Logger::default())
 178       .wrap(TracingLogger::<QuieterRootSpanBuilder>::new())
 179       .app_data(Data::new(context))
 180       .app_data(Data::new(rate_limiter.clone()))
 181       // The routes
 182       .configure(|cfg| api_routes::config(cfg, &rate_limiter))
 183       .configure(|cfg| {
 184         if federation_enabled {
 185           lemmy_apub::http::routes::config(cfg);
 186           webfinger::config(cfg);
 187         }
 188       })
 189       .configure(feeds::config)
 190       .configure(|cfg| images::config(cfg, pictrs_client.clone(), &rate_limiter))
 191       .configure(nodeinfo::config)
 192   })
 193   .bind((settings_bind.bind, settings_bind.port))?
 194   .run()
 195   .await?;
 196
 197   Ok(())
 198 }