]> Untitled Git - lemmy.git/blobdiff - crates/apub/src/objects/person.rs
Cache & Optimize Woodpecker CI (#3450)
[lemmy.git] / crates / apub / src / objects / person.rs
index ec14a943edcbc18b7005c0f202cdecae5cff6167..d28f8c7cf335982d07b74753ea447c9c06eed703 100644 (file)
 use crate::{
-  check_is_apub_id_valid,
-  extensions::{context::lemmy_context, signatures::PublicKey},
-  objects::{FromApub, ImageObject, Source, ToApub},
-  ActorType,
+  check_apub_id_valid_with_strictness,
+  local_site_data_cached,
+  objects::{instance::fetch_instance_actor_for_object, read_from_string_or_source_opt},
+  protocol::{
+    objects::{
+      person::{Person, UserTypes},
+      Endpoints,
+    },
+    ImageObject,
+    Source,
+  },
 };
-use activitystreams::{
-  actor::Endpoints,
-  base::AnyBase,
-  chrono::{DateTime, FixedOffset},
-  object::{kind::ImageType, Tombstone},
-  primitives::OneOrMany,
-  unparsed::Unparsed,
+use activitypub_federation::{
+  config::Data,
+  protocol::verification::verify_domains_match,
+  traits::{Actor, Object},
 };
-use lemmy_api_common::blocking;
-use lemmy_apub_lib::{
-  values::{MediaTypeHtml, MediaTypeMarkdown},
-  verify_domains_match,
+use chrono::NaiveDateTime;
+use lemmy_api_common::{
+  context::LemmyContext,
+  utils::{generate_outbox_url, local_site_opt_to_slur_regex},
 };
-use lemmy_db_queries::{ApubObject, DbPool};
 use lemmy_db_schema::{
-  naive_now,
-  source::person::{Person as DbPerson, PersonForm},
+  source::person::{Person as DbPerson, PersonInsertForm, PersonUpdateForm},
+  traits::{ApubActor, Crud},
+  utils::naive_now,
 };
 use lemmy_utils::{
-  utils::{check_slurs, check_slurs_opt, convert_datetime, markdown_to_html},
-  LemmyError,
+  error::LemmyError,
+  utils::{
+    markdown::markdown_to_html,
+    slurs::{check_slurs, check_slurs_opt},
+    time::convert_datetime,
+  },
 };
-use lemmy_websocket::LemmyContext;
-use serde::{Deserialize, Serialize};
-use serde_with::skip_serializing_none;
+use std::ops::Deref;
 use url::Url;
 
-#[derive(Clone, Copy, Debug, Deserialize, Serialize, PartialEq)]
-pub enum UserTypes {
-  Person,
-  Service,
-}
+#[derive(Clone, Debug, PartialEq, Eq)]
+pub struct ApubPerson(pub(crate) DbPerson);
 
-#[skip_serializing_none]
-#[derive(Clone, Debug, Deserialize, Serialize)]
-#[serde(rename_all = "camelCase")]
-pub struct Person {
-  #[serde(rename = "@context")]
-  context: OneOrMany<AnyBase>,
-  #[serde(rename = "type")]
-  kind: UserTypes,
-  id: Url,
-  /// username, set at account creation and can never be changed
-  preferred_username: String,
-  /// displayname (can be changed at any time)
-  name: Option<String>,
-  content: Option<String>,
-  media_type: Option<MediaTypeHtml>,
-  source: Option<Source>,
-  /// user avatar
-  icon: Option<ImageObject>,
-  /// user banner
-  image: Option<ImageObject>,
-  matrix_user_id: Option<String>,
-  inbox: Url,
-  /// mandatory field in activitypub, currently empty in lemmy
-  outbox: Url,
-  endpoints: Endpoints<Url>,
-  public_key: PublicKey,
-  published: DateTime<FixedOffset>,
-  updated: Option<DateTime<FixedOffset>>,
-  #[serde(flatten)]
-  unparsed: Unparsed,
+impl Deref for ApubPerson {
+  type Target = DbPerson;
+  fn deref(&self) -> &Self::Target {
+    &self.0
+  }
 }
 
-// TODO: can generate this with a derive macro
-impl Person {
-  pub(crate) fn id(&self, expected_domain: &Url) -> Result<&Url, LemmyError> {
-    verify_domains_match(&self.id, expected_domain)?;
-    Ok(&self.id)
+impl From<DbPerson> for ApubPerson {
+  fn from(p: DbPerson) -> Self {
+    ApubPerson(p)
   }
 }
 
-#[async_trait::async_trait(?Send)]
-impl ToApub for DbPerson {
-  type ApubType = Person;
+#[async_trait::async_trait]
+impl Object for ApubPerson {
+  type DataType = LemmyContext;
+  type Kind = Person;
+  type Error = LemmyError;
+
+  fn last_refreshed_at(&self) -> Option<NaiveDateTime> {
+    Some(self.last_refreshed_at)
+  }
+
+  #[tracing::instrument(skip_all)]
+  async fn read_from_id(
+    object_id: Url,
+    context: &Data<Self::DataType>,
+  ) -> Result<Option<Self>, LemmyError> {
+    Ok(
+      DbPerson::read_from_apub_id(&mut context.pool(), &object_id.into())
+        .await?
+        .map(Into::into),
+    )
+  }
+
+  #[tracing::instrument(skip_all)]
+  async fn delete(self, context: &Data<Self::DataType>) -> Result<(), LemmyError> {
+    let form = PersonUpdateForm::builder().deleted(Some(true)).build();
+    DbPerson::update(&mut context.pool(), self.id, &form).await?;
+    Ok(())
+  }
 
-  async fn to_apub(&self, _pool: &DbPool) -> Result<Person, LemmyError> {
+  #[tracing::instrument(skip_all)]
+  async fn into_json(self, _context: &Data<Self::DataType>) -> Result<Person, LemmyError> {
     let kind = if self.bot_account {
       UserTypes::Service
     } else {
       UserTypes::Person
     };
-    let source = self.bio.clone().map(|bio| Source {
-      content: bio,
-      media_type: MediaTypeMarkdown::Markdown,
-    });
-    let icon = self.avatar.clone().map(|url| ImageObject {
-      kind: ImageType::Image,
-      url: url.into(),
-    });
-    let image = self.banner.clone().map(|url| ImageObject {
-      kind: ImageType::Image,
-      url: url.into(),
-    });
 
     let person = Person {
-      context: lemmy_context(),
       kind,
-      id: self.actor_id.to_owned().into_inner(),
+      id: self.actor_id.clone().into(),
       preferred_username: self.name.clone(),
       name: self.display_name.clone(),
-      content: self.bio.as_ref().map(|b| markdown_to_html(b)),
-      media_type: self.bio.as_ref().map(|_| MediaTypeHtml::Html),
-      source,
-      icon,
-      image,
+      summary: self.bio.as_ref().map(|b| markdown_to_html(b)),
+      source: self.bio.clone().map(Source::new),
+      icon: self.avatar.clone().map(ImageObject::new),
+      image: self.banner.clone().map(ImageObject::new),
       matrix_user_id: self.matrix_user_id.clone(),
-      published: convert_datetime(self.published),
-      outbox: self.get_outbox_url()?,
-      endpoints: Endpoints {
-        shared_inbox: self.shared_inbox_url.clone().map(|s| s.into()),
-        ..Default::default()
-      },
-      public_key: self.get_public_key()?,
+      published: Some(convert_datetime(self.published)),
+      outbox: generate_outbox_url(&self.actor_id)?.into(),
+      endpoints: self.shared_inbox_url.clone().map(|s| Endpoints {
+        shared_inbox: s.into(),
+      }),
+      public_key: self.public_key(),
       updated: self.updated.map(convert_datetime),
-      unparsed: Default::default(),
       inbox: self.inbox_url.clone().into(),
     };
     Ok(person)
   }
-  fn to_tombstone(&self) -> Result<Tombstone, LemmyError> {
-    unimplemented!()
-  }
-}
-
-#[async_trait::async_trait(?Send)]
-impl FromApub for DbPerson {
-  type ApubType = Person;
 
-  async fn from_apub(
+  #[tracing::instrument(skip_all)]
+  async fn verify(
     person: &Person,
-    context: &LemmyContext,
     expected_domain: &Url,
-    _request_counter: &mut i32,
-  ) -> Result<DbPerson, LemmyError> {
-    let actor_id = Some(person.id(expected_domain)?.clone().into());
-    let name = person.preferred_username.clone();
-    let display_name: Option<String> = person.name.clone();
-    let bio = person.source.clone().map(|s| s.content);
-    let shared_inbox = person.endpoints.shared_inbox.clone().map(|s| s.into());
-    let bot_account = match person.kind {
-      UserTypes::Person => false,
-      UserTypes::Service => true,
-    };
+    context: &Data<Self::DataType>,
+  ) -> Result<(), LemmyError> {
+    let local_site_data = local_site_data_cached(&mut context.pool()).await?;
+    let slur_regex = &local_site_opt_to_slur_regex(&local_site_data.local_site);
+    check_slurs(&person.preferred_username, slur_regex)?;
+    check_slurs_opt(&person.name, slur_regex)?;
 
-    check_slurs(&name)?;
-    check_slurs_opt(&display_name)?;
-    check_slurs_opt(&bio)?;
-    check_is_apub_id_valid(&person.id, false)?;
+    verify_domains_match(person.id.inner(), expected_domain)?;
+    check_apub_id_valid_with_strictness(person.id.inner(), false, context).await?;
 
-    let person_form = PersonForm {
-      name,
-      display_name: Some(display_name),
+    let bio = read_from_string_or_source_opt(&person.summary, &None, &person.source);
+    check_slurs_opt(&bio, slur_regex)?;
+    Ok(())
+  }
+
+  #[tracing::instrument(skip_all)]
+  async fn from_json(
+    person: Person,
+    context: &Data<Self::DataType>,
+  ) -> Result<ApubPerson, LemmyError> {
+    let instance_id = fetch_instance_actor_for_object(&person.id, context).await?;
+
+    // Some Mastodon users have `name: ""` (empty string), need to convert that to `None`
+    // https://github.com/mastodon/mastodon/issues/25233
+    let display_name = person.name.filter(|n| !n.is_empty());
+
+    let person_form = PersonInsertForm {
+      name: person.preferred_username,
+      display_name,
       banned: None,
-      deleted: None,
-      avatar: Some(person.icon.clone().map(|i| i.url.into())),
-      banner: Some(person.image.clone().map(|i| i.url.into())),
-      published: Some(person.published.naive_local()),
-      updated: person.updated.map(|u| u.clone().naive_local()),
-      actor_id,
-      bio: Some(bio),
+      ban_expires: None,
+      deleted: Some(false),
+      avatar: person.icon.map(|i| i.url.into()),
+      banner: person.image.map(|i| i.url.into()),
+      published: person.published.map(|u| u.naive_local()),
+      updated: person.updated.map(|u| u.naive_local()),
+      actor_id: Some(person.id.into()),
+      bio: read_from_string_or_source_opt(&person.summary, &None, &person.source),
       local: Some(false),
       admin: Some(false),
-      bot_account: Some(bot_account),
+      bot_account: Some(person.kind == UserTypes::Service),
       private_key: None,
-      public_key: Some(Some(person.public_key.public_key_pem.clone())),
+      public_key: person.public_key.public_key_pem,
       last_refreshed_at: Some(naive_now()),
-      inbox_url: Some(person.inbox.to_owned().into()),
-      shared_inbox_url: Some(shared_inbox),
-      matrix_user_id: Some(person.matrix_user_id.clone()),
+      inbox_url: Some(person.inbox.into()),
+      shared_inbox_url: person.endpoints.map(|e| e.shared_inbox.into()),
+      matrix_user_id: person.matrix_user_id,
+      instance_id,
     };
-    let person = blocking(context.pool(), move |conn| {
-      DbPerson::upsert(conn, &person_form)
-    })
-    .await??;
-    Ok(person)
+    let person = DbPerson::upsert(&mut context.pool(), &person_form).await?;
+
+    Ok(person.into())
+  }
+}
+
+impl Actor for ApubPerson {
+  fn id(&self) -> Url {
+    self.actor_id.inner().clone()
+  }
+
+  fn public_key_pem(&self) -> &str {
+    &self.public_key
+  }
+
+  fn private_key_pem(&self) -> Option<String> {
+    self.private_key.clone()
+  }
+
+  fn inbox(&self) -> Url {
+    self.inbox_url.clone().into()
+  }
+
+  fn shared_inbox(&self) -> Option<Url> {
+    self.shared_inbox_url.clone().map(Into::into)
+  }
+}
+
+#[cfg(test)]
+pub(crate) mod tests {
+  #![allow(clippy::unwrap_used)]
+  #![allow(clippy::indexing_slicing)]
+
+  use super::*;
+  use crate::{
+    objects::{
+      instance::{tests::parse_lemmy_instance, ApubSite},
+      tests::init_context,
+    },
+    protocol::{objects::instance::Instance, tests::file_to_json_object},
+  };
+  use activitypub_federation::fetch::object_id::ObjectId;
+  use lemmy_db_schema::{source::site::Site, traits::Crud};
+  use serial_test::serial;
+
+  pub(crate) async fn parse_lemmy_person(context: &Data<LemmyContext>) -> (ApubPerson, ApubSite) {
+    let site = parse_lemmy_instance(context).await;
+    let json = file_to_json_object("assets/lemmy/objects/person.json").unwrap();
+    let url = Url::parse("https://enterprise.lemmy.ml/u/picard").unwrap();
+    ApubPerson::verify(&json, &url, context).await.unwrap();
+    let person = ApubPerson::from_json(json, context).await.unwrap();
+    assert_eq!(context.request_count(), 0);
+    (person, site)
+  }
+
+  #[tokio::test]
+  #[serial]
+  async fn test_parse_lemmy_person() {
+    let context = init_context().await;
+    let (person, site) = parse_lemmy_person(&context).await;
+
+    assert_eq!(person.display_name, Some("Jean-Luc Picard".to_string()));
+    assert!(!person.local);
+    assert_eq!(person.bio.as_ref().unwrap().len(), 39);
+
+    cleanup((person, site), &context).await;
+  }
+
+  #[tokio::test]
+  #[serial]
+  async fn test_parse_pleroma_person() {
+    let context = init_context().await;
+
+    // create and parse a fake pleroma instance actor, to avoid network request during test
+    let mut json: Instance = file_to_json_object("assets/lemmy/objects/instance.json").unwrap();
+    json.id = ObjectId::parse("https://queer.hacktivis.me/").unwrap();
+    let url = Url::parse("https://queer.hacktivis.me/users/lanodan").unwrap();
+    ApubSite::verify(&json, &url, &context).await.unwrap();
+    let site = ApubSite::from_json(json, &context).await.unwrap();
+
+    let json = file_to_json_object("assets/pleroma/objects/person.json").unwrap();
+    ApubPerson::verify(&json, &url, &context).await.unwrap();
+    let person = ApubPerson::from_json(json, &context).await.unwrap();
+
+    assert_eq!(person.actor_id, url.into());
+    assert_eq!(person.name, "lanodan");
+    assert!(!person.local);
+    assert_eq!(context.request_count(), 0);
+    assert_eq!(person.bio.as_ref().unwrap().len(), 873);
+
+    cleanup((person, site), &context).await;
+  }
+
+  async fn cleanup(data: (ApubPerson, ApubSite), context: &LemmyContext) {
+    DbPerson::delete(&mut context.pool(), data.0.id)
+      .await
+      .unwrap();
+    Site::delete(&mut context.pool(), data.1.id).await.unwrap();
   }
 }