Hex Artifact Content
Logged in as anonymous

Artifact c0605e985c5548f0d63fbf98bdc43fcf728b011ae45f5205e7e309421a3f854d:


0000: 75 73 65 20 63 72 61 74 65 3a 3a 7b 0a 09 41 72  use crate::{..Ar
0010: 63 2c 0a 09 63 6f 6d 6d 61 6e 64 2c 0a 09 4d 75  c,..command,..Mu
0020: 74 65 78 2c 0a 09 73 71 6c 3a 3a 44 62 2c 0a 09  tex,..sql::Db,..
0030: 74 67 5f 62 6f 74 3a 3a 7b 0a 09 09 43 61 6c 6c  tg_bot::{...Call
0040: 62 61 63 6b 2c 0a 09 09 4d 79 4d 65 73 73 61 67  back,...MyMessag
0050: 65 2c 0a 09 09 54 67 2c 0a 09 7d 2c 0a 7d 3b 0a  e,...Tg,..},.};.
0060: 0a 75 73 65 20 73 74 64 3a 3a 7b 0a 09 62 6f 72  .use std::{..bor
0070: 72 6f 77 3a 3a 43 6f 77 2c 0a 09 63 6f 6c 6c 65  row::Cow,..colle
0080: 63 74 69 6f 6e 73 3a 3a 7b 0a 09 09 42 54 72 65  ctions::{...BTre
0090: 65 4d 61 70 2c 0a 09 09 48 61 73 68 4d 61 70 2c  eMap,...HashMap,
00a0: 0a 09 09 48 61 73 68 53 65 74 2c 0a 09 7d 2c 0a  ...HashSet,..},.
00b0: 09 74 69 6d 65 3a 3a 44 75 72 61 74 69 6f 6e 2c  .time::Duration,
00c0: 0a 7d 3b 0a 0a 75 73 65 20 61 73 79 6e 63 5f 63  .};..use async_c
00d0: 6f 6d 70 61 74 3a 3a 43 6f 6d 70 61 74 3b 0a 75  ompat::Compat;.u
00e0: 73 65 20 63 68 72 6f 6e 6f 3a 3a 7b 0a 09 44 61  se chrono::{..Da
00f0: 74 65 54 69 6d 65 2c 0a 09 4c 6f 63 61 6c 2c 0a  teTime,..Local,.
0100: 7d 3b 0a 75 73 65 20 6c 61 7a 79 5f 73 74 61 74  };.use lazy_stat
0110: 69 63 3a 3a 6c 61 7a 79 5f 73 74 61 74 69 63 3b  ic::lazy_static;
0120: 0a 75 73 65 20 72 65 67 65 78 3a 3a 52 65 67 65  .use regex::Rege
0130: 78 3b 0a 75 73 65 20 72 65 71 77 65 73 74 3a 3a  x;.use reqwest::
0140: 68 65 61 64 65 72 3a 3a 4c 41 53 54 5f 4d 4f 44  header::LAST_MOD
0150: 49 46 49 45 44 3b 0a 75 73 65 20 73 6d 6f 6c 3a  IFIED;.use smol:
0160: 3a 54 69 6d 65 72 3b 0a 75 73 65 20 73 74 61 63  :Timer;.use stac
0170: 6b 65 64 5f 65 72 72 6f 72 73 3a 3a 7b 0a 09 52  ked_errors::{..R
0180: 65 73 75 6c 74 2c 0a 09 53 74 61 63 6b 61 62 6c  esult,..Stackabl
0190: 65 45 72 72 2c 0a 09 61 6e 79 68 6f 77 2c 0a 09  eErr,..anyhow,..
01a0: 62 61 69 6c 2c 0a 7d 3b 0a 75 73 65 20 74 67 62  bail,.};.use tgb
01b0: 6f 74 3a 3a 7b 0a 09 68 61 6e 64 6c 65 72 3a 3a  ot::{..handler::
01c0: 55 70 64 61 74 65 48 61 6e 64 6c 65 72 2c 0a 09  UpdateHandler,..
01d0: 74 79 70 65 73 3a 3a 7b 0a 09 09 43 61 6c 6c 62  types::{...Callb
01e0: 61 63 6b 51 75 65 72 79 2c 0a 09 09 43 68 61 74  ackQuery,...Chat
01f0: 50 65 65 72 49 64 2c 0a 09 09 43 6f 6d 6d 61 6e  PeerId,...Comman
0200: 64 2c 0a 09 09 55 70 64 61 74 65 2c 0a 09 09 55  d,...Update,...U
0210: 70 64 61 74 65 54 79 70 65 2c 0a 09 09 55 73 65  pdateType,...Use
0220: 72 50 65 65 72 49 64 2c 0a 09 7d 2c 0a 7d 3b 0a  rPeerId,..},.};.
0230: 75 73 65 20 74 74 6c 5f 63 61 63 68 65 3a 3a 54  use ttl_cache::T
0240: 74 6c 43 61 63 68 65 3b 0a 0a 6c 61 7a 79 5f 73  tlCache;..lazy_s
0250: 74 61 74 69 63 21 7b 0a 09 70 75 62 20 73 74 61  tatic!{..pub sta
0260: 74 69 63 20 72 65 66 20 52 45 5f 53 50 45 43 49  tic ref RE_SPECI
0270: 41 4c 3a 20 52 65 67 65 78 20 3d 20 52 65 67 65  AL: Regex = Rege
0280: 78 3a 3a 6e 65 77 28 72 22 28 5b 5c 2d 5f 2a 5c  x::new(r"([\-_*\
0290: 5b 5c 5d 28 29 7e 60 3e 23 2b 7c 7b 7d 5c 2e 21  [\]()~`>#+|{}\.!
02a0: 5d 29 22 29 2e 75 6e 77 72 61 70 28 29 3b 0a 7d  ])").unwrap();.}
02b0: 0a 0a 2f 2f 20 54 68 69 73 20 6f 6e 65 20 64 6f  ..// This one do
02c0: 65 73 20 6e 6f 74 68 69 6e 67 20 65 78 63 65 70  es nothing excep
02d0: 74 20 6d 61 6b 69 6e 67 20 73 75 72 65 20 6f 6e  t making sure on
02e0: 6c 79 20 6f 6e 65 20 74 6f 6b 65 6e 20 65 78 69  ly one token exi
02f0: 73 74 73 20 66 6f 72 20 65 61 63 68 20 69 64 0a  sts for each id.
0300: 70 75 62 20 73 74 72 75 63 74 20 54 6f 6b 65 6e  pub struct Token
0310: 20 7b 0a 09 72 75 6e 6e 69 6e 67 3a 20 41 72 63   {..running: Arc
0320: 3c 4d 75 74 65 78 3c 48 61 73 68 53 65 74 3c 69  <Mutex<HashSet<i
0330: 33 32 3e 3e 3e 2c 0a 09 6d 79 5f 69 64 3a 20 69  32>>>,..my_id: i
0340: 33 32 2c 0a 7d 0a 0a 69 6d 70 6c 20 54 6f 6b 65  32,.}..impl Toke
0350: 6e 20 7b 0a 09 2f 2f 2f 20 41 74 74 65 6d 70 74  n {../// Attempt
0360: 73 20 74 6f 20 61 63 71 75 69 72 65 20 61 20 70  s to acquire a p
0370: 65 72 2d 69 64 20 74 6f 6b 65 6e 20 62 79 20 69  er-id token by i
0380: 6e 73 65 72 74 69 6e 67 20 60 6d 79 5f 69 64 60  nserting `my_id`
0390: 20 69 6e 74 6f 20 74 68 65 20 73 68 61 72 65 64   into the shared
03a0: 20 60 72 75 6e 6e 69 6e 67 60 20 73 65 74 2e 0a   `running` set..
03b0: 09 2f 2f 2f 0a 09 2f 2f 2f 20 49 66 20 74 68 65  .///../// If the
03c0: 20 69 64 20 77 61 73 20 6e 6f 74 20 61 6c 72 65   id was not alre
03d0: 61 64 79 20 70 72 65 73 65 6e 74 2c 20 74 68 65  ady present, the
03e0: 20 66 75 6e 63 74 69 6f 6e 20 69 6e 73 65 72 74   function insert
03f0: 73 20 69 74 20 61 6e 64 20 72 65 74 75 72 6e 73  s it and returns
0400: 20 60 53 6f 6d 65 28 54 6f 6b 65 6e 29 60 2e 0a   `Some(Token)`..
0410: 09 2f 2f 2f 20 57 68 65 6e 20 74 68 65 20 72 65  ./// When the re
0420: 74 75 72 6e 65 64 20 60 54 6f 6b 65 6e 60 20 69  turned `Token` i
0430: 73 20 64 72 6f 70 70 65 64 2c 20 74 68 65 20 69  s dropped, the i
0440: 64 20 77 69 6c 6c 20 62 65 20 72 65 6d 6f 76 65  d will be remove
0450: 64 20 66 72 6f 6d 20 74 68 65 20 60 72 75 6e 6e  d from the `runn
0460: 69 6e 67 60 20 73 65 74 2c 0a 09 2f 2f 2f 20 61  ing` set,../// a
0470: 6c 6c 6f 77 69 6e 67 20 73 75 62 73 65 71 75 65  llowing subseque
0480: 6e 74 20 61 63 71 75 69 73 69 74 69 6f 6e 73 20  nt acquisitions 
0490: 66 6f 72 20 74 68 65 20 73 61 6d 65 20 69 64 2e  for the same id.
04a0: 0a 09 2f 2f 2f 0a 09 2f 2f 2f 20 23 20 50 61 72  ..///../// # Par
04b0: 61 6d 65 74 65 72 73 0a 09 2f 2f 2f 0a 09 2f 2f  ameters..///..//
04c0: 2f 20 2d 20 60 72 75 6e 6e 69 6e 67 60 3a 20 53  / - `running`: S
04d0: 68 61 72 65 64 20 73 65 74 20 74 72 61 63 6b 69  hared set tracki
04e0: 6e 67 20 61 63 74 69 76 65 20 69 64 73 2e 0a 09  ng active ids...
04f0: 2f 2f 2f 20 2d 20 60 6d 79 5f 69 64 60 3a 20 49  /// - `my_id`: I
0500: 64 65 6e 74 69 66 69 65 72 20 74 6f 20 61 63 71  dentifier to acq
0510: 75 69 72 65 20 61 20 74 6f 6b 65 6e 20 66 6f 72  uire a token for
0520: 2e 0a 09 2f 2f 2f 0a 09 2f 2f 2f 20 23 20 52 65  ...///../// # Re
0530: 74 75 72 6e 73 0a 09 2f 2f 2f 0a 09 2f 2f 2f 20  turns..///../// 
0540: 60 4f 6b 28 54 6f 6b 65 6e 29 60 20 69 66 20 74  `Ok(Token)` if t
0550: 68 65 20 69 64 20 77 61 73 20 73 75 63 63 65 73  he id was succes
0560: 73 66 75 6c 6c 79 20 61 63 71 75 69 72 65 64 2c  sfully acquired,
0570: 20 60 45 72 72 6f 72 60 20 69 66 20 61 20 74 6f   `Error` if a to
0580: 6b 65 6e 20 66 6f 72 20 74 68 65 20 69 64 20 69  ken for the id i
0590: 73 20 61 6c 72 65 61 64 79 20 61 63 74 69 76 65  s already active
05a0: 2e 0a 09 61 73 79 6e 63 20 66 6e 20 6e 65 77 20  ...async fn new 
05b0: 28 72 75 6e 6e 69 6e 67 3a 20 26 41 72 63 3c 4d  (running: &Arc<M
05c0: 75 74 65 78 3c 48 61 73 68 53 65 74 3c 69 33 32  utex<HashSet<i32
05d0: 3e 3e 3e 2c 20 6d 79 5f 69 64 3a 20 69 33 32 29  >>>, my_id: i32)
05e0: 20 2d 3e 20 52 65 73 75 6c 74 3c 54 6f 6b 65 6e   -> Result<Token
05f0: 3e 20 7b 0a 09 09 6c 65 74 20 72 75 6e 6e 69 6e  > {...let runnin
0600: 67 20 3d 20 72 75 6e 6e 69 6e 67 2e 63 6c 6f 6e  g = running.clon
0610: 65 28 29 3b 0a 09 09 6c 65 74 20 6d 75 74 20 73  e();...let mut s
0620: 65 74 20 3d 20 72 75 6e 6e 69 6e 67 2e 6c 6f 63  et = running.loc
0630: 6b 5f 61 72 63 28 29 2e 61 77 61 69 74 3b 0a 09  k_arc().await;..
0640: 09 69 66 20 73 65 74 2e 63 6f 6e 74 61 69 6e 73  .if set.contains
0650: 28 26 6d 79 5f 69 64 29 20 7b 0a 09 09 09 62 61  (&my_id) {....ba
0660: 69 6c 21 28 22 54 6f 6b 65 6e 20 61 6c 72 65 61  il!("Token alrea
0670: 64 79 20 74 61 6b 65 6e 22 29 3b 0a 09 09 7d 20  dy taken");...} 
0680: 65 6c 73 65 20 7b 0a 09 09 09 73 65 74 2e 69 6e  else {....set.in
0690: 73 65 72 74 28 6d 79 5f 69 64 29 3b 0a 09 09 09  sert(my_id);....
06a0: 4f 6b 28 54 6f 6b 65 6e 20 7b 0a 09 09 09 09 72  Ok(Token {.....r
06b0: 75 6e 6e 69 6e 67 2c 0a 09 09 09 09 6d 79 5f 69  unning,.....my_i
06c0: 64 2c 0a 09 09 09 7d 29 0a 09 09 7d 0a 09 7d 0a  d,....})...}..}.
06d0: 7d 0a 0a 69 6d 70 6c 20 44 72 6f 70 20 66 6f 72  }..impl Drop for
06e0: 20 54 6f 6b 65 6e 20 7b 0a 09 2f 2f 2f 20 52 65   Token {../// Re
06f0: 6c 65 61 73 65 73 20 74 68 69 73 20 74 6f 6b 65  leases this toke
0700: 6e 27 73 20 63 6c 61 69 6d 20 6f 6e 20 74 68 65  n's claim on the
0710: 20 73 68 61 72 65 64 20 72 75 6e 6e 69 6e 67 2d   shared running-
0720: 73 65 74 20 77 68 65 6e 20 74 68 65 20 74 6f 6b  set when the tok
0730: 65 6e 20 69 73 20 64 72 6f 70 70 65 64 2e 0a 09  en is dropped...
0740: 2f 2f 2f 0a 09 2f 2f 2f 20 54 68 65 20 74 6f 6b  ///../// The tok
0750: 65 6e 27 73 20 69 64 65 6e 74 69 66 69 65 72 20  en's identifier 
0760: 69 73 20 72 65 6d 6f 76 65 64 20 66 72 6f 6d 20  is removed from 
0770: 74 68 65 20 73 68 61 72 65 64 20 60 72 75 6e 6e  the shared `runn
0780: 69 6e 67 60 20 73 65 74 20 73 6f 20 74 68 61 74  ing` set so that
0790: 20 66 75 74 75 72 65 0a 09 2f 2f 2f 20 6f 70 65   future../// ope
07a0: 72 61 74 69 6f 6e 73 20 66 6f 72 20 74 68 65 20  rations for the 
07b0: 73 61 6d 65 20 69 64 20 6d 61 79 20 70 72 6f 63  same id may proc
07c0: 65 65 64 2e 0a 09 2f 2f 2f 0a 09 2f 2f 2f 20 54  eed...///../// T
07d0: 4f 44 4f 3a 20 69 73 20 75 73 69 6e 67 20 62 6c  ODO: is using bl
07e0: 6f 63 6b 5f 6f 6e 20 69 6e 73 69 64 65 20 62 6c  ock_on inside bl
07f0: 6f 63 6b 5f 6f 6e 20 73 61 66 65 3f 20 43 75 72  ock_on safe? Cur
0800: 72 65 6e 74 6c 79 20 74 65 73 74 65 64 20 61 6e  rently tested an
0810: 64 20 77 6f 72 6b 69 6e 67 20 66 69 6e 65 2e 0a  d working fine..
0820: 09 66 6e 20 64 72 6f 70 20 28 26 6d 75 74 20 73  .fn drop (&mut s
0830: 65 6c 66 29 20 7b 0a 09 09 73 6d 6f 6c 3a 3a 62  elf) {...smol::b
0840: 6c 6f 63 6b 5f 6f 6e 28 61 73 79 6e 63 20 7b 0a  lock_on(async {.
0850: 09 09 09 6c 65 74 20 6d 75 74 20 73 65 74 20 3d  ...let mut set =
0860: 20 73 65 6c 66 2e 72 75 6e 6e 69 6e 67 2e 6c 6f   self.running.lo
0870: 63 6b 5f 61 72 63 28 29 2e 61 77 61 69 74 3b 0a  ck_arc().await;.
0880: 09 09 09 73 65 74 2e 72 65 6d 6f 76 65 28 26 73  ...set.remove(&s
0890: 65 6c 66 2e 6d 79 5f 69 64 29 3b 0a 09 09 7d 29  elf.my_id);...})
08a0: 0a 09 7d 0a 7d 0a 0a 70 75 62 20 74 79 70 65 20  ..}.}..pub type 
08b0: 46 65 65 64 4c 69 73 74 20 3d 20 48 61 73 68 4d  FeedList = HashM
08c0: 61 70 3c 69 33 32 2c 20 53 74 72 69 6e 67 3e 3b  ap<i32, String>;
08d0: 0a 74 79 70 65 20 55 73 65 72 43 61 63 68 65 20  .type UserCache 
08e0: 3d 20 54 74 6c 43 61 63 68 65 3c 69 36 34 2c 20  = TtlCache<i64, 
08f0: 41 72 63 3c 4d 75 74 65 78 3c 46 65 65 64 4c 69  Arc<Mutex<FeedLi
0900: 73 74 3e 3e 3e 3b 0a 0a 23 5b 64 65 72 69 76 65  st>>>;..#[derive
0910: 28 43 6c 6f 6e 65 29 5d 0a 70 75 62 20 73 74 72  (Clone)].pub str
0920: 75 63 74 20 43 6f 72 65 20 7b 0a 09 70 75 62 20  uct Core {..pub 
0930: 74 67 3a 20 54 67 2c 0a 09 70 75 62 20 64 62 3a  tg: Tg,..pub db:
0940: 20 44 62 2c 0a 09 70 75 62 20 66 65 65 64 73 3a   Db,..pub feeds:
0950: 20 41 72 63 3c 4d 75 74 65 78 3c 55 73 65 72 43   Arc<Mutex<UserC
0960: 61 63 68 65 3e 3e 2c 0a 09 72 75 6e 6e 69 6e 67  ache>>,..running
0970: 3a 20 41 72 63 3c 4d 75 74 65 78 3c 48 61 73 68  : Arc<Mutex<Hash
0980: 53 65 74 3c 69 33 32 3e 3e 3e 2c 0a 09 68 74 74  Set<i32>>>,..htt
0990: 70 5f 63 6c 69 65 6e 74 3a 20 72 65 71 77 65 73  p_client: reqwes
09a0: 74 3a 3a 43 6c 69 65 6e 74 2c 0a 7d 0a 0a 70 75  t::Client,.}..pu
09b0: 62 20 73 74 72 75 63 74 20 50 6f 73 74 20 7b 0a  b struct Post {.
09c0: 09 75 72 69 3a 20 53 74 72 69 6e 67 2c 0a 09 5f  .uri: String,.._
09d0: 74 69 74 6c 65 3a 20 53 74 72 69 6e 67 2c 0a 09  title: String,..
09e0: 5f 61 75 74 68 6f 72 73 3a 20 53 74 72 69 6e 67  _authors: String
09f0: 2c 0a 09 5f 73 75 6d 6d 61 72 79 3a 20 53 74 72  ,.._summary: Str
0a00: 69 6e 67 2c 0a 7d 0a 0a 69 6d 70 6c 20 43 6f 72  ing,.}..impl Cor
0a10: 65 20 7b 0a 09 2f 2f 2f 20 43 72 65 61 74 65 20  e {../// Create 
0a20: 61 20 43 6f 72 65 20 69 6e 73 74 61 6e 63 65 20  a Core instance 
0a30: 66 72 6f 6d 20 63 6f 6e 66 69 67 75 72 61 74 69  from configurati
0a40: 6f 6e 20 61 6e 64 20 73 74 61 72 74 20 69 74 73  on and start its
0a50: 20 62 61 63 6b 67 72 6f 75 6e 64 20 61 75 74 6f   background auto
0a60: 66 65 74 63 68 20 6c 6f 6f 70 2e 0a 09 2f 2f 2f  fetch loop...///
0a70: 0a 09 2f 2f 2f 20 54 68 65 20 70 72 6f 76 69 64  ../// The provid
0a80: 65 64 20 60 73 65 74 74 69 6e 67 73 60 20 6d 75  ed `settings` mu
0a90: 73 74 20 69 6e 63 6c 75 64 65 3a 0a 09 2f 2f 2f  st include:..///
0aa0: 20 2d 20 60 6f 77 6e 65 72 60 20 28 69 6e 74 65   - `owner` (inte
0ab0: 67 65 72 29 3a 20 64 65 66 61 75 6c 74 20 63 68  ger): default ch
0ac0: 61 74 20 69 64 20 74 6f 20 75 73 65 20 61 73 20  at id to use as 
0ad0: 74 68 65 20 6f 77 6e 65 72 2f 64 65 73 74 69 6e  the owner/destin
0ae0: 61 74 69 6f 6e 2c 0a 09 2f 2f 2f 20 2d 20 60 61  ation,../// - `a
0af0: 70 69 5f 6b 65 79 60 20 28 73 74 72 69 6e 67 29  pi_key` (string)
0b00: 3a 20 54 65 6c 65 67 72 61 6d 20 62 6f 74 20 41  : Telegram bot A
0b10: 50 49 20 6b 65 79 2c 0a 09 2f 2f 2f 20 2d 20 60  PI key,../// - `
0b20: 61 70 69 5f 67 61 74 65 77 61 79 60 20 28 73 74  api_gateway` (st
0b30: 72 69 6e 67 29 3a 20 54 65 6c 65 67 72 61 6d 20  ring): Telegram 
0b40: 41 50 49 20 67 61 74 65 77 61 79 20 68 6f 73 74  API gateway host
0b50: 2c 0a 09 2f 2f 2f 20 2d 20 60 70 67 60 20 28 73  ,../// - `pg` (s
0b60: 74 72 69 6e 67 29 3a 20 50 6f 73 74 67 72 65 53  tring): PostgreS
0b70: 51 4c 20 63 6f 6e 6e 65 63 74 69 6f 6e 20 73 74  QL connection st
0b80: 72 69 6e 67 2c 0a 09 2f 2f 2f 20 2d 20 6f 70 74  ring,../// - opt
0b90: 69 6f 6e 61 6c 20 60 70 72 6f 78 79 60 20 28 73  ional `proxy` (s
0ba0: 74 72 69 6e 67 29 3a 20 70 72 6f 78 79 20 55 52  tring): proxy UR
0bb0: 4c 20 66 6f 72 20 74 68 65 20 48 54 54 50 20 63  L for the HTTP c
0bc0: 6c 69 65 6e 74 2e 0a 09 2f 2f 2f 0a 09 2f 2f 2f  lient...///..///
0bd0: 20 4f 6e 20 73 75 63 63 65 73 73 20 72 65 74 75   On success retu
0be0: 72 6e 73 20 61 6e 20 69 6e 69 74 69 61 6c 69 7a  rns an initializ
0bf0: 65 64 20 60 43 6f 72 65 60 20 77 69 74 68 20 54  ed `Core` with T
0c00: 65 6c 65 67 72 61 6d 20 61 6e 64 20 48 54 54 50  elegram and HTTP
0c10: 20 63 6c 69 65 6e 74 73 2c 20 64 61 74 61 62 61   clients, databa
0c20: 73 65 20 63 6f 6e 6e 65 63 74 69 6f 6e 2c 0a 09  se connection,..
0c30: 2f 2f 2f 20 61 6e 20 65 6d 70 74 79 20 72 75 6e  /// an empty run
0c40: 6e 69 6e 67 20 73 65 74 20 66 6f 72 20 70 65 72  ning set for per
0c50: 2d 69 64 20 74 6f 6b 65 6e 73 2c 20 61 6e 64 20  -id tokens, and 
0c60: 61 20 73 70 61 77 6e 65 64 20 62 61 63 6b 67 72  a spawned backgr
0c70: 6f 75 6e 64 20 74 61 73 6b 20 74 68 61 74 20 70  ound task that p
0c80: 65 72 69 6f 64 69 63 61 6c 6c 79 20 72 75 6e 73  eriodically runs
0c90: 0a 09 2f 2f 2f 20 60 61 75 74 6f 66 65 74 63 68  ../// `autofetch
0ca0: 60 2e 20 49 66 20 61 6e 79 20 72 65 71 75 69 72  `. If any requir
0cb0: 65 64 20 73 65 74 74 69 6e 67 20 69 73 20 6d 69  ed setting is mi
0cc0: 73 73 69 6e 67 20 6f 72 20 69 6e 69 74 69 61 6c  ssing or initial
0cd0: 69 7a 61 74 69 6f 6e 20 66 61 69 6c 73 2c 20 61  ization fails, a
0ce0: 6e 20 65 72 72 6f 72 20 69 73 20 72 65 74 75 72  n error is retur
0cf0: 6e 65 64 2e 0a 09 70 75 62 20 61 73 79 6e 63 20  ned...pub async 
0d00: 66 6e 20 6e 65 77 28 73 65 74 74 69 6e 67 73 3a  fn new(settings:
0d10: 20 63 6f 6e 66 69 67 3a 3a 43 6f 6e 66 69 67 29   config::Config)
0d20: 20 2d 3e 20 52 65 73 75 6c 74 3c 43 6f 72 65 3e   -> Result<Core>
0d30: 20 7b 0a 09 09 6c 65 74 20 6d 75 74 20 63 6c 69   {...let mut cli
0d40: 65 6e 74 20 3d 20 72 65 71 77 65 73 74 3a 3a 43  ent = reqwest::C
0d50: 6c 69 65 6e 74 3a 3a 62 75 69 6c 64 65 72 28 29  lient::builder()
0d60: 3b 0a 09 09 69 66 20 6c 65 74 20 4f 6b 28 70 72  ;...if let Ok(pr
0d70: 6f 78 79 29 20 3d 20 73 65 74 74 69 6e 67 73 2e  oxy) = settings.
0d80: 67 65 74 5f 73 74 72 69 6e 67 28 22 70 72 6f 78  get_string("prox
0d90: 79 22 29 20 7b 0a 09 09 09 6c 65 74 20 70 72 6f  y") {....let pro
0da0: 78 79 20 3d 20 72 65 71 77 65 73 74 3a 3a 50 72  xy = reqwest::Pr
0db0: 6f 78 79 3a 3a 61 6c 6c 28 70 72 6f 78 79 29 2e  oxy::all(proxy).
0dc0: 73 74 61 63 6b 28 29 3f 3b 0a 09 09 09 63 6c 69  stack()?;....cli
0dd0: 65 6e 74 20 3d 20 63 6c 69 65 6e 74 2e 70 72 6f  ent = client.pro
0de0: 78 79 28 70 72 6f 78 79 29 3b 0a 09 09 7d 0a 0a  xy(proxy);...}..
0df0: 09 09 6c 65 74 20 63 6f 72 65 20 3d 20 43 6f 72  ..let core = Cor
0e00: 65 20 7b 0a 09 09 09 74 67 3a 20 54 67 3a 3a 6e  e {....tg: Tg::n
0e10: 65 77 28 26 73 65 74 74 69 6e 67 73 29 2e 61 77  ew(&settings).aw
0e20: 61 69 74 2e 73 74 61 63 6b 28 29 3f 2c 0a 09 09  ait.stack()?,...
0e30: 09 64 62 3a 20 44 62 3a 3a 6e 65 77 28 26 73 65  .db: Db::new(&se
0e40: 74 74 69 6e 67 73 2e 67 65 74 5f 73 74 72 69 6e  ttings.get_strin
0e50: 67 28 22 70 67 22 29 2e 73 74 61 63 6b 28 29 3f  g("pg").stack()?
0e60: 29 3f 2c 0a 09 09 09 66 65 65 64 73 3a 20 41 72  )?,....feeds: Ar
0e70: 63 3a 3a 6e 65 77 28 4d 75 74 65 78 3a 3a 6e 65  c::new(Mutex::ne
0e80: 77 28 54 74 6c 43 61 63 68 65 3a 3a 6e 65 77 28  w(TtlCache::new(
0e90: 31 30 30 30 30 29 29 29 2c 0a 09 09 09 72 75 6e  10000))),....run
0ea0: 6e 69 6e 67 3a 20 41 72 63 3a 3a 6e 65 77 28 4d  ning: Arc::new(M
0eb0: 75 74 65 78 3a 3a 6e 65 77 28 48 61 73 68 53 65  utex::new(HashSe
0ec0: 74 3a 3a 6e 65 77 28 29 29 29 2c 0a 09 09 09 68  t::new())),....h
0ed0: 74 74 70 5f 63 6c 69 65 6e 74 3a 20 63 6c 69 65  ttp_client: clie
0ee0: 6e 74 2e 62 75 69 6c 64 28 29 2e 73 74 61 63 6b  nt.build().stack
0ef0: 28 29 3f 2c 0a 09 09 7d 3b 0a 0a 09 09 6c 65 74  ()?,...};....let
0f00: 20 63 6c 6f 6e 65 20 3d 20 63 6f 72 65 2e 63 6c   clone = core.cl
0f10: 6f 6e 65 28 29 3b 0a 09 09 73 6d 6f 6c 3a 3a 73  one();...smol::s
0f20: 70 61 77 6e 28 43 6f 6d 70 61 74 3a 3a 6e 65 77  pawn(Compat::new
0f30: 28 61 73 79 6e 63 20 6d 6f 76 65 20 7b 0a 09 09  (async move {...
0f40: 09 6c 6f 6f 70 20 7b 0a 09 09 09 09 6c 65 74 20  .loop {.....let 
0f50: 64 65 6c 61 79 20 3d 20 6d 61 74 63 68 20 26 63  delay = match &c
0f60: 6c 6f 6e 65 2e 61 75 74 6f 66 65 74 63 68 28 29  lone.autofetch()
0f70: 2e 61 77 61 69 74 20 7b 0a 09 09 09 09 09 45 72  .await {......Er
0f80: 72 28 65 72 72 29 20 3d 3e 20 7b 0a 09 09 09 09  r(err) => {.....
0f90: 09 09 69 66 20 6c 65 74 20 45 72 72 28 65 72 72  ..if let Err(err
0fa0: 29 20 3d 20 63 6c 6f 6e 65 2e 74 67 2e 73 65 6e  ) = clone.tg.sen
0fb0: 64 28 4d 79 4d 65 73 73 61 67 65 3a 3a 68 74 6d  d(MyMessage::htm
0fc0: 6c 28 66 6f 72 6d 61 74 21 28 22 f0 9f 9b 91 20  l(format!("🛑 
0fd0: 7b 65 72 72 7d 22 29 29 29 2e 61 77 61 69 74 20  {err}"))).await 
0fe0: 7b 0a 09 09 09 09 09 09 09 65 70 72 69 6e 74 6c  {........eprintl
0ff0: 6e 21 28 22 41 75 74 6f 66 65 74 63 68 20 65 72  n!("Autofetch er
1000: 72 6f 72 3a 20 7b 65 72 72 3a 3f 7d 22 29 3b 0a  ror: {err:?}");.
1010: 09 09 09 09 09 09 7d 3b 0a 09 09 09 09 09 09 73  ......};.......s
1020: 74 64 3a 3a 74 69 6d 65 3a 3a 44 75 72 61 74 69  td::time::Durati
1030: 6f 6e 3a 3a 66 72 6f 6d 5f 73 65 63 73 28 36 30  on::from_secs(60
1040: 29 0a 09 09 09 09 09 7d 2c 0a 09 09 09 09 09 4f  )......},......O
1050: 6b 28 74 69 6d 65 29 20 3d 3e 20 2a 74 69 6d 65  k(time) => *time
1060: 2c 0a 09 09 09 09 7d 3b 0a 09 09 09 09 54 69 6d  ,.....};.....Tim
1070: 65 72 3a 3a 61 66 74 65 72 28 64 65 6c 61 79 29  er::after(delay)
1080: 2e 61 77 61 69 74 3b 0a 09 09 09 7d 0a 09 09 7d  .await;....}...}
1090: 29 29 2e 64 65 74 61 63 68 28 29 3b 0a 09 09 4f  )).detach();...O
10a0: 6b 28 63 6f 72 65 29 0a 09 7d 0a 0a 09 2f 2f 2f  k(core)..}...///
10b0: 20 46 65 74 63 68 65 73 20 74 68 65 20 66 65 65   Fetches the fee
10c0: 64 20 66 6f 72 20 61 20 73 6f 75 72 63 65 2c 20  d for a source, 
10d0: 73 65 6e 64 73 20 61 6e 79 20 6e 65 77 6c 79 20  sends any newly 
10e0: 64 69 73 63 6f 76 65 72 65 64 20 70 6f 73 74 73  discovered posts
10f0: 20 74 6f 20 74 68 65 20 61 70 70 72 6f 70 72 69   to the appropri
1100: 61 74 65 20 63 68 61 74 2c 20 61 6e 64 20 72 65  ate chat, and re
1110: 63 6f 72 64 73 20 74 68 65 6d 20 69 6e 20 74 68  cords them in th
1120: 65 20 64 61 74 61 62 61 73 65 2e 0a 09 2f 2f 2f  e database...///
1130: 0a 09 2f 2f 2f 20 54 68 69 73 20 61 63 71 75 69  ../// This acqui
1140: 72 65 73 20 61 20 70 65 72 2d 73 6f 75 72 63 65  res a per-source
1150: 20 67 75 61 72 64 20 74 6f 20 70 72 65 76 65 6e   guard to preven
1160: 74 20 63 6f 6e 63 75 72 72 65 6e 74 20 63 68 65  t concurrent che
1170: 63 6b 73 20 66 6f 72 20 74 68 65 20 73 61 6d 65  cks for the same
1180: 20 60 69 64 60 2e 20 49 66 20 61 20 63 68 65 63   `id`. If a chec
1190: 6b 20 69 73 20 61 6c 72 65 61 64 79 20 72 75 6e  k is already run
11a0: 6e 69 6e 67 20 66 6f 72 0a 09 2f 2f 2f 20 74 68  ning for../// th
11b0: 65 20 67 69 76 65 6e 20 60 69 64 60 2c 20 74 68  e given `id`, th
11c0: 65 20 66 75 6e 63 74 69 6f 6e 20 72 65 74 75 72  e function retur
11d0: 6e 73 20 61 6e 20 65 72 72 6f 72 2e 20 49 66 20  ns an error. If 
11e0: 60 6c 61 73 74 5f 73 63 72 61 70 65 60 20 69 73  `last_scrape` is
11f0: 20 70 72 6f 76 69 64 65 64 2c 20 69 74 20 69 73   provided, it is
1200: 20 73 65 6e 74 20 61 73 20 74 68 65 20 60 49 66   sent as the `If
1210: 2d 4d 6f 64 69 66 69 65 64 2d 53 69 6e 63 65 60  -Modified-Since`
1220: 0a 09 2f 2f 2f 20 68 65 61 64 65 72 20 74 6f 20  ../// header to 
1230: 74 68 65 20 66 65 65 64 20 72 65 71 75 65 73 74  the feed request
1240: 2e 20 54 68 65 20 66 75 6e 63 74 69 6f 6e 20 70  . The function p
1250: 61 72 73 65 73 20 52 53 53 20 6f 72 20 41 74 6f  arses RSS or Ato
1260: 6d 20 66 65 65 64 73 2c 20 73 65 6e 64 73 20 75  m feeds, sends u
1270: 6e 73 65 65 6e 20 70 6f 73 74 20 55 52 4c 73 20  nseen post URLs 
1280: 74 6f 20 65 69 74 68 65 72 20 74 68 65 20 73 6f  to either the so
1290: 75 72 63 65 27 73 0a 09 2f 2f 2f 20 63 68 61 6e  urce's../// chan
12a0: 6e 65 6c 20 28 77 68 65 6e 20 60 72 65 61 6c 60  nel (when `real`
12b0: 20 69 73 20 74 72 75 65 29 20 6f 72 20 74 68 65   is true) or the
12c0: 20 73 6f 75 72 63 65 20 6f 77 6e 65 72 20 28 77   source owner (w
12d0: 68 65 6e 20 60 72 65 61 6c 60 20 69 73 20 66 61  hen `real` is fa
12e0: 6c 73 65 29 2c 20 61 6e 64 20 70 65 72 73 69 73  lse), and persis
12f0: 74 73 20 70 6f 73 74 65 64 20 65 6e 74 72 69 65  ts posted entrie
1300: 73 20 73 6f 20 74 68 65 79 20 61 72 65 0a 09 2f  s so they are../
1310: 2f 2f 20 6e 6f 74 20 72 65 70 6f 73 74 65 64 20  // not reposted 
1320: 6c 61 74 65 72 2e 0a 09 2f 2f 2f 0a 09 2f 2f 2f  later...///..///
1330: 20 50 61 72 61 6d 65 74 65 72 73 3a 0a 09 2f 2f   Parameters:..//
1340: 2f 20 2d 20 60 69 64 60 3a 20 49 64 65 6e 74 69  / - `id`: Identi
1350: 66 69 65 72 20 6f 66 20 74 68 65 20 73 6f 75 72  fier of the sour
1360: 63 65 20 74 6f 20 63 68 65 63 6b 2e 0a 09 2f 2f  ce to check...//
1370: 2f 20 2d 20 60 72 65 61 6c 60 3a 20 57 68 65 6e  / - `real`: When
1380: 20 60 74 72 75 65 60 2c 20 73 65 6e 64 20 70 6f   `true`, send po
1390: 73 74 73 20 74 6f 20 74 68 65 20 73 6f 75 72 63  sts to the sourc
13a0: 65 27 73 20 63 68 61 6e 6e 65 6c 3b 20 77 68 65  e's channel; whe
13b0: 6e 20 60 66 61 6c 73 65 60 2c 20 73 65 6e 64 20  n `false`, send 
13c0: 74 6f 20 74 68 65 20 73 6f 75 72 63 65 20 6f 77  to the source ow
13d0: 6e 65 72 2e 0a 09 2f 2f 2f 20 2d 20 60 6c 61 73  ner.../// - `las
13e0: 74 5f 73 63 72 61 70 65 60 3a 20 4f 70 74 69 6f  t_scrape`: Optio
13f0: 6e 61 6c 20 74 69 6d 65 73 74 61 6d 70 20 75 73  nal timestamp us
1400: 65 64 20 74 6f 20 73 65 74 20 74 68 65 20 60 49  ed to set the `I
1410: 66 2d 4d 6f 64 69 66 69 65 64 2d 53 69 6e 63 65  f-Modified-Since
1420: 60 20 68 65 61 64 65 72 20 66 6f 72 20 74 68 65  ` header for the
1430: 20 48 54 54 50 20 72 65 71 75 65 73 74 2e 0a 09   HTTP request...
1440: 2f 2f 2f 0a 09 2f 2f 2f 20 23 20 52 65 74 75 72  ///../// # Retur
1450: 6e 73 0a 09 2f 2f 2f 0a 09 2f 2f 2f 20 60 50 6f  ns..///../// `Po
1460: 73 74 65 64 3a 20 4e 60 20 77 68 65 72 65 20 60  sted: N` where `
1470: 4e 60 20 69 73 20 74 68 65 20 6e 75 6d 62 65 72  N` is the number
1480: 20 6f 66 20 70 6f 73 74 73 20 70 72 6f 63 65 73   of posts proces
1490: 73 65 64 20 61 6e 64 20 73 65 6e 74 2e 0a 09 70  sed and sent...p
14a0: 75 62 20 61 73 79 6e 63 20 66 6e 20 63 68 65 63  ub async fn chec
14b0: 6b 20 28 26 73 65 6c 66 2c 20 69 64 3a 20 69 33  k (&self, id: i3
14c0: 32 2c 20 72 65 61 6c 3a 20 62 6f 6f 6c 2c 20 6c  2, real: bool, l
14d0: 61 73 74 5f 73 63 72 61 70 65 3a 20 4f 70 74 69  ast_scrape: Opti
14e0: 6f 6e 3c 44 61 74 65 54 69 6d 65 3c 4c 6f 63 61  on<DateTime<Loca
14f0: 6c 3e 3e 29 20 2d 3e 20 52 65 73 75 6c 74 3c 53  l>>) -> Result<S
1500: 74 72 69 6e 67 3e 20 7b 0a 09 09 6c 65 74 20 6d  tring> {...let m
1510: 75 74 20 70 6f 73 74 65 64 3a 20 69 33 32 20 3d  ut posted: i32 =
1520: 20 30 3b 0a 09 09 6c 65 74 20 6d 75 74 20 63 6f   0;...let mut co
1530: 6e 6e 20 3d 20 73 65 6c 66 2e 64 62 2e 62 65 67  nn = self.db.beg
1540: 69 6e 28 29 2e 61 77 61 69 74 2e 73 74 61 63 6b  in().await.stack
1550: 28 29 3f 3b 0a 0a 09 09 6c 65 74 20 5f 74 6f 6b  ()?;....let _tok
1560: 65 6e 20 3d 20 54 6f 6b 65 6e 3a 3a 6e 65 77 28  en = Token::new(
1570: 26 73 65 6c 66 2e 72 75 6e 6e 69 6e 67 2c 20 69  &self.running, i
1580: 64 29 2e 61 77 61 69 74 2e 73 74 61 63 6b 28 29  d).await.stack()
1590: 3f 3b 0a 09 09 6c 65 74 20 73 6f 75 72 63 65 20  ?;...let source 
15a0: 3d 20 63 6f 6e 6e 2e 67 65 74 5f 73 6f 75 72 63  = conn.get_sourc
15b0: 65 28 69 64 2c 20 73 65 6c 66 2e 74 67 2e 6f 77  e(id, self.tg.ow
15c0: 6e 65 72 29 2e 61 77 61 69 74 2e 73 74 61 63 6b  ner).await.stack
15d0: 28 29 3f 3b 0a 09 09 63 6f 6e 6e 2e 73 65 74 5f  ()?;...conn.set_
15e0: 73 63 72 61 70 65 28 69 64 29 2e 61 77 61 69 74  scrape(id).await
15f0: 2e 73 74 61 63 6b 28 29 3f 3b 0a 09 09 6c 65 74  .stack()?;...let
1600: 20 64 65 73 74 69 6e 61 74 69 6f 6e 20 3d 20 43   destination = C
1610: 68 61 74 50 65 65 72 49 64 3a 3a 66 72 6f 6d 28  hatPeerId::from(
1620: 6d 61 74 63 68 20 72 65 61 6c 20 7b 0a 09 09 09  match real {....
1630: 74 72 75 65 20 3d 3e 20 73 6f 75 72 63 65 2e 63  true => source.c
1640: 68 61 6e 6e 65 6c 5f 69 64 2c 0a 09 09 09 66 61  hannel_id,....fa
1650: 6c 73 65 20 3d 3e 20 73 6f 75 72 63 65 2e 6f 77  lse => source.ow
1660: 6e 65 72 2c 0a 09 09 7d 29 3b 0a 09 09 6c 65 74  ner,...});...let
1670: 20 6d 75 74 20 74 68 69 73 5f 66 65 74 63 68 3a   mut this_fetch:
1680: 20 4f 70 74 69 6f 6e 3c 44 61 74 65 54 69 6d 65   Option<DateTime
1690: 3c 63 68 72 6f 6e 6f 3a 3a 46 69 78 65 64 4f 66  <chrono::FixedOf
16a0: 66 73 65 74 3e 3e 20 3d 20 4e 6f 6e 65 3b 0a 09  fset>> = None;..
16b0: 09 6c 65 74 20 6d 75 74 20 70 6f 73 74 73 3a 20  .let mut posts: 
16c0: 42 54 72 65 65 4d 61 70 3c 44 61 74 65 54 69 6d  BTreeMap<DateTim
16d0: 65 3c 63 68 72 6f 6e 6f 3a 3a 46 69 78 65 64 4f  e<chrono::FixedO
16e0: 66 66 73 65 74 3e 2c 20 50 6f 73 74 3e 20 3d 20  ffset>, Post> = 
16f0: 42 54 72 65 65 4d 61 70 3a 3a 6e 65 77 28 29 3b  BTreeMap::new();
1700: 0a 0a 09 09 6c 65 74 20 6d 75 74 20 62 75 69 6c  ....let mut buil
1710: 64 65 72 20 3d 20 73 65 6c 66 2e 68 74 74 70 5f  der = self.http_
1720: 63 6c 69 65 6e 74 2e 67 65 74 28 26 73 6f 75 72  client.get(&sour
1730: 63 65 2e 75 72 6c 29 3b 0a 09 09 69 66 20 6c 65  ce.url);...if le
1740: 74 20 53 6f 6d 65 28 6c 61 73 74 5f 73 63 72 61  t Some(last_scra
1750: 70 65 29 20 3d 20 6c 61 73 74 5f 73 63 72 61 70  pe) = last_scrap
1760: 65 20 7b 0a 09 09 09 62 75 69 6c 64 65 72 20 3d  e {....builder =
1770: 20 62 75 69 6c 64 65 72 2e 68 65 61 64 65 72 28   builder.header(
1780: 4c 41 53 54 5f 4d 4f 44 49 46 49 45 44 2c 20 6c  LAST_MODIFIED, l
1790: 61 73 74 5f 73 63 72 61 70 65 2e 74 6f 5f 72 66  ast_scrape.to_rf
17a0: 63 32 38 32 32 28 29 29 3b 0a 09 09 7d 3b 0a 09  c2822());...};..
17b0: 09 6c 65 74 20 72 65 73 70 6f 6e 73 65 20 3d 20  .let response = 
17c0: 62 75 69 6c 64 65 72 2e 73 65 6e 64 28 29 2e 61  builder.send().a
17d0: 77 61 69 74 2e 73 74 61 63 6b 28 29 3f 3b 0a 09  wait.stack()?;..
17e0: 09 23 5b 63 66 67 28 64 65 62 75 67 5f 61 73 73  .#[cfg(debug_ass
17f0: 65 72 74 69 6f 6e 73 29 5d 0a 09 09 7b 0a 09 09  ertions)]...{...
1800: 09 75 73 65 20 72 65 71 77 65 73 74 3a 3a 68 65  .use reqwest::he
1810: 61 64 65 72 3a 3a 7b 0a 09 09 09 09 43 41 43 48  ader::{.....CACH
1820: 45 5f 43 4f 4e 54 52 4f 4c 2c 0a 09 09 09 09 45  E_CONTROL,.....E
1830: 58 50 49 52 45 53 2c 0a 09 09 09 7d 3b 0a 09 09  XPIRES,....};...
1840: 09 6c 65 74 20 68 65 61 64 65 72 73 20 3d 20 72  .let headers = r
1850: 65 73 70 6f 6e 73 65 2e 68 65 61 64 65 72 73 28  esponse.headers(
1860: 29 3b 0a 09 09 09 6c 65 74 20 65 78 70 69 72 65  );....let expire
1870: 73 20 3d 20 68 65 61 64 65 72 73 2e 67 65 74 28  s = headers.get(
1880: 45 58 50 49 52 45 53 29 3b 0a 09 09 09 6c 65 74  EXPIRES);....let
1890: 20 63 61 63 68 65 20 3d 20 68 65 61 64 65 72 73   cache = headers
18a0: 2e 67 65 74 28 43 41 43 48 45 5f 43 4f 4e 54 52  .get(CACHE_CONTR
18b0: 4f 4c 29 3b 0a 09 09 09 69 66 20 65 78 70 69 72  OL);....if expir
18c0: 65 73 2e 69 73 5f 73 6f 6d 65 28 29 20 7c 7c 20  es.is_some() || 
18d0: 63 61 63 68 65 2e 69 73 5f 73 6f 6d 65 28 29 20  cache.is_some() 
18e0: 7b 0a 09 09 09 09 70 72 69 6e 74 6c 6e 21 28 22  {.....println!("
18f0: 7b 7d 20 7b 7d 20 7b 3a 3f 7d 20 7b 3a 3f 7d 20  {} {} {:?} {:?} 
1900: 7b 3a 3f 7d 22 2c 20 4c 6f 63 61 6c 3a 3a 6e 6f  {:?}", Local::no
1910: 77 28 29 2e 74 6f 5f 72 66 63 32 38 32 32 28 29  w().to_rfc2822()
1920: 2c 20 26 73 6f 75 72 63 65 2e 75 72 6c 2c 20 6c  , &source.url, l
1930: 61 73 74 5f 73 63 72 61 70 65 2c 20 65 78 70 69  ast_scrape, expi
1940: 72 65 73 2c 20 63 61 63 68 65 29 3b 0a 09 09 09  res, cache);....
1950: 7d 0a 09 09 7d 0a 09 09 6c 65 74 20 73 74 61 74  }...}...let stat
1960: 75 73 20 3d 20 72 65 73 70 6f 6e 73 65 2e 73 74  us = response.st
1970: 61 74 75 73 28 29 3b 0a 09 09 6c 65 74 20 63 6f  atus();...let co
1980: 6e 74 65 6e 74 20 3d 20 72 65 73 70 6f 6e 73 65  ntent = response
1990: 2e 62 79 74 65 73 28 29 2e 61 77 61 69 74 2e 73  .bytes().await.s
19a0: 74 61 63 6b 28 29 3f 3b 0a 09 09 6d 61 74 63 68  tack()?;...match
19b0: 20 72 73 73 3a 3a 43 68 61 6e 6e 65 6c 3a 3a 72   rss::Channel::r
19c0: 65 61 64 5f 66 72 6f 6d 28 26 63 6f 6e 74 65 6e  ead_from(&conten
19d0: 74 5b 2e 2e 5d 29 20 7b 0a 09 09 09 4f 6b 28 66  t[..]) {....Ok(f
19e0: 65 65 64 29 20 3d 3e 20 7b 0a 09 09 09 09 66 6f  eed) => {.....fo
19f0: 72 20 69 74 65 6d 20 69 6e 20 66 65 65 64 2e 69  r item in feed.i
1a00: 74 65 6d 73 28 29 20 7b 0a 09 09 09 09 09 69 66  tems() {......if
1a10: 20 6c 65 74 20 53 6f 6d 65 28 6c 69 6e 6b 29 20   let Some(link) 
1a20: 3d 20 69 74 65 6d 2e 6c 69 6e 6b 28 29 20 7b 0a  = item.link() {.
1a30: 09 09 09 09 09 09 6c 65 74 20 64 61 74 65 20 3d  ......let date =
1a40: 20 6d 61 74 63 68 20 69 74 65 6d 2e 70 75 62 5f   match item.pub_
1a50: 64 61 74 65 28 29 20 7b 0a 09 09 09 09 09 09 09  date() {........
1a60: 53 6f 6d 65 28 66 65 65 64 5f 64 61 74 65 29 20  Some(feed_date) 
1a70: 3d 3e 20 44 61 74 65 54 69 6d 65 3a 3a 70 61 72  => DateTime::par
1a80: 73 65 5f 66 72 6f 6d 5f 72 66 63 32 38 32 32 28  se_from_rfc2822(
1a90: 66 65 65 64 5f 64 61 74 65 29 2c 0a 09 09 09 09  feed_date),.....
1aa0: 09 09 09 4e 6f 6e 65 20 3d 3e 20 44 61 74 65 54  ...None => DateT
1ab0: 69 6d 65 3a 3a 70 61 72 73 65 5f 66 72 6f 6d 5f  ime::parse_from_
1ac0: 72 66 63 33 33 33 39 28 6d 61 74 63 68 20 69 74  rfc3339(match it
1ad0: 65 6d 2e 64 75 62 6c 69 6e 5f 63 6f 72 65 5f 65  em.dublin_core_e
1ae0: 78 74 28 29 20 7b 0a 09 09 09 09 09 09 09 09 53  xt() {.........S
1af0: 6f 6d 65 28 65 78 74 29 20 3d 3e 20 7b 0a 09 09  ome(ext) => {...
1b00: 09 09 09 09 09 09 09 6c 65 74 20 64 61 74 65 73  .......let dates
1b10: 20 3d 20 65 78 74 2e 64 61 74 65 73 28 29 3b 0a   = ext.dates();.
1b20: 09 09 09 09 09 09 09 09 09 69 66 20 64 61 74 65  .........if date
1b30: 73 2e 69 73 5f 65 6d 70 74 79 28 29 20 7b 0a 09  s.is_empty() {..
1b40: 09 09 09 09 09 09 09 09 09 62 61 69 6c 21 28 22  .........bail!("
1b50: 46 65 65 64 20 69 74 65 6d 20 68 61 73 20 44 75  Feed item has Du
1b60: 62 6c 69 6e 20 43 6f 72 65 20 65 78 74 65 6e 73  blin Core extens
1b70: 69 6f 6e 20 62 75 74 20 6e 6f 20 64 61 74 65 73  ion but no dates
1b80: 2e 22 29 0a 09 09 09 09 09 09 09 09 09 7d 20 65  .")..........} e
1b90: 6c 73 65 20 7b 0a 09 09 09 09 09 09 09 09 09 09  lse {...........
1ba0: 26 64 61 74 65 73 5b 30 5d 0a 09 09 09 09 09 09  &dates[0].......
1bb0: 09 09 09 7d 0a 09 09 09 09 09 09 09 09 7d 2c 0a  ...}.........},.
1bc0: 09 09 09 09 09 09 09 09 4e 6f 6e 65 20 3d 3e 20  ........None => 
1bd0: 62 61 69 6c 21 28 22 46 65 65 64 20 69 74 65 6d  bail!("Feed item
1be0: 20 6d 69 73 73 65 73 20 70 6f 73 74 69 6e 67 20   misses posting 
1bf0: 64 61 74 65 2e 22 29 2c 0a 09 09 09 09 09 09 09  date."),........
1c00: 7d 29 2c 0a 09 09 09 09 09 09 7d 2e 73 74 61 63  }),.......}.stac
1c10: 6b 28 29 3f 3b 0a 09 09 09 09 09 09 70 6f 73 74  k()?;.......post
1c20: 73 2e 69 6e 73 65 72 74 28 64 61 74 65 2c 20 50  s.insert(date, P
1c30: 6f 73 74 7b 0a 09 09 09 09 09 09 09 75 72 69 3a  ost{........uri:
1c40: 20 6c 69 6e 6b 2e 74 6f 5f 73 74 72 69 6e 67 28   link.to_string(
1c50: 29 2c 0a 09 09 09 09 09 09 09 5f 74 69 74 6c 65  ),........_title
1c60: 3a 20 69 74 65 6d 2e 74 69 74 6c 65 28 29 2e 75  : item.title().u
1c70: 6e 77 72 61 70 5f 6f 72 28 22 22 29 2e 74 6f 5f  nwrap_or("").to_
1c80: 73 74 72 69 6e 67 28 29 2c 0a 09 09 09 09 09 09  string(),.......
1c90: 09 5f 61 75 74 68 6f 72 73 3a 20 69 74 65 6d 2e  ._authors: item.
1ca0: 61 75 74 68 6f 72 28 29 2e 75 6e 77 72 61 70 5f  author().unwrap_
1cb0: 6f 72 28 22 22 29 2e 74 6f 5f 73 74 72 69 6e 67  or("").to_string
1cc0: 28 29 2c 0a 09 09 09 09 09 09 09 5f 73 75 6d 6d  (),........_summ
1cd0: 61 72 79 3a 20 69 74 65 6d 2e 63 6f 6e 74 65 6e  ary: item.conten
1ce0: 74 28 29 2e 75 6e 77 72 61 70 5f 6f 72 28 22 22  t().unwrap_or(""
1cf0: 29 2e 74 6f 5f 73 74 72 69 6e 67 28 29 2c 0a 09  ).to_string(),..
1d00: 09 09 09 09 09 7d 29 3b 0a 09 09 09 09 09 7d 0a  .....});......}.
1d10: 09 09 09 09 7d 3b 0a 09 09 09 7d 2c 0a 09 09 09  ....};....},....
1d20: 45 72 72 28 65 72 72 29 20 3d 3e 20 6d 61 74 63  Err(err) => matc
1d30: 68 20 65 72 72 20 7b 0a 09 09 09 09 72 73 73 3a  h err {.....rss:
1d40: 3a 45 72 72 6f 72 3a 3a 49 6e 76 61 6c 69 64 53  :Error::InvalidS
1d50: 74 61 72 74 54 61 67 20 3d 3e 20 7b 0a 09 09 09  tartTag => {....
1d60: 09 09 6d 61 74 63 68 20 61 74 6f 6d 5f 73 79 6e  ..match atom_syn
1d70: 64 69 63 61 74 69 6f 6e 3a 3a 46 65 65 64 3a 3a  dication::Feed::
1d80: 72 65 61 64 5f 66 72 6f 6d 28 26 63 6f 6e 74 65  read_from(&conte
1d90: 6e 74 5b 2e 2e 5d 29 20 7b 0a 09 09 09 09 09 09  nt[..]) {.......
1da0: 4f 6b 28 66 65 65 64 29 20 3d 3e 20 7b 0a 09 09  Ok(feed) => {...
1db0: 09 09 09 09 09 66 6f 72 20 69 74 65 6d 20 69 6e  .....for item in
1dc0: 20 66 65 65 64 2e 65 6e 74 72 69 65 73 28 29 20   feed.entries() 
1dd0: 7b 0a 09 09 09 09 09 09 09 09 6c 65 74 20 64 61  {.........let da
1de0: 74 65 20 3d 20 69 74 65 6d 2e 70 75 62 6c 69 73  te = item.publis
1df0: 68 65 64 28 29 0a 09 09 09 09 09 09 09 09 09 2e  hed()...........
1e00: 73 74 61 63 6b 5f 65 72 72 28 22 46 65 65 64 20  stack_err("Feed 
1e10: 69 74 65 6d 20 6d 69 73 73 69 6e 67 20 70 75 62  item missing pub
1e20: 6c 69 73 68 69 6e 67 20 64 61 74 65 2e 22 29 3f  lishing date.")?
1e30: 3b 0a 09 09 09 09 09 09 09 09 6c 65 74 20 75 72  ;.........let ur
1e40: 69 20 3d 20 7b 0a 09 09 09 09 09 09 09 09 09 6c  i = {..........l
1e50: 65 74 20 6c 69 6e 6b 73 20 3d 20 69 74 65 6d 2e  et links = item.
1e60: 6c 69 6e 6b 73 28 29 3b 0a 09 09 09 09 09 09 09  links();........
1e70: 09 09 69 66 20 6c 69 6e 6b 73 2e 69 73 5f 65 6d  ..if links.is_em
1e80: 70 74 79 28 29 20 7b 0a 09 09 09 09 09 09 09 09  pty() {.........
1e90: 09 09 62 61 69 6c 21 28 22 46 65 65 64 20 69 74  ..bail!("Feed it
1ea0: 65 6d 20 6d 69 73 73 69 6e 67 20 70 6f 73 74 20  em missing post 
1eb0: 6c 69 6e 6b 73 2e 22 29 3b 0a 09 09 09 09 09 09  links.");.......
1ec0: 09 09 09 7d 20 65 6c 73 65 20 7b 0a 09 09 09 09  ...} else {.....
1ed0: 09 09 09 09 09 09 6c 69 6e 6b 73 5b 30 5d 2e 68  ......links[0].h
1ee0: 72 65 66 28 29 2e 74 6f 5f 73 74 72 69 6e 67 28  ref().to_string(
1ef0: 29 0a 09 09 09 09 09 09 09 09 09 7d 0a 09 09 09  )..........}....
1f00: 09 09 09 09 09 7d 3b 0a 09 09 09 09 09 09 09 09  .....};.........
1f10: 6c 65 74 20 5f 61 75 74 68 6f 72 73 20 3d 20 69  let _authors = i
1f20: 74 65 6d 2e 61 75 74 68 6f 72 73 28 29 2e 69 74  tem.authors().it
1f30: 65 72 28 29 2e 6d 61 70 28 7c 78 7c 20 66 6f 72  er().map(|x| for
1f40: 6d 61 74 21 28 22 7b 7d 20 3c 7b 3a 3f 7d 3e 22  mat!("{} <{:?}>"
1f50: 2c 20 78 2e 6e 61 6d 65 28 29 2c 20 78 2e 65 6d  , x.name(), x.em
1f60: 61 69 6c 28 29 29 29 2e 63 6f 6c 6c 65 63 74 3a  ail())).collect:
1f70: 3a 3c 56 65 63 3c 53 74 72 69 6e 67 3e 3e 28 29  :<Vec<String>>()
1f80: 2e 6a 6f 69 6e 28 22 2c 20 22 29 3b 0a 09 09 09  .join(", ");....
1f90: 09 09 09 09 09 6c 65 74 20 5f 73 75 6d 6d 61 72  .....let _summar
1fa0: 79 20 3d 20 69 66 20 6c 65 74 20 53 6f 6d 65 28  y = if let Some(
1fb0: 73 75 6d 29 20 3d 20 69 74 65 6d 2e 73 75 6d 6d  sum) = item.summ
1fc0: 61 72 79 28 29 20 7b 20 73 75 6d 2e 76 61 6c 75  ary() { sum.valu
1fd0: 65 2e 63 6c 6f 6e 65 28 29 20 7d 20 65 6c 73 65  e.clone() } else
1fe0: 20 7b 20 53 74 72 69 6e 67 3a 3a 6e 65 77 28 29   { String::new()
1ff0: 20 7d 3b 0a 09 09 09 09 09 09 09 09 70 6f 73 74   };.........post
2000: 73 2e 69 6e 73 65 72 74 28 2a 64 61 74 65 2c 20  s.insert(*date, 
2010: 50 6f 73 74 7b 0a 09 09 09 09 09 09 09 09 09 75  Post{..........u
2020: 72 69 2c 0a 09 09 09 09 09 09 09 09 09 5f 74 69  ri,.........._ti
2030: 74 6c 65 3a 20 69 74 65 6d 2e 74 69 74 6c 65 28  tle: item.title(
2040: 29 2e 74 6f 5f 73 74 72 69 6e 67 28 29 2c 0a 09  ).to_string(),..
2050: 09 09 09 09 09 09 09 09 5f 61 75 74 68 6f 72 73  ........_authors
2060: 2c 0a 09 09 09 09 09 09 09 09 09 5f 73 75 6d 6d  ,.........._summ
2070: 61 72 79 2c 0a 09 09 09 09 09 09 09 09 7d 29 3b  ary,.........});
2080: 0a 09 09 09 09 09 09 09 7d 3b 0a 09 09 09 09 09  ........};......
2090: 09 7d 2c 0a 09 09 09 09 09 09 45 72 72 28 65 72  .},.......Err(er
20a0: 72 29 20 3d 3e 20 7b 0a 09 09 09 09 09 09 09 62  r) => {........b
20b0: 61 69 6c 21 28 22 55 6e 73 75 70 70 6f 72 74 65  ail!("Unsupporte
20c0: 64 20 6f 72 20 6d 61 6e 67 6c 65 64 20 63 6f 6e  d or mangled con
20d0: 74 65 6e 74 3a 5c 6e 7b 3a 3f 7d 5c 6e 7b 65 72  tent:\n{:?}\n{er
20e0: 72 7d 5c 6e 7b 73 74 61 74 75 73 3a 23 3f 7d 5c  r}\n{status:#?}\
20f0: 6e 22 2c 20 26 73 6f 75 72 63 65 2e 75 72 6c 29  n", &source.url)
2100: 0a 09 09 09 09 09 09 7d 2c 0a 09 09 09 09 09 7d  .......},......}
2110: 0a 09 09 09 09 7d 2c 0a 09 09 09 09 72 73 73 3a  .....},.....rss:
2120: 3a 45 72 72 6f 72 3a 3a 45 6f 66 20 3d 3e 20 28  :Error::Eof => (
2130: 29 2c 0a 09 09 09 09 5f 20 3d 3e 20 62 61 69 6c  ),....._ => bail
2140: 21 28 22 55 6e 73 75 70 70 6f 72 74 65 64 20 6f  !("Unsupported o
2150: 72 20 6d 61 6e 67 6c 65 64 20 63 6f 6e 74 65 6e  r mangled conten
2160: 74 3a 5c 6e 7b 3a 3f 7d 5c 6e 7b 65 72 72 7d 5c  t:\n{:?}\n{err}\
2170: 6e 7b 73 74 61 74 75 73 3a 23 3f 7d 5c 6e 22 2c  n{status:#?}\n",
2180: 20 26 73 6f 75 72 63 65 2e 75 72 6c 29 0a 09 09   &source.url)...
2190: 09 7d 0a 09 09 7d 3b 0a 09 09 66 6f 72 20 28 64  .}...};...for (d
21a0: 61 74 65 2c 20 70 6f 73 74 29 20 69 6e 20 70 6f  ate, post) in po
21b0: 73 74 73 2e 69 74 65 72 28 29 20 7b 0a 09 09 09  sts.iter() {....
21c0: 6c 65 74 20 70 6f 73 74 5f 75 72 6c 3a 20 43 6f  let post_url: Co
21d0: 77 3c 73 74 72 3e 20 3d 20 6d 61 74 63 68 20 73  w<str> = match s
21e0: 6f 75 72 63 65 2e 75 72 6c 5f 72 65 20 7b 0a 09  ource.url_re {..
21f0: 09 09 09 53 6f 6d 65 28 72 65 66 20 78 29 20 3d  ...Some(ref x) =
2200: 3e 20 73 65 64 72 65 67 65 78 3a 3a 52 65 70 6c  > sedregex::Repl
2210: 61 63 65 43 6f 6d 6d 61 6e 64 3a 3a 6e 65 77 28  aceCommand::new(
2220: 78 29 2e 73 74 61 63 6b 28 29 3f 2e 65 78 65 63  x).stack()?.exec
2230: 75 74 65 28 26 70 6f 73 74 2e 75 72 69 29 2c 0a  ute(&post.uri),.
2240: 09 09 09 09 4e 6f 6e 65 20 3d 3e 20 70 6f 73 74  ....None => post
2250: 2e 75 72 69 2e 63 6c 6f 6e 65 28 29 2e 69 6e 74  .uri.clone().int
2260: 6f 28 29 2c 0a 09 09 09 7d 3b 0a 09 09 09 69 66  o(),....};....if
2270: 20 21 20 63 6f 6e 6e 2e 65 78 69 73 74 73 28 26   ! conn.exists(&
2280: 70 6f 73 74 5f 75 72 6c 2c 20 69 64 29 2e 61 77  post_url, id).aw
2290: 61 69 74 2e 73 74 61 63 6b 28 29 3f 20 7b 0a 09  ait.stack()? {..
22a0: 09 09 09 69 66 20 74 68 69 73 5f 66 65 74 63 68  ...if this_fetch
22b0: 2e 69 73 5f 6e 6f 6e 65 28 29 20 7c 7c 20 2a 64  .is_none() || *d
22c0: 61 74 65 20 3e 20 74 68 69 73 5f 66 65 74 63 68  ate > this_fetch
22d0: 2e 75 6e 77 72 61 70 28 29 20 7b 0a 09 09 09 09  .unwrap() {.....
22e0: 09 74 68 69 73 5f 66 65 74 63 68 20 3d 20 53 6f  .this_fetch = So
22f0: 6d 65 28 2a 64 61 74 65 29 3b 0a 09 09 09 09 7d  me(*date);.....}
2300: 3b 0a 09 09 09 09 73 65 6c 66 2e 74 67 2e 73 65  ;.....self.tg.se
2310: 6e 64 28 4d 79 4d 65 73 73 61 67 65 3a 3a 68 74  nd(MyMessage::ht
2320: 6d 6c 5f 74 6f 28 6d 61 74 63 68 20 26 73 6f 75  ml_to(match &sou
2330: 72 63 65 2e 69 76 5f 68 61 73 68 20 7b 0a 09 09  rce.iv_hash {...
2340: 09 09 09 53 6f 6d 65 28 68 61 73 68 29 20 3d 3e  ...Some(hash) =>
2350: 20 66 6f 72 6d 61 74 21 28 22 3c 61 20 68 72 65   format!("<a hre
2360: 66 3d 5c 22 68 74 74 70 73 3a 2f 2f 74 2e 6d 65  f=\"https://t.me
2370: 2f 69 76 3f 75 72 6c 3d 7b 70 6f 73 74 5f 75 72  /iv?url={post_ur
2380: 6c 7d 26 72 68 61 73 68 3d 7b 68 61 73 68 7d 5c  l}&rhash={hash}\
2390: 22 3e 20 3c 2f 61 3e 7b 70 6f 73 74 5f 75 72 6c  "> </a>{post_url
23a0: 7d 22 29 2c 0a 09 09 09 09 09 4e 6f 6e 65 20 3d  }"),......None =
23b0: 3e 20 66 6f 72 6d 61 74 21 28 22 7b 70 6f 73 74  > format!("{post
23c0: 5f 75 72 6c 7d 22 29 2c 0a 09 09 09 09 7d 2c 20  _url}"),.....}, 
23d0: 64 65 73 74 69 6e 61 74 69 6f 6e 29 29 2e 61 77  destination)).aw
23e0: 61 69 74 2e 73 74 61 63 6b 28 29 3f 3b 0a 09 09  ait.stack()?;...
23f0: 09 09 63 6f 6e 6e 2e 61 64 64 5f 70 6f 73 74 28  ..conn.add_post(
2400: 69 64 2c 20 64 61 74 65 2c 20 26 70 6f 73 74 5f  id, date, &post_
2410: 75 72 6c 29 2e 61 77 61 69 74 2e 73 74 61 63 6b  url).await.stack
2420: 28 29 3f 3b 0a 09 09 09 09 70 6f 73 74 65 64 20  ()?;.....posted 
2430: 2b 3d 20 31 3b 0a 09 09 09 7d 3b 0a 09 09 7d 3b  += 1;....};...};
2440: 0a 09 09 70 6f 73 74 73 2e 63 6c 65 61 72 28 29  ...posts.clear()
2450: 3b 0a 09 09 4f 6b 28 66 6f 72 6d 61 74 21 28 22  ;...Ok(format!("
2460: 50 6f 73 74 65 64 3a 20 7b 70 6f 73 74 65 64 7d  Posted: {posted}
2470: 22 29 29 0a 09 7d 0a 0a 09 2f 2f 2f 20 44 65 74  "))..}.../// Det
2480: 65 72 6d 69 6e 65 20 74 68 65 20 64 65 6c 61 79  ermine the delay
2490: 20 75 6e 74 69 6c 20 74 68 65 20 6e 65 78 74 20   until the next 
24a0: 73 63 68 65 64 75 6c 65 64 20 66 65 74 63 68 20  scheduled fetch 
24b0: 61 6e 64 20 73 70 61 77 6e 20 62 61 63 6b 67 72  and spawn backgr
24c0: 6f 75 6e 64 20 63 68 65 63 6b 73 20 66 6f 72 20  ound checks for 
24d0: 61 6e 79 20 6f 76 65 72 64 75 65 20 73 6f 75 72  any overdue sour
24e0: 63 65 73 2e 0a 09 2f 2f 2f 0a 09 2f 2f 2f 20 54  ces...///../// T
24f0: 68 69 73 20 73 63 61 6e 73 20 74 68 65 20 64 61  his scans the da
2500: 74 61 62 61 73 65 20 71 75 65 75 65 2c 20 73 70  tabase queue, sp
2510: 61 77 6e 73 20 62 61 63 6b 67 72 6f 75 6e 64 20  awns background 
2520: 74 61 73 6b 73 20 74 6f 20 72 75 6e 20 63 68 65  tasks to run che
2530: 63 6b 73 20 66 6f 72 20 73 6f 75 72 63 65 73 20  cks for sources 
2540: 77 68 6f 73 65 20 60 6e 65 78 74 5f 66 65 74 63  whose `next_fetc
2550: 68 60 0a 09 2f 2f 2f 20 69 73 20 69 6e 20 74 68  h`../// is in th
2560: 65 20 70 61 73 74 20 28 65 61 63 68 20 74 61 73  e past (each tas
2570: 6b 20 75 73 65 73 20 61 20 43 6f 72 65 20 63 6c  k uses a Core cl
2580: 6f 6e 65 20 77 69 74 68 20 74 68 65 20 61 70 70  one with the app
2590: 72 6f 70 72 69 61 74 65 20 6f 77 6e 65 72 29 2c  ropriate owner),
25a0: 20 61 6e 64 20 63 6f 6d 70 75 74 65 73 20 74 68   and computes th
25b0: 65 20 73 68 6f 72 74 65 73 74 0a 09 2f 2f 2f 20  e shortest../// 
25c0: 64 75 72 61 74 69 6f 6e 20 75 6e 74 69 6c 20 74  duration until t
25d0: 68 65 20 6e 65 78 74 20 60 6e 65 78 74 5f 66 65  he next `next_fe
25e0: 74 63 68 60 2e 0a 09 61 73 79 6e 63 20 66 6e 20  tch`...async fn 
25f0: 61 75 74 6f 66 65 74 63 68 28 26 73 65 6c 66 29  autofetch(&self)
2600: 20 2d 3e 20 52 65 73 75 6c 74 3c 73 74 64 3a 3a   -> Result<std::
2610: 74 69 6d 65 3a 3a 44 75 72 61 74 69 6f 6e 3e 20  time::Duration> 
2620: 7b 0a 09 09 6c 65 74 20 6d 75 74 20 64 65 6c 61  {...let mut dela
2630: 79 20 3d 20 63 68 72 6f 6e 6f 3a 3a 44 75 72 61  y = chrono::Dura
2640: 74 69 6f 6e 3a 3a 6d 69 6e 75 74 65 73 28 31 29  tion::minutes(1)
2650: 3b 0a 09 09 6c 65 74 20 6e 6f 77 20 3d 20 63 68  ;...let now = ch
2660: 72 6f 6e 6f 3a 3a 4c 6f 63 61 6c 3a 3a 6e 6f 77  rono::Local::now
2670: 28 29 3b 0a 09 09 6c 65 74 20 71 75 65 75 65 20  ();...let queue 
2680: 3d 20 7b 0a 09 09 09 6c 65 74 20 6d 75 74 20 63  = {....let mut c
2690: 6f 6e 6e 20 3d 20 73 65 6c 66 2e 64 62 2e 62 65  onn = self.db.be
26a0: 67 69 6e 28 29 2e 61 77 61 69 74 2e 73 74 61 63  gin().await.stac
26b0: 6b 28 29 3f 3b 0a 09 09 09 63 6f 6e 6e 2e 67 65  k()?;....conn.ge
26c0: 74 5f 71 75 65 75 65 28 29 2e 61 77 61 69 74 2e  t_queue().await.
26d0: 73 74 61 63 6b 28 29 3f 0a 09 09 7d 3b 0a 09 09  stack()?...};...
26e0: 66 6f 72 20 72 6f 77 20 69 6e 20 71 75 65 75 65  for row in queue
26f0: 20 7b 0a 09 09 09 69 66 20 6c 65 74 20 53 6f 6d   {....if let Som
2700: 65 28 6e 65 78 74 5f 66 65 74 63 68 29 20 3d 20  e(next_fetch) = 
2710: 72 6f 77 2e 6e 65 78 74 5f 66 65 74 63 68 20 7b  row.next_fetch {
2720: 0a 09 09 09 09 69 66 20 6e 65 78 74 5f 66 65 74  .....if next_fet
2730: 63 68 20 3c 20 6e 6f 77 20 7b 0a 09 09 09 09 09  ch < now {......
2740: 69 66 20 6c 65 74 20 28 53 6f 6d 65 28 6f 77 6e  if let (Some(own
2750: 65 72 29 2c 20 53 6f 6d 65 28 73 6f 75 72 63 65  er), Some(source
2760: 5f 69 64 29 2c 20 6c 61 73 74 5f 73 63 72 61 70  _id), last_scrap
2770: 65 29 20 3d 20 28 72 6f 77 2e 6f 77 6e 65 72 2c  e) = (row.owner,
2780: 20 72 6f 77 2e 73 6f 75 72 63 65 5f 69 64 2c 20   row.source_id, 
2790: 72 6f 77 2e 6c 61 73 74 5f 73 63 72 61 70 65 29  row.last_scrape)
27a0: 20 7b 0a 09 09 09 09 09 09 6c 65 74 20 63 6c 6f   {.......let clo
27b0: 6e 65 20 3d 20 43 6f 72 65 20 7b 0a 09 09 09 09  ne = Core {.....
27c0: 09 09 09 74 67 3a 20 73 65 6c 66 2e 74 67 2e 77  ...tg: self.tg.w
27d0: 69 74 68 5f 6f 77 6e 65 72 28 6f 77 6e 65 72 29  ith_owner(owner)
27e0: 2c 0a 09 09 09 09 09 09 09 2e 2e 73 65 6c 66 2e  ,..........self.
27f0: 63 6c 6f 6e 65 28 29 0a 09 09 09 09 09 09 7d 3b  clone().......};
2800: 0a 09 09 09 09 09 09 6c 65 74 20 73 6f 75 72 63  .......let sourc
2810: 65 20 3d 20 7b 0a 09 09 09 09 09 09 09 6c 65 74  e = {........let
2820: 20 6d 75 74 20 63 6f 6e 6e 20 3d 20 73 65 6c 66   mut conn = self
2830: 2e 64 62 2e 62 65 67 69 6e 28 29 2e 61 77 61 69  .db.begin().awai
2840: 74 2e 73 74 61 63 6b 28 29 3f 3b 0a 09 09 09 09  t.stack()?;.....
2850: 09 09 09 6d 61 74 63 68 20 63 6f 6e 6e 2e 67 65  ...match conn.ge
2860: 74 5f 6f 6e 65 28 6f 77 6e 65 72 2c 20 73 6f 75  t_one(owner, sou
2870: 72 63 65 5f 69 64 29 2e 61 77 61 69 74 20 7b 0a  rce_id).await {.
2880: 09 09 09 09 09 09 09 09 4f 6b 28 53 6f 6d 65 28  ........Ok(Some(
2890: 73 6f 75 72 63 65 29 29 20 3d 3e 20 73 6f 75 72  source)) => sour
28a0: 63 65 2e 74 6f 5f 73 74 72 69 6e 67 28 29 2c 0a  ce.to_string(),.
28b0: 09 09 09 09 09 09 09 09 4f 6b 28 4e 6f 6e 65 29  ........Ok(None)
28c0: 20 3d 3e 20 22 53 6f 75 72 63 65 20 6e 6f 74 20   => "Source not 
28d0: 66 6f 75 6e 64 20 69 6e 20 64 61 74 61 62 61 73  found in databas
28e0: 65 3f 22 2e 74 6f 5f 73 74 72 69 6e 67 28 29 2c  e?".to_string(),
28f0: 0a 09 09 09 09 09 09 09 09 45 72 72 28 65 72 72  .........Err(err
2900: 29 20 3d 3e 20 66 6f 72 6d 61 74 21 28 22 46 61  ) => format!("Fa
2910: 69 6c 65 64 20 74 6f 20 66 65 74 63 68 20 73 6f  iled to fetch so
2920: 75 72 63 65 20 64 61 74 61 3a 5c 6e 7b 65 72 72  urce data:\n{err
2930: 7d 22 29 2c 0a 09 09 09 09 09 09 09 7d 0a 09 09  }"),........}...
2940: 09 09 09 09 7d 3b 0a 09 09 09 09 09 09 73 6d 6f  ....};.......smo
2950: 6c 3a 3a 73 70 61 77 6e 28 43 6f 6d 70 61 74 3a  l::spawn(Compat:
2960: 3a 6e 65 77 28 61 73 79 6e 63 20 6d 6f 76 65 20  :new(async move 
2970: 7b 0a 09 09 09 09 09 09 09 69 66 20 6c 65 74 20  {........if let 
2980: 45 72 72 28 65 72 72 29 20 3d 20 63 6c 6f 6e 65  Err(err) = clone
2990: 2e 63 68 65 63 6b 28 73 6f 75 72 63 65 5f 69 64  .check(source_id
29a0: 2c 20 74 72 75 65 2c 20 53 6f 6d 65 28 6c 61 73  , true, Some(las
29b0: 74 5f 73 63 72 61 70 65 29 29 2e 61 77 61 69 74  t_scrape)).await
29c0: 0a 09 09 09 09 09 09 09 09 26 26 20 6c 65 74 20  .........&& let 
29d0: 45 72 72 28 65 72 72 29 20 3d 20 63 6c 6f 6e 65  Err(err) = clone
29e0: 2e 74 67 2e 73 65 6e 64 28 4d 79 4d 65 73 73 61  .tg.send(MyMessa
29f0: 67 65 3a 3a 68 74 6d 6c 28 66 6f 72 6d 61 74 21  ge::html(format!
2a00: 28 22 f0 9f 9b 91 20 7b 73 6f 75 72 63 65 7d 5c  ("🛑 {source}\
2a10: 6e 3c 70 72 65 3e 7b 7d 3c 2f 70 72 65 3e 22 2c  n<pre>{}</pre>",
2a20: 20 26 65 72 72 2e 74 6f 5f 73 74 72 69 6e 67 28   &err.to_string(
2a30: 29 29 29 29 2e 61 77 61 69 74 0a 09 09 09 09 09  )))).await......
2a40: 09 09 7b 0a 09 09 09 09 09 09 09 09 65 70 72 69  ..{.........epri
2a50: 6e 74 6c 6e 21 28 22 43 68 65 63 6b 20 65 72 72  ntln!("Check err
2a60: 6f 72 3a 20 7b 65 72 72 7d 22 29 3b 0a 09 09 09  or: {err}");....
2a70: 09 09 09 09 7d 3b 0a 09 09 09 09 09 09 7d 29 29  ....};.......}))
2a80: 2e 64 65 74 61 63 68 28 29 3b 0a 09 09 09 09 09  .detach();......
2a90: 7d 0a 09 09 09 09 7d 20 65 6c 73 65 20 69 66 20  }.....} else if 
2aa0: 6e 65 78 74 5f 66 65 74 63 68 20 2d 20 6e 6f 77  next_fetch - now
2ab0: 20 3c 20 64 65 6c 61 79 20 7b 0a 09 09 09 09 09   < delay {......
2ac0: 64 65 6c 61 79 20 3d 20 6e 65 78 74 5f 66 65 74  delay = next_fet
2ad0: 63 68 20 2d 20 6e 6f 77 3b 0a 09 09 09 09 7d 0a  ch - now;.....}.
2ae0: 09 09 09 7d 0a 09 09 7d 3b 0a 09 09 64 65 6c 61  ...}...};...dela
2af0: 79 2e 74 6f 5f 73 74 64 28 29 2e 73 74 61 63 6b  y.to_std().stack
2b00: 28 29 0a 09 7d 0a 0a 09 2f 2f 2f 20 44 69 73 70  ()..}.../// Disp
2b10: 6c 61 79 73 20 66 75 6c 6c 20 6c 69 73 74 20 6f  lays full list o
2b20: 66 20 6d 61 6e 61 67 65 64 20 63 68 61 6e 6e 65  f managed channe
2b30: 6c 73 20 66 6f 72 20 73 70 65 63 69 66 69 65 64  ls for specified
2b40: 20 75 73 65 72 0a 09 70 75 62 20 61 73 79 6e 63   user..pub async
2b50: 20 66 6e 20 6c 69 73 74 20 28 26 73 65 6c 66 2c   fn list (&self,
2b60: 20 6f 77 6e 65 72 3a 20 55 73 65 72 50 65 65 72   owner: UserPeer
2b70: 49 64 29 20 2d 3e 20 52 65 73 75 6c 74 3c 53 74  Id) -> Result<St
2b80: 72 69 6e 67 3e 20 7b 0a 09 09 6c 65 74 20 6d 75  ring> {...let mu
2b90: 74 20 72 65 70 6c 79 3a 20 56 65 63 3c 53 74 72  t reply: Vec<Str
2ba0: 69 6e 67 3e 20 3d 20 76 65 63 21 5b 5d 3b 0a 09  ing> = vec![];..
2bb0: 09 72 65 70 6c 79 2e 70 75 73 68 28 22 43 68 61  .reply.push("Cha
2bc0: 6e 6e 65 6c 73 3a 22 2e 69 6e 74 6f 28 29 29 3b  nnels:".into());
2bd0: 0a 09 09 6c 65 74 20 6d 75 74 20 63 6f 6e 6e 20  ...let mut conn 
2be0: 3d 20 73 65 6c 66 2e 64 62 2e 62 65 67 69 6e 28  = self.db.begin(
2bf0: 29 2e 61 77 61 69 74 2e 73 74 61 63 6b 28 29 3f  ).await.stack()?
2c00: 3b 0a 09 09 66 6f 72 20 72 6f 77 20 69 6e 20 63  ;...for row in c
2c10: 6f 6e 6e 2e 67 65 74 5f 6c 69 73 74 28 6f 77 6e  onn.get_list(own
2c20: 65 72 29 2e 61 77 61 69 74 2e 73 74 61 63 6b 28  er).await.stack(
2c30: 29 3f 20 7b 0a 09 09 09 72 65 70 6c 79 2e 70 75  )? {....reply.pu
2c40: 73 68 28 72 6f 77 2e 74 6f 5f 73 74 72 69 6e 67  sh(row.to_string
2c50: 28 29 29 3b 0a 09 09 7d 3b 0a 09 09 4f 6b 28 72  ());...};...Ok(r
2c60: 65 70 6c 79 2e 6a 6f 69 6e 28 22 5c 6e 5c 6e 22  eply.join("\n\n"
2c70: 29 29 0a 09 7d 0a 0a 09 2f 2f 2f 20 52 65 74 75  ))..}.../// Retu
2c80: 72 6e 73 20 63 75 72 72 65 6e 74 20 63 61 63 68  rns current cach
2c90: 65 64 20 6c 69 73 74 20 6f 66 20 66 65 65 64 20  ed list of feed 
2ca0: 66 6f 72 20 72 65 71 75 65 73 74 65 64 20 75 73  for requested us
2cb0: 65 72 2c 20 6f 72 20 6c 6f 61 64 73 20 64 61 74  er, or loads dat
2cc0: 61 20 66 72 6f 6d 20 64 61 74 61 62 61 73 65 0a  a from database.
2cd0: 09 70 75 62 20 61 73 79 6e 63 20 66 6e 20 67 65  .pub async fn ge
2ce0: 74 5f 66 65 65 64 73 20 28 26 73 65 6c 66 2c 20  t_feeds (&self, 
2cf0: 6f 77 6e 65 72 3a 20 69 36 34 29 20 2d 3e 20 52  owner: i64) -> R
2d00: 65 73 75 6c 74 3c 41 72 63 3c 4d 75 74 65 78 3c  esult<Arc<Mutex<
2d10: 46 65 65 64 4c 69 73 74 3e 3e 3e 20 7b 0a 09 09  FeedList>>> {...
2d20: 6c 65 74 20 6d 75 74 20 66 65 65 64 73 20 3d 20  let mut feeds = 
2d30: 73 65 6c 66 2e 66 65 65 64 73 2e 6c 6f 63 6b 5f  self.feeds.lock_
2d40: 61 72 63 28 29 2e 61 77 61 69 74 3b 0a 09 09 4f  arc().await;...O
2d50: 6b 28 6d 61 74 63 68 20 66 65 65 64 73 2e 67 65  k(match feeds.ge
2d60: 74 28 26 6f 77 6e 65 72 29 20 7b 0a 09 09 09 4e  t(&owner) {....N
2d70: 6f 6e 65 20 3d 3e 20 7b 0a 09 09 09 09 6c 65 74  one => {.....let
2d80: 20 6d 75 74 20 63 6f 6e 6e 20 3d 20 73 65 6c 66   mut conn = self
2d90: 2e 64 62 2e 62 65 67 69 6e 28 29 2e 61 77 61 69  .db.begin().awai
2da0: 74 2e 73 74 61 63 6b 28 29 3f 3b 0a 09 09 09 09  t.stack()?;.....
2db0: 6c 65 74 20 66 65 65 64 5f 6c 69 73 74 20 3d 20  let feed_list = 
2dc0: 63 6f 6e 6e 2e 67 65 74 5f 66 65 65 64 73 28 6f  conn.get_feeds(o
2dd0: 77 6e 65 72 29 2e 61 77 61 69 74 2e 73 74 61 63  wner).await.stac
2de0: 6b 28 29 3f 3b 0a 09 09 09 09 6c 65 74 20 6d 75  k()?;.....let mu
2df0: 74 20 6d 61 70 20 3d 20 48 61 73 68 4d 61 70 3a  t map = HashMap:
2e00: 3a 6e 65 77 28 29 3b 0a 09 09 09 09 66 6f 72 20  :new();.....for 
2e10: 66 65 65 64 20 69 6e 20 66 65 65 64 5f 6c 69 73  feed in feed_lis
2e20: 74 20 7b 0a 09 09 09 09 09 6d 61 70 2e 69 6e 73  t {......map.ins
2e30: 65 72 74 28 66 65 65 64 2e 73 6f 75 72 63 65 5f  ert(feed.source_
2e40: 69 64 2c 20 66 65 65 64 2e 63 68 61 6e 6e 65 6c  id, feed.channel
2e50: 29 3b 0a 09 09 09 09 7d 3b 0a 09 09 09 09 6c 65  );.....};.....le
2e60: 74 20 72 65 73 20 3d 20 41 72 63 3a 3a 6e 65 77  t res = Arc::new
2e70: 28 4d 75 74 65 78 3a 3a 6e 65 77 28 6d 61 70 29  (Mutex::new(map)
2e80: 29 3b 0a 09 09 09 09 66 65 65 64 73 2e 69 6e 73  );.....feeds.ins
2e90: 65 72 74 28 6f 77 6e 65 72 2c 20 72 65 73 2e 63  ert(owner, res.c
2ea0: 6c 6f 6e 65 28 29 2c 20 44 75 72 61 74 69 6f 6e  lone(), Duration
2eb0: 3a 3a 66 72 6f 6d 5f 73 65 63 73 28 36 30 20 2a  ::from_secs(60 *
2ec0: 20 36 30 20 2a 20 33 29 29 3b 0a 09 09 09 09 72   60 * 3));.....r
2ed0: 65 73 0a 09 09 09 7d 2c 0a 09 09 09 53 6f 6d 65  es....},....Some
2ee0: 28 72 65 73 29 20 3d 3e 20 72 65 73 2e 63 6c 6f  (res) => res.clo
2ef0: 6e 65 28 29 2c 0a 09 09 7d 29 0a 09 7d 0a 0a 09  ne(),...})..}...
2f00: 2f 2f 2f 20 41 64 64 73 20 66 65 65 64 20 74 6f  /// Adds feed to
2f10: 20 63 61 63 68 65 64 20 6c 69 73 74 0a 09 70 75   cached list..pu
2f20: 62 20 61 73 79 6e 63 20 66 6e 20 61 64 64 5f 66  b async fn add_f
2f30: 65 65 64 20 28 26 73 65 6c 66 2c 20 6f 77 6e 65  eed (&self, owne
2f40: 72 3a 20 69 36 34 2c 20 73 6f 75 72 63 65 5f 69  r: i64, source_i
2f50: 64 3a 20 69 33 32 2c 20 63 68 61 6e 6e 65 6c 3a  d: i32, channel:
2f60: 20 53 74 72 69 6e 67 29 20 2d 3e 20 52 65 73 75   String) -> Resu
2f70: 6c 74 3c 28 29 3e 20 7b 0a 09 09 6c 65 74 20 6d  lt<()> {...let m
2f80: 75 74 20 69 6e 73 65 72 74 65 64 20 3d 20 74 72  ut inserted = tr
2f90: 75 65 3b 0a 09 09 7b 0a 09 09 09 6c 65 74 20 6d  ue;...{....let m
2fa0: 75 74 20 66 65 65 64 73 20 3d 20 73 65 6c 66 2e  ut feeds = self.
2fb0: 66 65 65 64 73 2e 6c 6f 63 6b 5f 61 72 63 28 29  feeds.lock_arc()
2fc0: 2e 61 77 61 69 74 3b 0a 09 09 09 69 66 20 6c 65  .await;....if le
2fd0: 74 20 53 6f 6d 65 28 66 65 65 64 29 20 3d 20 66  t Some(feed) = f
2fe0: 65 65 64 73 2e 67 65 74 5f 6d 75 74 28 26 6f 77  eeds.get_mut(&ow
2ff0: 6e 65 72 29 20 7b 0a 09 09 09 09 6c 65 74 20 6d  ner) {.....let m
3000: 75 74 20 66 65 65 64 20 3d 20 66 65 65 64 2e 6c  ut feed = feed.l
3010: 6f 63 6b 5f 61 72 63 28 29 2e 61 77 61 69 74 3b  ock_arc().await;
3020: 0a 09 09 09 09 66 65 65 64 2e 69 6e 73 65 72 74  .....feed.insert
3030: 28 73 6f 75 72 63 65 5f 69 64 2c 20 63 68 61 6e  (source_id, chan
3040: 6e 65 6c 29 3b 0a 09 09 09 7d 20 65 6c 73 65 20  nel);....} else 
3050: 7b 0a 09 09 09 09 69 6e 73 65 72 74 65 64 20 3d  {.....inserted =
3060: 20 66 61 6c 73 65 3b 0a 09 09 09 7d 0a 09 09 7d   false;....}...}
3070: 0a 09 09 2f 2f 20 69 6e 20 63 61 73 65 20 69 6e  ...// in case in
3080: 73 65 72 74 20 66 61 69 6c 65 64 20 2d 20 77 65  sert failed - we
3090: 20 6d 69 73 73 20 74 68 65 20 65 6e 74 72 79 20   miss the entry 
30a0: 77 65 20 6e 65 65 64 65 64 20 74 6f 20 65 78 70  we needed to exp
30b0: 61 6e 64 2c 20 72 65 6c 6f 61 64 20 65 76 65 72  and, reload ever
30c0: 79 74 68 69 6e 67 20 66 72 6f 6d 0a 09 09 2f 2f  ything from...//
30d0: 20 64 61 74 61 62 61 73 65 0a 09 09 69 66 20 21   database...if !
30e0: 69 6e 73 65 72 74 65 64 20 7b 0a 09 09 09 73 65  inserted {....se
30f0: 6c 66 2e 67 65 74 5f 66 65 65 64 73 28 6f 77 6e  lf.get_feeds(own
3100: 65 72 29 2e 61 77 61 69 74 2e 73 74 61 63 6b 28  er).await.stack(
3110: 29 3f 3b 0a 09 09 7d 0a 09 09 4f 6b 28 28 29 29  )?;...}...Ok(())
3120: 0a 09 7d 0a 0a 09 2f 2f 2f 20 52 65 6d 6f 76 65  ..}.../// Remove
3130: 73 20 66 65 65 64 20 66 72 6f 6d 20 63 61 63 68  s feed from cach
3140: 65 64 20 6c 69 73 74 0a 09 70 75 62 20 61 73 79  ed list..pub asy
3150: 6e 63 20 66 6e 20 72 6d 5f 66 65 65 64 20 28 26  nc fn rm_feed (&
3160: 73 65 6c 66 2c 20 6f 77 6e 65 72 3a 20 69 36 34  self, owner: i64
3170: 2c 20 73 6f 75 72 63 65 5f 69 64 3a 20 26 69 33  , source_id: &i3
3180: 32 29 20 2d 3e 20 52 65 73 75 6c 74 3c 28 29 3e  2) -> Result<()>
3190: 20 7b 0a 09 09 6c 65 74 20 6d 75 74 20 64 72 6f   {...let mut dro
31a0: 70 70 65 64 20 3d 20 66 61 6c 73 65 3b 0a 09 09  pped = false;...
31b0: 7b 0a 09 09 09 6c 65 74 20 6d 75 74 20 66 65 65  {....let mut fee
31c0: 64 73 20 3d 20 73 65 6c 66 2e 66 65 65 64 73 2e  ds = self.feeds.
31d0: 6c 6f 63 6b 5f 61 72 63 28 29 2e 61 77 61 69 74  lock_arc().await
31e0: 3b 0a 09 09 09 69 66 20 6c 65 74 20 53 6f 6d 65  ;....if let Some
31f0: 28 66 65 65 64 29 20 3d 20 66 65 65 64 73 2e 67  (feed) = feeds.g
3200: 65 74 5f 6d 75 74 28 26 6f 77 6e 65 72 29 20 7b  et_mut(&owner) {
3210: 0a 09 09 09 09 6c 65 74 20 6d 75 74 20 66 65 65  .....let mut fee
3220: 64 20 3d 20 66 65 65 64 2e 6c 6f 63 6b 5f 61 72  d = feed.lock_ar
3230: 63 28 29 2e 61 77 61 69 74 3b 0a 09 09 09 09 66  c().await;.....f
3240: 65 65 64 2e 72 65 6d 6f 76 65 28 73 6f 75 72 63  eed.remove(sourc
3250: 65 5f 69 64 29 3b 0a 09 09 09 09 64 72 6f 70 70  e_id);.....dropp
3260: 65 64 20 3d 20 74 72 75 65 3b 0a 09 09 09 7d 0a  ed = true;....}.
3270: 09 09 7d 0a 09 09 2f 2f 20 69 6e 20 63 61 73 65  ..}...// in case
3280: 20 77 65 20 66 61 69 6c 65 64 20 74 6f 20 66 6f   we failed to fo
3290: 75 6e 64 20 66 65 65 64 20 77 65 20 6e 65 65 64  und feed we need
32a0: 20 74 6f 20 72 65 6d 6f 76 65 20 2d 20 6a 75 73   to remove - jus
32b0: 74 20 72 65 6c 6f 61 64 20 65 76 65 72 79 74 68  t reload everyth
32c0: 69 6e 67 20 66 72 6f 6d 20 64 61 74 61 62 61 73  ing from databas
32d0: 65 0a 09 09 69 66 20 21 64 72 6f 70 70 65 64 20  e...if !dropped 
32e0: 7b 0a 09 09 09 73 65 6c 66 2e 67 65 74 5f 66 65  {....self.get_fe
32f0: 65 64 73 28 6f 77 6e 65 72 29 2e 61 77 61 69 74  eds(owner).await
3300: 2e 73 74 61 63 6b 28 29 3f 3b 0a 09 09 7d 0a 09  .stack()?;...}..
3310: 09 4f 6b 28 28 29 29 0a 09 7d 0a 0a 09 70 75 62  .Ok(())..}...pub
3320: 20 61 73 79 6e 63 20 66 6e 20 63 62 20 28 26 73   async fn cb (&s
3330: 65 6c 66 2c 20 71 75 65 72 79 3a 20 26 43 61 6c  elf, query: &Cal
3340: 6c 62 61 63 6b 51 75 65 72 79 2c 20 63 62 3a 20  lbackQuery, cb: 
3350: 26 73 74 72 29 20 2d 3e 20 52 65 73 75 6c 74 3c  &str) -> Result<
3360: 28 29 3e 20 7b 0a 09 09 6c 65 74 20 63 62 3a 20  ()> {...let cb: 
3370: 43 61 6c 6c 62 61 63 6b 20 3d 20 74 6f 6d 6c 3a  Callback = toml:
3380: 3a 66 72 6f 6d 5f 73 74 72 28 63 62 29 2e 73 74  :from_str(cb).st
3390: 61 63 6b 28 29 3f 3b 0a 09 09 74 6f 64 6f 21 28  ack()?;...todo!(
33a0: 29 3b 0a 09 09 4f 6b 28 28 29 29 0a 09 7d 0a 7d  );...Ok(())..}.}
33b0: 0a 0a 69 6d 70 6c 20 55 70 64 61 74 65 48 61 6e  ..impl UpdateHan
33c0: 64 6c 65 72 20 66 6f 72 20 43 6f 72 65 20 7b 0a  dler for Core {.
33d0: 09 2f 2f 2f 20 44 69 73 70 61 74 63 68 65 73 20  ./// Dispatches 
33e0: 61 6e 20 69 6e 63 6f 6d 69 6e 67 20 54 65 6c 65  an incoming Tele
33f0: 67 72 61 6d 20 75 70 64 61 74 65 20 74 6f 20 61  gram update to a
3400: 20 6d 61 74 63 68 69 6e 67 20 63 6f 6d 6d 61 6e   matching comman
3410: 64 20 68 61 6e 64 6c 65 72 20 61 6e 64 20 72 65  d handler and re
3420: 70 6f 72 74 73 20 68 61 6e 64 6c 65 72 20 65 72  ports handler er
3430: 72 6f 72 73 20 74 6f 20 74 68 65 20 6f 72 69 67  rors to the orig
3440: 69 6e 61 74 69 6e 67 20 63 68 61 74 2e 0a 09 2f  inating chat.../
3450: 2f 2f 0a 09 2f 2f 2f 20 54 68 69 73 20 6d 65 74  //../// This met
3460: 68 6f 64 20 69 6e 73 70 65 63 74 73 20 74 68 65  hod inspects the
3470: 20 75 70 64 61 74 65 3b 20 69 66 20 69 74 20 63   update; if it c
3480: 6f 6e 74 61 69 6e 73 20 61 20 6d 65 73 73 61 67  ontains a messag
3490: 65 20 74 68 61 74 20 63 61 6e 20 62 65 20 70 61  e that can be pa
34a0: 72 73 65 64 20 61 73 20 61 20 62 6f 74 20 63 6f  rsed as a bot co
34b0: 6d 6d 61 6e 64 2c 0a 09 2f 2f 2f 20 69 74 20 65  mmand,../// it e
34c0: 78 65 63 75 74 65 73 20 74 68 65 20 63 6f 72 72  xecutes the corr
34d0: 65 73 70 6f 6e 64 69 6e 67 20 63 6f 6d 6d 61 6e  esponding comman
34e0: 64 20 68 61 6e 64 6c 65 72 2e 20 49 66 20 74 68  d handler. If th
34f0: 65 20 68 61 6e 64 6c 65 72 20 72 65 74 75 72 6e  e handler return
3500: 73 20 61 6e 20 65 72 72 6f 72 2c 20 74 68 65 20  s an error, the 
3510: 65 72 72 6f 72 20 74 65 78 74 0a 09 2f 2f 2f 20  error text../// 
3520: 69 73 20 73 65 6e 74 20 62 61 63 6b 20 74 6f 20  is sent back to 
3530: 74 68 65 20 6d 65 73 73 61 67 65 27 73 20 63 68  the message's ch
3540: 61 74 20 75 73 69 6e 67 20 4d 61 72 6b 64 6f 77  at using Markdow
3550: 6e 56 32 20 66 6f 72 6d 61 74 74 69 6e 67 2e 20  nV2 formatting. 
3560: 55 6e 6b 6e 6f 77 6e 20 63 6f 6d 6d 61 6e 64 73  Unknown commands
3570: 20 70 72 6f 64 75 63 65 20 61 6e 20 65 72 72 6f   produce an erro
3580: 72 0a 09 2f 2f 2f 20 77 68 69 63 68 20 69 73 20  r../// which is 
3590: 61 6c 73 6f 20 72 65 70 6f 72 74 65 64 20 74 6f  also reported to
35a0: 20 74 68 65 20 63 68 61 74 2e 0a 09 61 73 79 6e   the chat...asyn
35b0: 63 20 66 6e 20 68 61 6e 64 6c 65 20 28 26 73 65  c fn handle (&se
35c0: 6c 66 2c 20 75 70 64 61 74 65 3a 20 55 70 64 61  lf, update: Upda
35d0: 74 65 29 20 2d 3e 20 28 29 20 7b 0a 09 09 6d 61  te) -> () {...ma
35e0: 74 63 68 20 75 70 64 61 74 65 2e 75 70 64 61 74  tch update.updat
35f0: 65 5f 74 79 70 65 20 7b 0a 09 09 09 55 70 64 61  e_type {....Upda
3600: 74 65 54 79 70 65 3a 3a 4d 65 73 73 61 67 65 28  teType::Message(
3610: 6d 73 67 29 20 3d 3e 20 7b 0a 09 09 09 09 69 66  msg) => {.....if
3620: 20 6c 65 74 20 4f 6b 28 63 6d 64 29 20 3d 20 43   let Ok(cmd) = C
3630: 6f 6d 6d 61 6e 64 3a 3a 74 72 79 5f 66 72 6f 6d  ommand::try_from
3640: 28 2a 6d 73 67 29 20 7b 0a 09 09 09 09 09 6c 65  (*msg) {......le
3650: 74 20 6d 73 67 20 3d 20 63 6d 64 2e 67 65 74 5f  t msg = cmd.get_
3660: 6d 65 73 73 61 67 65 28 29 3b 0a 09 09 09 09 09  message();......
3670: 6c 65 74 20 77 6f 72 64 73 20 3d 20 63 6d 64 2e  let words = cmd.
3680: 67 65 74 5f 61 72 67 73 28 29 3b 0a 09 09 09 09  get_args();.....
3690: 09 6c 65 74 20 63 6f 6d 6d 61 6e 64 20 3d 20 63  .let command = c
36a0: 6d 64 2e 67 65 74 5f 6e 61 6d 65 28 29 3b 0a 09  md.get_name();..
36b0: 09 09 09 09 6c 65 74 20 72 65 73 20 3d 20 6d 61  ....let res = ma
36c0: 74 63 68 20 63 6f 6d 6d 61 6e 64 20 7b 0a 09 09  tch command {...
36d0: 09 09 09 09 22 2f 63 68 65 63 6b 22 20 7c 20 22  ...."/check" | "
36e0: 2f 63 6c 65 61 6e 22 20 7c 20 22 2f 65 6e 61 62  /clean" | "/enab
36f0: 6c 65 22 20 7c 20 22 2f 64 65 6c 65 74 65 22 20  le" | "/delete" 
3700: 7c 20 22 2f 64 69 73 61 62 6c 65 22 20 3d 3e 20  | "/disable" => 
3710: 63 6f 6d 6d 61 6e 64 3a 3a 63 6f 6d 6d 61 6e 64  command::command
3720: 28 73 65 6c 66 2c 20 63 6f 6d 6d 61 6e 64 2c 20  (self, command, 
3730: 6d 73 67 2c 20 77 6f 72 64 73 29 2e 61 77 61 69  msg, words).awai
3740: 74 2c 0a 09 09 09 09 09 09 22 2f 73 74 61 72 74  t,......."/start
3750: 22 20 3d 3e 20 63 6f 6d 6d 61 6e 64 3a 3a 73 74  " => command::st
3760: 61 72 74 28 73 65 6c 66 2c 20 6d 73 67 29 2e 61  art(self, msg).a
3770: 77 61 69 74 2c 0a 09 09 09 09 09 09 22 2f 6c 69  wait,......."/li
3780: 73 74 22 20 3d 3e 20 63 6f 6d 6d 61 6e 64 3a 3a  st" => command::
3790: 6c 69 73 74 28 73 65 6c 66 2c 20 6d 73 67 29 2e  list(self, msg).
37a0: 61 77 61 69 74 2c 0a 09 09 09 09 09 09 22 2f 74  await,......."/t
37b0: 65 73 74 22 20 3d 3e 20 63 6f 6d 6d 61 6e 64 3a  est" => command:
37c0: 3a 74 65 73 74 28 73 65 6c 66 2c 20 6d 73 67 29  :test(self, msg)
37d0: 2e 61 77 61 69 74 2c 0a 09 09 09 09 09 09 22 2f  .await,......."/
37e0: 61 64 64 22 20 7c 20 22 2f 75 70 64 61 74 65 22  add" | "/update"
37f0: 20 3d 3e 20 63 6f 6d 6d 61 6e 64 3a 3a 75 70 64   => command::upd
3800: 61 74 65 28 73 65 6c 66 2c 20 63 6f 6d 6d 61 6e  ate(self, comman
3810: 64 2c 20 6d 73 67 2c 20 77 6f 72 64 73 29 2e 61  d, msg, words).a
3820: 77 61 69 74 2c 0a 09 09 09 09 09 09 61 6e 79 20  wait,.......any 
3830: 3d 3e 20 45 72 72 28 61 6e 79 68 6f 77 21 28 22  => Err(anyhow!("
3840: 55 6e 6b 6e 6f 77 6e 20 63 6f 6d 6d 61 6e 64 3a  Unknown command:
3850: 20 7b 61 6e 79 7d 22 29 29 2c 0a 09 09 09 09 09   {any}")),......
3860: 7d 3b 0a 09 09 09 09 09 69 66 20 6c 65 74 20 45  };......if let E
3870: 72 72 28 65 72 72 29 20 3d 20 72 65 73 20 0a 09  rr(err) = res ..
3880: 09 09 09 09 09 26 26 20 6c 65 74 20 45 72 72 28  .....&& let Err(
3890: 65 72 72 32 29 20 3d 20 73 65 6c 66 2e 74 67 2e  err2) = self.tg.
38a0: 73 65 6e 64 28 4d 79 4d 65 73 73 61 67 65 3a 3a  send(MyMessage::
38b0: 68 74 6d 6c 5f 74 6f 28 0a 09 09 09 09 09 09 09  html_to(........
38c0: 66 6f 72 6d 61 74 21 28 22 23 65 72 72 6f 72 3c  format!("#error<
38d0: 70 72 65 3e 7b 65 72 72 7d 3c 2f 70 72 65 3e 22  pre>{err}</pre>"
38e0: 29 2c 0a 09 09 09 09 09 09 09 6d 73 67 2e 63 68  ),........msg.ch
38f0: 61 74 2e 67 65 74 5f 69 64 28 29 2c 0a 09 09 09  at.get_id(),....
3900: 09 09 09 29 29 2e 61 77 61 69 74 0a 09 09 09 09  ...)).await.....
3910: 09 7b 0a 09 09 09 09 09 09 64 62 67 21 28 65 72  .{.......dbg!(er
3920: 72 32 29 3b 0a 09 09 09 09 09 7d 0a 09 09 09 09  r2);......}.....
3930: 7d 20 65 6c 73 65 20 7b 0a 09 09 09 09 09 2f 2f  } else {......//
3940: 20 6e 6f 74 20 61 20 63 6f 6d 6d 61 6e 64 0a 09   not a command..
3950: 09 09 09 7d 0a 09 09 09 7d 2c 0a 09 09 09 55 70  ...}....},....Up
3960: 64 61 74 65 54 79 70 65 3a 3a 43 61 6c 6c 62 61  dateType::Callba
3970: 63 6b 51 75 65 72 79 28 71 75 65 72 79 29 20 3d  ckQuery(query) =
3980: 3e 20 7b 0a 09 09 09 09 69 66 20 6c 65 74 20 53  > {.....if let S
3990: 6f 6d 65 28 72 65 66 20 63 62 29 20 3d 20 71 75  ome(ref cb) = qu
39a0: 65 72 79 2e 64 61 74 61 0a 09 09 09 09 09 26 26  ery.data......&&
39b0: 20 6c 65 74 20 45 72 72 28 65 72 72 29 20 3d 20   let Err(err) = 
39c0: 73 65 6c 66 2e 63 62 28 26 71 75 65 72 79 2c 20  self.cb(&query, 
39d0: 63 62 29 2e 61 77 61 69 74 0a 09 09 09 09 7b 0a  cb).await.....{.
39e0: 09 09 09 09 09 69 66 20 6c 65 74 20 45 72 72 28  .....if let Err(
39f0: 65 72 72 29 20 3d 20 73 65 6c 66 2e 74 67 2e 61  err) = self.tg.a
3a00: 6e 73 77 65 72 5f 63 62 28 71 75 65 72 79 2e 69  nswer_cb(query.i
3a10: 64 2c 20 65 72 72 2e 74 6f 5f 73 74 72 69 6e 67  d, err.to_string
3a20: 28 29 29 2e 61 77 61 69 74 20 7b 0a 09 09 09 09  ()).await {.....
3a30: 09 09 70 72 69 6e 74 6c 6e 21 28 22 7b 65 72 72  ..println!("{err
3a40: 3a 3f 7d 22 29 3b 0a 09 09 09 09 09 7d 0a 09 09  :?}");......}...
3a50: 09 09 7d 0a 09 09 09 7d 2c 0a 09 09 09 5f 20 3d  ..}....},...._ =
3a60: 3e 20 7b 0a 09 09 09 09 70 72 69 6e 74 6c 6e 21  > {.....println!
3a70: 28 22 55 6e 68 61 6e 64 6c 65 64 20 55 70 64 61  ("Unhandled Upda
3a80: 74 65 4b 69 6e 64 3a 5c 6e 7b 75 70 64 61 74 65  teKind:\n{update
3a90: 3a 3f 7d 22 29 0a 09 09 09 7d 2c 0a 09 09 7d 0a  :?}")....},...}.
3aa0: 09 7d 0a 7d 0a                                   .}.}.