server/initializers/constants.ts

   1 import { join } from 'path'
   2 import { JobType, VideoRateType, VideoResolution, VideoState } from '../../shared/models'
   3 import { ActivityPubActorType } from '../../shared/models/activitypub'
   4 import { FollowState } from '../../shared/models/actors'
   5 import { VideoAbuseState, VideoImportState, VideoPrivacy, VideoTranscodingFPS } from '../../shared/models/videos'
   6 // Do not use barrels, remain constants as independent as possible
   7 import { isTestInstance, sanitizeHost, sanitizeUrl, root } from '../helpers/core-utils'
   8 import { NSFWPolicyType } from '../../shared/models/videos/nsfw-policy.type'
   9 import { invert } from 'lodash'
  10 import { CronRepeatOptions, EveryRepeatOptions } from 'bull'
  11 import { VideoPlaylistPrivacy } from '../../shared/models/videos/playlist/video-playlist-privacy.model'
  12 import { VideoPlaylistType } from '../../shared/models/videos/playlist/video-playlist-type.model'
  13 import { CONFIG, registerConfigChangedHandler } from './config'
  14
  15 // ---------------------------------------------------------------------------
  16
  17 const LAST_MIGRATION_VERSION = 400
  18
  19 // ---------------------------------------------------------------------------
  20
  21 // API version
  22 const API_VERSION = 'v1'
  23
  24 const PAGINATION = {
  25   COUNT: {
  26     DEFAULT: 15,
  27     MAX: 100
  28   }
  29 }
  30
  31 const WEBSERVER = {
  32   URL: '',
  33   HOST: '',
  34   SCHEME: '',
  35   WS: '',
  36   HOSTNAME: '',
  37   PORT: 0
  38 }
  39
  40 // Sortable columns per schema
  41 const SORTABLE_COLUMNS = {
  42   USERS: [ 'id', 'username', 'createdAt' ],
  43   USER_SUBSCRIPTIONS: [ 'id', 'createdAt' ],
  44   ACCOUNTS: [ 'createdAt' ],
  45   JOBS: [ 'createdAt' ],
  46   VIDEO_ABUSES: [ 'id', 'createdAt', 'state' ],
  47   VIDEO_CHANNELS: [ 'id', 'name', 'updatedAt', 'createdAt' ],
  48   VIDEO_IMPORTS: [ 'createdAt' ],
  49   VIDEO_COMMENT_THREADS: [ 'createdAt' ],
  50   VIDEO_RATES: [ 'createdAt' ],
  51   BLACKLISTS: [ 'id', 'name', 'duration', 'views', 'likes', 'dislikes', 'uuid', 'createdAt' ],
  52   FOLLOWERS: [ 'createdAt' ],
  53   FOLLOWING: [ 'createdAt' ],
  54
  55   VIDEOS: [ 'name', 'duration', 'createdAt', 'publishedAt', 'views', 'likes', 'trending' ],
  56
  57   VIDEOS_SEARCH: [ 'name', 'duration', 'createdAt', 'publishedAt', 'views', 'likes', 'match' ],
  58   VIDEO_CHANNELS_SEARCH: [ 'match', 'displayName', 'createdAt' ],
  59
  60   ACCOUNTS_BLOCKLIST: [ 'createdAt' ],
  61   SERVERS_BLOCKLIST: [ 'createdAt' ],
  62
  63   USER_NOTIFICATIONS: [ 'createdAt' ],
  64
  65   VIDEO_PLAYLISTS: [ 'displayName', 'createdAt', 'updatedAt' ],
  66
  67   PLUGINS: [ 'name', 'createdAt', 'updatedAt' ]
  68 }
  69
  70 const OAUTH_LIFETIME = {
  71   ACCESS_TOKEN: 3600 * 24, // 1 day, for upload
  72   REFRESH_TOKEN: 1209600 // 2 weeks
  73 }
  74
  75 const ROUTE_CACHE_LIFETIME = {
  76   FEEDS: '15 minutes',
  77   ROBOTS: '2 hours',
  78   SITEMAP: '1 day',
  79   SECURITYTXT: '2 hours',
  80   NODEINFO: '10 minutes',
  81   DNT_POLICY: '1 week',
  82   OVERVIEWS: {
  83     VIDEOS: '1 hour'
  84   },
  85   ACTIVITY_PUB: {
  86     VIDEOS: '1 second' // 1 second, cache concurrent requests after a broadcast for example
  87   },
  88   STATS: '4 hours'
  89 }
  90
  91 // ---------------------------------------------------------------------------
  92
  93 // Number of points we add/remove after a successful/bad request
  94 const ACTOR_FOLLOW_SCORE = {
  95   PENALTY: -10,
  96   BONUS: 10,
  97   BASE: 1000,
  98   MAX: 10000
  99 }
 100
 101 const FOLLOW_STATES: { [ id: string ]: FollowState } = {
 102   PENDING: 'pending',
 103   ACCEPTED: 'accepted'
 104 }
 105
 106 const REMOTE_SCHEME = {
 107   HTTP: 'https',
 108   WS: 'wss'
 109 }
 110
 111 // TODO: remove 'video-file'
 112 const JOB_ATTEMPTS: { [id in (JobType | 'video-file')]: number } = {
 113   'activitypub-http-broadcast': 5,
 114   'activitypub-http-unicast': 5,
 115   'activitypub-http-fetcher': 5,
 116   'activitypub-follow': 5,
 117   'video-file-import': 1,
 118   'video-transcoding': 1,
 119   'video-file': 1,
 120   'video-import': 1,
 121   'email': 5,
 122   'videos-views': 1,
 123   'activitypub-refresher': 1
 124 }
 125 const JOB_CONCURRENCY: { [id in (JobType | 'video-file')]: number } = {
 126   'activitypub-http-broadcast': 1,
 127   'activitypub-http-unicast': 5,
 128   'activitypub-http-fetcher': 1,
 129   'activitypub-follow': 3,
 130   'video-file-import': 1,
 131   'video-transcoding': 1,
 132   'video-file': 1,
 133   'video-import': 1,
 134   'email': 5,
 135   'videos-views': 1,
 136   'activitypub-refresher': 1
 137 }
 138 const JOB_TTL: { [id in (JobType | 'video-file')]: number } = {
 139   'activitypub-http-broadcast': 60000 * 10, // 10 minutes
 140   'activitypub-http-unicast': 60000 * 10, // 10 minutes
 141   'activitypub-http-fetcher': 60000 * 10, // 10 minutes
 142   'activitypub-follow': 60000 * 10, // 10 minutes
 143   'video-file-import': 1000 * 3600, // 1 hour
 144   'video-transcoding': 1000 * 3600 * 48, // 2 days, transcoding could be long
 145   'video-file': 1000 * 3600 * 48, // 2 days, transcoding could be long
 146   'video-import': 1000 * 3600 * 2, //  hours
 147   'email': 60000 * 10, // 10 minutes
 148   'videos-views': undefined, // Unlimited
 149   'activitypub-refresher': 60000 * 10 // 10 minutes
 150 }
 151 const REPEAT_JOBS: { [ id: string ]: EveryRepeatOptions | CronRepeatOptions } = {
 152   'videos-views': {
 153     cron: '1 * * * *' // At 1 minute past the hour
 154   }
 155 }
 156
 157 const BROADCAST_CONCURRENCY = 10 // How many requests in parallel we do in activitypub-http-broadcast job
 158 const CRAWL_REQUEST_CONCURRENCY = 1 // How many requests in parallel to fetch remote data (likes, shares...)
 159 const JOB_REQUEST_TIMEOUT = 3000 // 3 seconds
 160 const JOB_COMPLETED_LIFETIME = 60000 * 60 * 24 * 2 // 2 days
 161 const VIDEO_IMPORT_TIMEOUT = 1000 * 3600 // 1 hour
 162
 163 const SCHEDULER_INTERVALS_MS = {
 164   actorFollowScores: 60000 * 60, // 1 hour
 165   removeOldJobs: 60000 * 60, // 1 hour
 166   updateVideos: 60000, // 1 minute
 167   youtubeDLUpdate: 60000 * 60 * 24, // 1 day
 168   removeOldViews: 60000 * 60 * 24, // 1 day
 169   removeOldHistory: 60000 * 60 * 24 // 1 day
 170 }
 171
 172 // ---------------------------------------------------------------------------
 173
 174 let CONSTRAINTS_FIELDS = {
 175   USERS: {
 176     NAME: { min: 1, max: 120 }, // Length
 177     DESCRIPTION: { min: 3, max: 1000 }, // Length
 178     USERNAME: { min: 1, max: 50 }, // Length
 179     PASSWORD: { min: 6, max: 255 }, // Length
 180     VIDEO_QUOTA: { min: -1 },
 181     VIDEO_QUOTA_DAILY: { min: -1 },
 182     VIDEO_LANGUAGES: { max: 500 }, // Array length
 183     BLOCKED_REASON: { min: 3, max: 250 } // Length
 184   },
 185   VIDEO_ABUSES: {
 186     REASON: { min: 2, max: 3000 }, // Length
 187     MODERATION_COMMENT: { min: 2, max: 3000 } // Length
 188   },
 189   VIDEO_BLACKLIST: {
 190     REASON: { min: 2, max: 300 } // Length
 191   },
 192   VIDEO_CHANNELS: {
 193     NAME: { min: 1, max: 120 }, // Length
 194     DESCRIPTION: { min: 3, max: 1000 }, // Length
 195     SUPPORT: { min: 3, max: 1000 }, // Length
 196     URL: { min: 3, max: 2000 } // Length
 197   },
 198   VIDEO_CAPTIONS: {
 199     CAPTION_FILE: {
 200       EXTNAME: [ '.vtt', '.srt' ],
 201       FILE_SIZE: {
 202         max: 2 * 1024 * 1024 // 2MB
 203       }
 204     }
 205   },
 206   VIDEO_IMPORTS: {
 207     URL: { min: 3, max: 2000 }, // Length
 208     TORRENT_NAME: { min: 3, max: 255 }, // Length
 209     TORRENT_FILE: {
 210       EXTNAME: [ '.torrent' ],
 211       FILE_SIZE: {
 212         max: 1024 * 200 // 200 KB
 213       }
 214     }
 215   },
 216   VIDEOS_REDUNDANCY: {
 217     URL: { min: 3, max: 2000 } // Length
 218   },
 219   VIDEO_RATES: {
 220     URL: { min: 3, max: 2000 } // Length
 221   },
 222   VIDEOS: {
 223     NAME: { min: 3, max: 120 }, // Length
 224     LANGUAGE: { min: 1, max: 10 }, // Length
 225     TRUNCATED_DESCRIPTION: { min: 3, max: 250 }, // Length
 226     DESCRIPTION: { min: 3, max: 10000 }, // Length
 227     SUPPORT: { min: 3, max: 1000 }, // Length
 228     IMAGE: {
 229       EXTNAME: [ '.jpg', '.jpeg' ],
 230       FILE_SIZE: {
 231         max: 2 * 1024 * 1024 // 2MB
 232       }
 233     },
 234     EXTNAME: [] as string[],
 235     INFO_HASH: { min: 40, max: 40 }, // Length, info hash is 20 bytes length but we represent it in hexadecimal so 20 * 2
 236     DURATION: { min: 0 }, // Number
 237     TAGS: { min: 0, max: 5 }, // Number of total tags
 238     TAG: { min: 2, max: 30 }, // Length
 239     THUMBNAIL: { min: 2, max: 30 },
 240     THUMBNAIL_DATA: { min: 0, max: 20000 }, // Bytes
 241     VIEWS: { min: 0 },
 242     LIKES: { min: 0 },
 243     DISLIKES: { min: 0 },
 244     FILE_SIZE: { min: 10 },
 245     URL: { min: 3, max: 2000 } // Length
 246   },
 247   VIDEO_PLAYLISTS: {
 248     NAME: { min: 1, max: 120 }, // Length
 249     DESCRIPTION: { min: 3, max: 1000 }, // Length
 250     URL: { min: 3, max: 2000 }, // Length
 251     IMAGE: {
 252       EXTNAME: [ '.jpg', '.jpeg' ],
 253       FILE_SIZE: {
 254         max: 2 * 1024 * 1024 // 2MB
 255       }
 256     }
 257   },
 258   ACTORS: {
 259     PUBLIC_KEY: { min: 10, max: 5000 }, // Length
 260     PRIVATE_KEY: { min: 10, max: 5000 }, // Length
 261     URL: { min: 3, max: 2000 }, // Length
 262     AVATAR: {
 263       EXTNAME: [ '.png', '.jpeg', '.jpg' ],
 264       FILE_SIZE: {
 265         max: 2 * 1024 * 1024 // 2MB
 266       }
 267     }
 268   },
 269   VIDEO_EVENTS: {
 270     COUNT: { min: 0 }
 271   },
 272   VIDEO_COMMENTS: {
 273     TEXT: { min: 1, max: 3000 }, // Length
 274     URL: { min: 3, max: 2000 } // Length
 275   },
 276   VIDEO_SHARE: {
 277     URL: { min: 3, max: 2000 } // Length
 278   },
 279   CONTACT_FORM: {
 280     FROM_NAME: { min: 1, max: 120 }, // Length
 281     BODY: { min: 3, max: 5000 } // Length
 282   },
 283   PLUGINS: {
 284     NAME: { min: 1, max: 214 }, // Length
 285     DESCRIPTION: { min: 1, max: 20000 } // Length
 286   }
 287 }
 288
 289 let VIDEO_VIEW_LIFETIME = 60000 * 60 // 1 hour
 290 let CONTACT_FORM_LIFETIME = 60000 * 60 // 1 hour
 291
 292 const VIDEO_TRANSCODING_FPS: VideoTranscodingFPS = {
 293   MIN: 10,
 294   AVERAGE: 30,
 295   MAX: 60,
 296   KEEP_ORIGIN_FPS_RESOLUTION_MIN: 720 // We keep the original FPS on high resolutions (720 minimum)
 297 }
 298
 299 const DEFAULT_AUDIO_RESOLUTION = VideoResolution.H_480P
 300
 301 const VIDEO_RATE_TYPES: { [ id: string ]: VideoRateType } = {
 302   LIKE: 'like',
 303   DISLIKE: 'dislike'
 304 }
 305
 306 const FFMPEG_NICE: { [ id: string ]: number } = {
 307   THUMBNAIL: 2, // 2 just for don't blocking servers
 308   TRANSCODING: 15
 309 }
 310
 311 const VIDEO_CATEGORIES = {
 312   1: 'Music',
 313   2: 'Films',
 314   3: 'Vehicles',
 315   4: 'Art',
 316   5: 'Sports',
 317   6: 'Travels',
 318   7: 'Gaming',
 319   8: 'People',
 320   9: 'Comedy',
 321   10: 'Entertainment',
 322   11: 'News & Politics',
 323   12: 'How To',
 324   13: 'Education',
 325   14: 'Activism',
 326   15: 'Science & Technology',
 327   16: 'Animals',
 328   17: 'Kids',
 329   18: 'Food'
 330 }
 331
 332 // See https://creativecommons.org/licenses/?lang=en
 333 const VIDEO_LICENCES = {
 334   1: 'Attribution',
 335   2: 'Attribution - Share Alike',
 336   3: 'Attribution - No Derivatives',
 337   4: 'Attribution - Non Commercial',
 338   5: 'Attribution - Non Commercial - Share Alike',
 339   6: 'Attribution - Non Commercial - No Derivatives',
 340   7: 'Public Domain Dedication'
 341 }
 342
 343 let VIDEO_LANGUAGES: { [id: string]: string } = {}
 344
 345 const VIDEO_PRIVACIES = {
 346   [ VideoPrivacy.PUBLIC ]: 'Public',
 347   [ VideoPrivacy.UNLISTED ]: 'Unlisted',
 348   [ VideoPrivacy.PRIVATE ]: 'Private'
 349 }
 350
 351 const VIDEO_STATES = {
 352   [ VideoState.PUBLISHED ]: 'Published',
 353   [ VideoState.TO_TRANSCODE ]: 'To transcode',
 354   [ VideoState.TO_IMPORT ]: 'To import'
 355 }
 356
 357 const VIDEO_IMPORT_STATES = {
 358   [ VideoImportState.FAILED ]: 'Failed',
 359   [ VideoImportState.PENDING ]: 'Pending',
 360   [ VideoImportState.SUCCESS ]: 'Success'
 361 }
 362
 363 const VIDEO_ABUSE_STATES = {
 364   [ VideoAbuseState.PENDING ]: 'Pending',
 365   [ VideoAbuseState.REJECTED ]: 'Rejected',
 366   [ VideoAbuseState.ACCEPTED ]: 'Accepted'
 367 }
 368
 369 const VIDEO_PLAYLIST_PRIVACIES = {
 370   [ VideoPlaylistPrivacy.PUBLIC ]: 'Public',
 371   [ VideoPlaylistPrivacy.UNLISTED ]: 'Unlisted',
 372   [ VideoPlaylistPrivacy.PRIVATE ]: 'Private'
 373 }
 374
 375 const VIDEO_PLAYLIST_TYPES = {
 376   [ VideoPlaylistType.REGULAR ]: 'Regular',
 377   [ VideoPlaylistType.WATCH_LATER ]: 'Watch later'
 378 }
 379
 380 const MIMETYPES = {
 381   AUDIO: {
 382     MIMETYPE_EXT: {
 383       'audio/mpeg': '.mp3',
 384       'audio/mp3': '.mp3',
 385       'application/ogg': '.ogg',
 386       'audio/ogg': '.ogg',
 387       'audio/flac': '.flac'
 388     },
 389     EXT_MIMETYPE: null as { [ id: string ]: string }
 390   },
 391   VIDEO: {
 392     MIMETYPE_EXT: null as { [ id: string ]: string },
 393     EXT_MIMETYPE: null as { [ id: string ]: string }
 394   },
 395   IMAGE: {
 396     MIMETYPE_EXT: {
 397       'image/png': '.png',
 398       'image/jpg': '.jpg',
 399       'image/jpeg': '.jpg'
 400     }
 401   },
 402   VIDEO_CAPTIONS: {
 403     MIMETYPE_EXT: {
 404       'text/vtt': '.vtt',
 405       'application/x-subrip': '.srt'
 406     }
 407   },
 408   TORRENT: {
 409     MIMETYPE_EXT: {
 410       'application/x-bittorrent': '.torrent'
 411     }
 412   }
 413 }
 414 MIMETYPES.AUDIO.EXT_MIMETYPE = invert(MIMETYPES.AUDIO.MIMETYPE_EXT)
 415
 416 // ---------------------------------------------------------------------------
 417
 418 const OVERVIEWS = {
 419   VIDEOS: {
 420     SAMPLE_THRESHOLD: 6,
 421     SAMPLES_COUNT: 2
 422   }
 423 }
 424
 425 // ---------------------------------------------------------------------------
 426
 427 const SERVER_ACTOR_NAME = 'peertube'
 428
 429 const ACTIVITY_PUB = {
 430   POTENTIAL_ACCEPT_HEADERS: [
 431     'application/activity+json',
 432     'application/ld+json',
 433     'application/ld+json; profile="https://www.w3.org/ns/activitystreams"'
 434   ],
 435   ACCEPT_HEADER: 'application/activity+json, application/ld+json',
 436   PUBLIC: 'https://www.w3.org/ns/activitystreams#Public',
 437   COLLECTION_ITEMS_PER_PAGE: 10,
 438   FETCH_PAGE_LIMIT: 100,
 439   URL_MIME_TYPES: {
 440     VIDEO: [] as string[],
 441     TORRENT: [ 'application/x-bittorrent' ],
 442     MAGNET: [ 'application/x-bittorrent;x-scheme-handler/magnet' ]
 443   },
 444   MAX_RECURSION_COMMENTS: 100,
 445   ACTOR_REFRESH_INTERVAL: 3600 * 24 * 1000 * 2, // 2 days
 446   VIDEO_REFRESH_INTERVAL: 3600 * 24 * 1000 * 2, // 2 days
 447   VIDEO_PLAYLIST_REFRESH_INTERVAL: 3600 * 24 * 1000 * 2 // 2 days
 448 }
 449
 450 const ACTIVITY_PUB_ACTOR_TYPES: { [ id: string ]: ActivityPubActorType } = {
 451   GROUP: 'Group',
 452   PERSON: 'Person',
 453   APPLICATION: 'Application'
 454 }
 455
 456 const HTTP_SIGNATURE = {
 457   HEADER_NAME: 'signature',
 458   ALGORITHM: 'rsa-sha256',
 459   HEADERS_TO_SIGN: [ '(request-target)', 'host', 'date', 'digest' ]
 460 }
 461
 462 // ---------------------------------------------------------------------------
 463
 464 let PRIVATE_RSA_KEY_SIZE = 2048
 465
 466 // Password encryption
 467 const BCRYPT_SALT_SIZE = 10
 468
 469 const USER_PASSWORD_RESET_LIFETIME = 60000 * 5 // 5 minutes
 470
 471 const USER_EMAIL_VERIFY_LIFETIME = 60000 * 60 // 60 minutes
 472
 473 const NSFW_POLICY_TYPES: { [ id: string ]: NSFWPolicyType } = {
 474   DO_NOT_LIST: 'do_not_list',
 475   BLUR: 'blur',
 476   DISPLAY: 'display'
 477 }
 478
 479 // ---------------------------------------------------------------------------
 480
 481 // Express static paths (router)
 482 const STATIC_PATHS = {
 483   PREVIEWS: '/static/previews/',
 484   THUMBNAILS: '/static/thumbnails/',
 485   TORRENTS: '/static/torrents/',
 486   WEBSEED: '/static/webseed/',
 487   REDUNDANCY: '/static/redundancy/',
 488   STREAMING_PLAYLISTS: {
 489     HLS: '/static/streaming-playlists/hls'
 490   },
 491   AVATARS: '/static/avatars/',
 492   VIDEO_CAPTIONS: '/static/video-captions/'
 493 }
 494 const STATIC_DOWNLOAD_PATHS = {
 495   TORRENTS: '/download/torrents/',
 496   VIDEOS: '/download/videos/'
 497 }
 498
 499 // Cache control
 500 let STATIC_MAX_AGE = '2h'
 501
 502 // Videos thumbnail size
 503 const THUMBNAILS_SIZE = {
 504   width: 223,
 505   height: 122
 506 }
 507 const PREVIEWS_SIZE = {
 508   width: 850,
 509   height: 480
 510 }
 511 const AVATARS_SIZE = {
 512   width: 120,
 513   height: 120
 514 }
 515
 516 const EMBED_SIZE = {
 517   width: 560,
 518   height: 315
 519 }
 520
 521 // Sub folders of cache directory
 522 const FILES_CACHE = {
 523   PREVIEWS: {
 524     DIRECTORY: join(CONFIG.STORAGE.CACHE_DIR, 'previews'),
 525     MAX_AGE: 1000 * 3600 * 3 // 3 hours
 526   },
 527   VIDEO_CAPTIONS: {
 528     DIRECTORY: join(CONFIG.STORAGE.CACHE_DIR, 'video-captions'),
 529     MAX_AGE: 1000 * 3600 * 3 // 3 hours
 530   }
 531 }
 532
 533 const CACHE = {
 534   USER_TOKENS: {
 535     MAX_SIZE: 10000
 536   }
 537 }
 538
 539 const HLS_STREAMING_PLAYLIST_DIRECTORY = join(CONFIG.STORAGE.STREAMING_PLAYLISTS_DIR, 'hls')
 540 const HLS_REDUNDANCY_DIRECTORY = join(CONFIG.STORAGE.REDUNDANCY_DIR, 'hls')
 541
 542 const MEMOIZE_TTL = {
 543   OVERVIEWS_SAMPLE: 1000 * 3600 * 4 // 4 hours
 544 }
 545
 546 const REDUNDANCY = {
 547   VIDEOS: {
 548     RANDOMIZED_FACTOR: 5
 549   }
 550 }
 551
 552 const ACCEPT_HEADERS = [ 'html', 'application/json' ].concat(ACTIVITY_PUB.POTENTIAL_ACCEPT_HEADERS)
 553
 554 const ASSETS_PATH = {
 555   DEFAULT_AUDIO_BACKGROUND: join(root(), 'server', 'assets', 'default-audio-background.jpg')
 556 }
 557
 558 // ---------------------------------------------------------------------------
 559
 560 const CUSTOM_HTML_TAG_COMMENTS = {
 561   TITLE: '<!-- title tag -->',
 562   DESCRIPTION: '<!-- description tag -->',
 563   CUSTOM_CSS: '<!-- custom css tag -->',
 564   META_TAGS: '<!-- meta tags -->'
 565 }
 566
 567 // ---------------------------------------------------------------------------
 568
 569 const FEEDS = {
 570   COUNT: 20
 571 }
 572
 573 const MAX_LOGS_OUTPUT_CHARACTERS = 10 * 1000 * 1000
 574
 575 // ---------------------------------------------------------------------------
 576
 577 const TRACKER_RATE_LIMITS = {
 578   INTERVAL: 60000 * 5, // 5 minutes
 579   ANNOUNCES_PER_IP_PER_INFOHASH: 15, // maximum announces per torrent in the interval
 580   ANNOUNCES_PER_IP: 30 // maximum announces for all our torrents in the interval
 581 }
 582
 583 const P2P_MEDIA_LOADER_PEER_VERSION = 2
 584
 585 // ---------------------------------------------------------------------------
 586
 587 const PLUGIN_GLOBAL_CSS_FILE_NAME = 'plugins-global.css'
 588 const PLUGIN_GLOBAL_CSS_PATH = join(CONFIG.STORAGE.TMP_DIR, PLUGIN_GLOBAL_CSS_FILE_NAME)
 589
 590 const DEFAULT_THEME_NAME = 'default'
 591 const DEFAULT_USER_THEME_NAME = 'instance-default'
 592
 593 // ---------------------------------------------------------------------------
 594
 595 // Special constants for a test instance
 596 if (isTestInstance() === true) {
 597   PRIVATE_RSA_KEY_SIZE = 1024
 598
 599   ACTOR_FOLLOW_SCORE.BASE = 20
 600
 601   REMOTE_SCHEME.HTTP = 'http'
 602   REMOTE_SCHEME.WS = 'ws'
 603
 604   STATIC_MAX_AGE = '0'
 605
 606   ACTIVITY_PUB.COLLECTION_ITEMS_PER_PAGE = 2
 607   ACTIVITY_PUB.ACTOR_REFRESH_INTERVAL = 10 * 1000 // 10 seconds
 608   ACTIVITY_PUB.VIDEO_REFRESH_INTERVAL = 10 * 1000 // 10 seconds
 609   ACTIVITY_PUB.VIDEO_PLAYLIST_REFRESH_INTERVAL = 10 * 1000 // 10 seconds
 610
 611   CONSTRAINTS_FIELDS.ACTORS.AVATAR.FILE_SIZE.max = 100 * 1024 // 100KB
 612
 613   SCHEDULER_INTERVALS_MS.actorFollowScores = 1000
 614   SCHEDULER_INTERVALS_MS.removeOldJobs = 10000
 615   SCHEDULER_INTERVALS_MS.removeOldHistory = 5000
 616   SCHEDULER_INTERVALS_MS.removeOldViews = 5000
 617   SCHEDULER_INTERVALS_MS.updateVideos = 5000
 618   REPEAT_JOBS[ 'videos-views' ] = { every: 5000 }
 619
 620   REDUNDANCY.VIDEOS.RANDOMIZED_FACTOR = 1
 621
 622   VIDEO_VIEW_LIFETIME = 1000 // 1 second
 623   CONTACT_FORM_LIFETIME = 1000 // 1 second
 624
 625   JOB_ATTEMPTS[ 'email' ] = 1
 626
 627   FILES_CACHE.VIDEO_CAPTIONS.MAX_AGE = 3000
 628   MEMOIZE_TTL.OVERVIEWS_SAMPLE = 1
 629   ROUTE_CACHE_LIFETIME.OVERVIEWS.VIDEOS = '0ms'
 630 }
 631
 632 updateWebserverUrls()
 633 updateWebserverConfig()
 634
 635 registerConfigChangedHandler(() => {
 636   updateWebserverUrls()
 637   updateWebserverConfig()
 638 })
 639
 640 // ---------------------------------------------------------------------------
 641
 642 export {
 643   WEBSERVER,
 644   API_VERSION,
 645   HLS_REDUNDANCY_DIRECTORY,
 646   P2P_MEDIA_LOADER_PEER_VERSION,
 647   AVATARS_SIZE,
 648   ACCEPT_HEADERS,
 649   BCRYPT_SALT_SIZE,
 650   TRACKER_RATE_LIMITS,
 651   FILES_CACHE,
 652   CONSTRAINTS_FIELDS,
 653   EMBED_SIZE,
 654   REDUNDANCY,
 655   JOB_CONCURRENCY,
 656   JOB_ATTEMPTS,
 657   LAST_MIGRATION_VERSION,
 658   OAUTH_LIFETIME,
 659   CUSTOM_HTML_TAG_COMMENTS,
 660   BROADCAST_CONCURRENCY,
 661   PAGINATION,
 662   ACTOR_FOLLOW_SCORE,
 663   PREVIEWS_SIZE,
 664   REMOTE_SCHEME,
 665   FOLLOW_STATES,
 666   DEFAULT_USER_THEME_NAME,
 667   SERVER_ACTOR_NAME,
 668   PLUGIN_GLOBAL_CSS_FILE_NAME,
 669   PLUGIN_GLOBAL_CSS_PATH,
 670   PRIVATE_RSA_KEY_SIZE,
 671   ROUTE_CACHE_LIFETIME,
 672   SORTABLE_COLUMNS,
 673   HLS_STREAMING_PLAYLIST_DIRECTORY,
 674   FEEDS,
 675   JOB_TTL,
 676   DEFAULT_THEME_NAME,
 677   NSFW_POLICY_TYPES,
 678   STATIC_MAX_AGE,
 679   STATIC_PATHS,
 680   VIDEO_IMPORT_TIMEOUT,
 681   VIDEO_PLAYLIST_TYPES,
 682   MAX_LOGS_OUTPUT_CHARACTERS,
 683   ACTIVITY_PUB,
 684   ACTIVITY_PUB_ACTOR_TYPES,
 685   THUMBNAILS_SIZE,
 686   VIDEO_CATEGORIES,
 687   VIDEO_LANGUAGES,
 688   VIDEO_PRIVACIES,
 689   VIDEO_LICENCES,
 690   VIDEO_STATES,
 691   VIDEO_RATE_TYPES,
 692   VIDEO_TRANSCODING_FPS,
 693   FFMPEG_NICE,
 694   VIDEO_ABUSE_STATES,
 695   CACHE,
 696   JOB_REQUEST_TIMEOUT,
 697   USER_PASSWORD_RESET_LIFETIME,
 698   MEMOIZE_TTL,
 699   USER_EMAIL_VERIFY_LIFETIME,
 700   OVERVIEWS,
 701   SCHEDULER_INTERVALS_MS,
 702   REPEAT_JOBS,
 703   STATIC_DOWNLOAD_PATHS,
 704   MIMETYPES,
 705   CRAWL_REQUEST_CONCURRENCY,
 706   DEFAULT_AUDIO_RESOLUTION,
 707   JOB_COMPLETED_LIFETIME,
 708   HTTP_SIGNATURE,
 709   VIDEO_IMPORT_STATES,
 710   VIDEO_VIEW_LIFETIME,
 711   CONTACT_FORM_LIFETIME,
 712   VIDEO_PLAYLIST_PRIVACIES,
 713   ASSETS_PATH,
 714   loadLanguages,
 715   buildLanguages
 716 }
 717
 718 // ---------------------------------------------------------------------------
 719
 720 function buildVideoMimetypeExt () {
 721   const data = {
 722     'video/webm': '.webm',
 723     'video/ogg': '.ogv',
 724     'video/mp4': '.mp4'
 725   }
 726
 727   if (CONFIG.TRANSCODING.ENABLED) {
 728     if (CONFIG.TRANSCODING.ALLOW_ADDITIONAL_EXTENSIONS) {
 729       Object.assign(data, {
 730         'video/quicktime': '.mov',
 731         'video/x-msvideo': '.avi',
 732         'video/x-flv': '.flv',
 733         'video/x-matroska': '.mkv',
 734         'application/octet-stream': '.mkv',
 735         'video/avi': '.avi'
 736       })
 737     }
 738
 739     if (CONFIG.TRANSCODING.ALLOW_AUDIO_FILES) {
 740       Object.assign(data, MIMETYPES.AUDIO.MIMETYPE_EXT)
 741     }
 742   }
 743
 744   return data
 745 }
 746
 747 function updateWebserverUrls () {
 748   WEBSERVER.URL = sanitizeUrl(CONFIG.WEBSERVER.SCHEME + '://' + CONFIG.WEBSERVER.HOSTNAME + ':' + CONFIG.WEBSERVER.PORT)
 749   WEBSERVER.HOST = sanitizeHost(CONFIG.WEBSERVER.HOSTNAME + ':' + CONFIG.WEBSERVER.PORT, REMOTE_SCHEME.HTTP)
 750   WEBSERVER.SCHEME = CONFIG.WEBSERVER.SCHEME
 751   WEBSERVER.WS = CONFIG.WEBSERVER.WS
 752   WEBSERVER.HOSTNAME = CONFIG.WEBSERVER.HOSTNAME
 753   WEBSERVER.PORT = CONFIG.WEBSERVER.PORT
 754 }
 755
 756 function updateWebserverConfig () {
 757   MIMETYPES.VIDEO.MIMETYPE_EXT = buildVideoMimetypeExt()
 758   MIMETYPES.VIDEO.EXT_MIMETYPE = invert(MIMETYPES.VIDEO.MIMETYPE_EXT)
 759   ACTIVITY_PUB.URL_MIME_TYPES.VIDEO = Object.keys(MIMETYPES.VIDEO.MIMETYPE_EXT)
 760
 761   CONSTRAINTS_FIELDS.VIDEOS.EXTNAME = buildVideosExtname()
 762 }
 763
 764 function buildVideosExtname () {
 765   return Object.keys(MIMETYPES.VIDEO.EXT_MIMETYPE)
 766 }
 767
 768 function loadLanguages () {
 769   Object.assign(VIDEO_LANGUAGES, buildLanguages())
 770 }
 771
 772 function buildLanguages () {
 773   const iso639 = require('iso-639-3')
 774
 775   const languages: { [ id: string ]: string } = {}
 776
 777   const additionalLanguages = {
 778     'sgn': true, // Sign languages (macro language)
 779     'ase': true, // American sign language
 780     'sdl': true, // Arabian sign language
 781     'bfi': true, // British sign language
 782     'bzs': true, // Brazilian sign language
 783     'csl': true, // Chinese sign language
 784     'cse': true, // Czech sign language
 785     'dsl': true, // Danish sign language
 786     'fsl': true, // French sign language
 787     'gsg': true, // German sign language
 788     'pks': true, // Pakistan sign language
 789     'jsl': true, // Japanese sign language
 790     'sfs': true, // South African sign language
 791     'swl': true, // Swedish sign language
 792     'rsl': true, // Russian sign language: true
 793
 794     'epo': true, // Esperanto
 795     'tlh': true, // Klingon
 796     'jbo': true, // Lojban
 797     'avk': true // Kotava
 798   }
 799
 800   // Only add ISO639-1 languages and some sign languages (ISO639-3)
 801   iso639
 802     .filter(l => {
 803       return (l.iso6391 !== null && l.type === 'living') ||
 804         additionalLanguages[ l.iso6393 ] === true
 805     })
 806     .forEach(l => languages[ l.iso6391 || l.iso6393 ] = l.name)
 807
 808   // Override Occitan label
 809   languages[ 'oc' ] = 'Occitan'
 810   languages[ 'el' ] = 'Greek'
 811
 812   return languages
 813 }