]> git.immae.eu Git - github/Chocobozzz/PeerTube.git/blobdiff - server/initializers/installer.ts
Merge branch 'release/4.3.0' into develop
[github/Chocobozzz/PeerTube.git] / server / initializers / installer.ts
index 2f9b589916b9bc6e28c0f50b945639f70cd31656..f5d8eedf1916a687333ebb118093b6f328466083 100644 (file)
@@ -1,37 +1,39 @@
+import { ensureDir, readdir, remove } from 'fs-extra'
+import passwordGenerator from 'password-generator'
 import { join } from 'path'
-import * as config from 'config'
-import { each, series } from 'async'
-import * as mkdirp from 'mkdirp'
-import * as passwordGenerator from 'password-generator'
-
-import { database as db } from './database'
-import { USER_ROLES, CONFIG, LAST_MIGRATION_VERSION } from './constants'
-import { clientsExist, usersExist } from './checker'
-import { logger, createCertsIfNotExist, root } from '../helpers'
-
-function installApplication (callback) {
-  series([
-    function createDatabase (callbackAsync) {
-      db.sequelize.sync().asCallback(callbackAsync)
-      // db.sequelize.sync({ force: true }).asCallback(callbackAsync)
-    },
-
-    function createDirectories (callbackAsync) {
-      createDirectoriesIfNotExist(callbackAsync)
-    },
-
-    function createCertificates (callbackAsync) {
-      createCertsIfNotExist(callbackAsync)
-    },
-
-    function createOAuthClient (callbackAsync) {
-      createOAuthClientIfNotExist(callbackAsync)
-    },
-
-    function createOAuthUser (callbackAsync) {
-      createOAuthAdminIfNotExist(callbackAsync)
-    }
-  ], callback)
+import { isTestOrDevInstance } from '@server/helpers/core-utils'
+import { getNodeABIVersion } from '@server/helpers/version'
+import { UserRole } from '@shared/models'
+import { logger } from '../helpers/logger'
+import { buildUser, createApplicationActor, createUserAccountAndChannelAndPlaylist } from '../lib/user'
+import { ApplicationModel } from '../models/application/application'
+import { OAuthClientModel } from '../models/oauth/oauth-client'
+import { applicationExist, clientsExist, usersExist } from './checker-after-init'
+import { CONFIG } from './config'
+import { DIRECTORIES, FILES_CACHE, LAST_MIGRATION_VERSION } from './constants'
+import { sequelizeTypescript } from './database'
+
+async function installApplication () {
+  try {
+    await Promise.all([
+      // Database related
+      sequelizeTypescript.sync()
+        .then(() => {
+          return Promise.all([
+            createApplicationIfNotExist(),
+            createOAuthClientIfNotExist(),
+            createOAuthAdminIfNotExist()
+          ])
+        }),
+
+      // Directories
+      removeCacheAndTmpDirectories()
+        .then(() => createDirectoriesIfNotExist())
+    ])
+  } catch (err) {
+    logger.error('Cannot install application.', { err })
+    process.exit(-1)
+  }
 }
 
 // ---------------------------------------------------------------------------
@@ -42,88 +44,144 @@ export {
 
 // ---------------------------------------------------------------------------
 
-function createDirectoriesIfNotExist (callback) {
-  const storages = config.get('storage')
+function removeCacheAndTmpDirectories () {
+  const cacheDirectories = Object.keys(FILES_CACHE)
+    .map(k => FILES_CACHE[k].DIRECTORY)
+
+  const tasks: Promise<any>[] = []
+
+  // Cache directories
+  for (const key of Object.keys(cacheDirectories)) {
+    const dir = cacheDirectories[key]
+    tasks.push(removeDirectoryOrContent(dir))
+  }
 
-  each(Object.keys(storages), function (key, callbackEach) {
-    const dir = storages[key]
-    mkdirp(join(root(), dir), callbackEach)
-  }, callback)
+  tasks.push(removeDirectoryOrContent(CONFIG.STORAGE.TMP_DIR))
+
+  return Promise.all(tasks)
 }
 
-function createOAuthClientIfNotExist (callback) {
-  clientsExist(function (err, exist) {
-    if (err) return callback(err)
+async function removeDirectoryOrContent (dir: string) {
+  try {
+    await remove(dir)
+  } catch (err) {
+    logger.debug('Cannot remove directory %s. Removing content instead.', dir, { err })
+
+    const files = await readdir(dir)
 
-    // Nothing to do, clients already exist
-    if (exist === true) return callback(null)
+    for (const file of files) {
+      await remove(join(dir, file))
+    }
+  }
+}
 
-    logger.info('Creating a default OAuth Client.')
+function createDirectoriesIfNotExist () {
+  const storage = CONFIG.STORAGE
+  const cacheDirectories = Object.keys(FILES_CACHE)
+                                 .map(k => FILES_CACHE[k].DIRECTORY)
 
-    const id = passwordGenerator(32, false, /[a-z0-9]/)
-    const secret = passwordGenerator(32, false, /[a-zA-Z0-9]/)
-    const client = db.OAuthClient.build({
-      clientId: id,
-      clientSecret: secret,
-      grants: [ 'password', 'refresh_token' ],
-      redirectUris: null
-    })
+  const tasks: Promise<void>[] = []
+  for (const key of Object.keys(storage)) {
+    const dir = storage[key]
+    tasks.push(ensureDir(dir))
+  }
 
-    client.save().asCallback(function (err, createdClient) {
-      if (err) return callback(err)
+  // Cache directories
+  for (const key of Object.keys(cacheDirectories)) {
+    const dir = cacheDirectories[key]
+    tasks.push(ensureDir(dir))
+  }
 
-      logger.info('Client id: ' + createdClient.clientId)
-      logger.info('Client secret: ' + createdClient.clientSecret)
+  tasks.push(ensureDir(DIRECTORIES.HLS_STREAMING_PLAYLIST.PRIVATE))
+  tasks.push(ensureDir(DIRECTORIES.HLS_STREAMING_PLAYLIST.PUBLIC))
+  tasks.push(ensureDir(DIRECTORIES.VIDEOS.PUBLIC))
+  tasks.push(ensureDir(DIRECTORIES.VIDEOS.PRIVATE))
 
-      return callback(null)
-    })
-  })
+  // Resumable upload directory
+  tasks.push(ensureDir(DIRECTORIES.RESUMABLE_UPLOAD))
+
+  return Promise.all(tasks)
 }
 
-function createOAuthAdminIfNotExist (callback) {
-  usersExist(function (err, exist) {
-    if (err) return callback(err)
+async function createOAuthClientIfNotExist () {
+  const exist = await clientsExist()
+  // Nothing to do, clients already exist
+  if (exist === true) return undefined
 
-    // Nothing to do, users already exist
-    if (exist === true) return callback(null)
+  logger.info('Creating a default OAuth Client.')
 
-    logger.info('Creating the administrator.')
+  const id = passwordGenerator(32, false, /[a-z0-9]/)
+  const secret = passwordGenerator(32, false, /[a-zA-Z0-9]/)
+  const client = new OAuthClientModel({
+    clientId: id,
+    clientSecret: secret,
+    grants: [ 'password', 'refresh_token' ],
+    redirectUris: null
+  })
 
-    const username = 'root'
-    const role = USER_ROLES.ADMIN
-    const email = CONFIG.ADMIN.EMAIL
-    const createOptions: { validate?: boolean } = {}
-    let password = ''
+  const createdClient = await client.save()
+  logger.info('Client id: ' + createdClient.clientId)
+  logger.info('Client secret: ' + createdClient.clientSecret)
 
-    // Do not generate a random password for tests
-    if (process.env.NODE_ENV === 'test') {
-      password = 'test'
+  return undefined
+}
 
-      if (process.env.NODE_APP_INSTANCE) {
-        password += process.env.NODE_APP_INSTANCE
-      }
+async function createOAuthAdminIfNotExist () {
+  const exist = await usersExist()
+  // Nothing to do, users already exist
+  if (exist === true) return undefined
 
-      // Our password is weak so do not validate it
-      createOptions.validate = false
-    } else {
-      password = passwordGenerator(8, true)
-    }
+  logger.info('Creating the administrator.')
+
+  const username = 'root'
+  const role = UserRole.ADMINISTRATOR
+  const email = CONFIG.ADMIN.EMAIL
+  let validatePassword = true
+  let password = ''
 
-    const userData = {
-      username,
-      email,
-      password,
-      role
+  // Do not generate a random password for test and dev environments
+  if (isTestOrDevInstance()) {
+    password = 'test'
+
+    if (process.env.NODE_APP_INSTANCE) {
+      password += process.env.NODE_APP_INSTANCE
     }
 
-    db.User.create(userData, createOptions).asCallback(function (err, createdUser) {
-      if (err) return callback(err)
+    // Our password is weak so do not validate it
+    validatePassword = false
+  } else if (process.env.PT_INITIAL_ROOT_PASSWORD) {
+    password = process.env.PT_INITIAL_ROOT_PASSWORD
+  } else {
+    password = passwordGenerator(16, true)
+  }
+
+  const user = buildUser({
+    username,
+    email,
+    password,
+    role,
+    emailVerified: true,
+    videoQuota: -1,
+    videoQuotaDaily: -1
+  })
 
-      logger.info('Username: ' + username)
-      logger.info('User password: ' + password)
+  await createUserAccountAndChannelAndPlaylist({ userToCreate: user, channelNames: undefined, validateUser: validatePassword })
+  logger.info('Username: ' + username)
+  logger.info('User password: ' + password)
+}
+
+async function createApplicationIfNotExist () {
+  const exist = await applicationExist()
+  // Nothing to do, application already exist
+  if (exist === true) return undefined
 
-      logger.info('Creating Application table.')
-      db.Application.create({ migrationVersion: LAST_MIGRATION_VERSION }).asCallback(callback)
-    })
+  logger.info('Creating application account.')
+
+  const application = await ApplicationModel.create({
+    migrationVersion: LAST_MIGRATION_VERSION,
+    nodeVersion: process.version,
+    nodeABIVersion: getNodeABIVersion()
   })
+
+  return createApplicationActor(application.id)
 }