Recherche avancée

Sur d’autres sites (8181)

• Can't upload folder with large amount of files to google storage. I using "@ffmpeg-installer/ffmpeg" and @google-cloud/storage

  20 juillet 2022, par Dmytro

  I upload file to google storage using "@ffmpeg-installer/ffmpeg" and @google-cloud/storage in my node.js App.
Step 1. file uploading to fs is in child processes - one process for each type of resolution (totaly six).
step 2. encription (converting to stream)
step 3. upload to google storage

  


  I use "Upload a directory to a bucket" in order to send the video from the client to the Google Cloud Storage bucket.

  


  This way is working fine only with small video.

  


  for example when I upload video with duration one hour it split on chunk and totally I get more three thousands files. But the problem occurs when there are more than 1500 files

  


  So actually i upload folder with large amount of files, but not all of this files are uploaded to cloud.

  


  maybe someone had the similar problem and helps fix it.

  


  


  


  const uploadFolder = async (bucketName, directoryPath, socketInstance) => {
    try {
      let dirCtr = 1;
      let itemCtr = 0;
      const fileList = [];

      const onComplete = async () => {
        const folderName = nanoid(46);

        await Promise.all(
          fileList.map(filePath => {
            const fileName = path.relative(directoryPath, filePath);
            const destination = `${ folderName }/${ fileName }`;

            return storage
              .bucket(bucketName)
              .upload(filePath, { destination })
              .then(
                uploadResp => ({ fileName: destination, status: uploadResp[0] }),
                err => ({ fileName: destination, response: err })
              );
          })
        );

        if (socketInstance) socketInstance.emit('uploadProgress', {
          message: `Added files to Google bucket`,
          last: false,
          part: false
        });

        return folderName;
      };

      const getFiles = async directory => {
        const items = await fs.readdir(directory);
        dirCtr--;
        itemCtr += items.length;
        for(const item of items) {
          const fullPath = path.join(directory, item);
          const stat = await fs.stat(fullPath);
          itemCtr--;
          if (stat.isFile()) {
            fileList.push(fullPath);
          } else if (stat.isDirectory()) {
            dirCtr++;
            await getFiles(fullPath);
          }
        }
      }

      await getFiles(directoryPath);

      return onComplete();
    } catch (e) {
      log.error(e.message);
      throw new Error('Can\'t store folder.');
    }
  };

  


  


  



• Anomalie #4504 (Nouveau) : Pas d’installations des tables des plugins avec opcache activé en mutu OVH

  5 juin 2020, par Jacques Bouthier

  Sur un site sur OVH avec opcache activé* les tables des plugins ne s’installent pa*s.
  Version de SPIP 3.3.0-dev, mysql, php 7.2 (Server API : FPM/FastCGI)

  Si j’active un fichier ".ovhconfig" pour désactiver FPM qui contient
  

  <span class="CodeRay">app.engine=phpcgi
  app.engine.version=7.2
  http.firewall=none
  environment=production
  container.image=stable
  </span>
  Télécharger

  
  Server API devient : CGI/FastCGI
  (Version de SPIP 3.3.0-dev, mysql, php 7.2)
  Alors les tables des plugins s’installent correctement

• Anomalie #2108 (En cours) : Pièce jointe dans un forum

  18 juin 2011, par guytarr °

  Ah, je ne reproduis pas en admin ou anonyme, avec ou sans moderation. Je rouvre le ticket en attendant. L’erreur 500 dans tous les cas de figures ? L’extension forum est bien mise à jour en 48832 ou supérieure ?