Завантаження кодованого зображення base64 на Amazon S3 через Node.js


99

Вчора я провів глибокий нічний сеанс кодування та створив невеликий додаток node.js / JS (ну насправді CoffeeScript, але CoffeeScript - це лише JavaScript, так скажімо JS).

яка мета:

  1. клієнт надсилає на сервер канва datauri (png) (через socket.io)
  2. сервер завантажує зображення на Amazon s3 - -

крок 1 виконано.

сервер тепер має рядок а-ля

data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAAMgAAADICAYAAACt...

моє запитання: які мої наступні кроки для "потокового передавання" / завантаження цих даних на Amazon S3 і створення там фактичного зображення?

knox https://github.com/LearnBoost/knox здається неймовірною бібліотекою, щоб ВСТАВИТИ щось на S3, але чого мені не вистачає, так це клею між рядком закодованого зображення base64 та фактичною дією завантаження ?

Будь-які ідеї, вказівки та відгуки вітаються.


4
Перевірте цей відповідь: stackoverflow.com/questions/5867534 / ...
akirk

Відповіді:


209

Для людей, які досі борються з цим питанням. Ось підхід, який я використав із рідною aws-sdk.

var AWS = require('aws-sdk');
AWS.config.loadFromPath('./s3_config.json');
var s3Bucket = new AWS.S3( { params: {Bucket: 'myBucket'} } );

всередині методу маршрутизатора: - ContentType має бути встановлений на тип вмісту файлу зображення

  buf = Buffer.from(req.body.imageBinary.replace(/^data:image\/\w+;base64,/, ""),'base64')
  var data = {
    Key: req.body.userId, 
    Body: buf,
    ContentEncoding: 'base64',
    ContentType: 'image/jpeg'
  };
  s3Bucket.putObject(data, function(err, data){
      if (err) { 
        console.log(err);
        console.log('Error uploading data: ', data); 
      } else {
        console.log('succesfully uploaded the image!');
      }
  });

Файл s3_config.json: -

{
  "accessKeyId":"xxxxxxxxxxxxxxxx",
  "secretAccessKey":"xxxxxxxxxxxxxx",
  "region":"us-east-1"
}

2
[MissingRequiredParameter: Відсутній необхідний ключ 'Key' у параметрах]
Nichole A. Miler

1
Ключ: req.body.userId Я використовував userId як ключ у даних публікації ... це було давно ... але ви можете оголосити будь-який рядок як ключ. Щоб переконатись, що наявні файли не перезаписані, збережіть ключ унікальним.
Divyanshu Das

@Divyanshu Дякую за такий корисний приклад. У мене два сумніви: How to make S3 generates a unique KEY to prevent from overriding files?і If I don't set the ContentType, when I download the files I won't be able to get the correct file?я маю на увазі, що я отримаю такий пошкоджений файл? Спасибі заздалегідь!
alexventuraio

2
@Marklar шлях розташування в основному є ключовим - наприклад, якщо ваше ім'я відра - bucketone і ім'я ключа xyz.png, тоді шлях до файлу буде bucketone.s3.amazonaws.com/xyz.png
Divyanshu Das

2
@Divyanshu Дякую за цю чудову відповідь! Мені це дуже допомогло. Однак я вважаю, що ContentEncoding: 'base64'це неправильно, оскільки new Buffer(..., 'base64')декодує кодований base64 рядок у його двійкове представлення.
Shuhei Kagawa

17

добре, це одна з відповідей, як зберегти дані полотна у файл

в основному це виглядає так у моєму коді

buf = new Buffer(data.dataurl.replace(/^data:image\/\w+;base64,/, ""),'base64')


req = knoxClient.put('/images/'+filename, {
             'Content-Length': buf.length,
             'Content-Type':'image/png'
  })

req.on('response', (res) ->
  if res.statusCode is 200
      console.log('saved to %s', req.url)
      socket.emit('upload success', imgurl: req.url)
  else
      console.log('error %d', req.statusCode)
  )

req.end(buf)

1
Об'єкт буфера видасть помилку "Буфер не визначається", чи можете ви дати мені рішення для цього.
NaveenG

Я також отримую ту ж помилку. у вас є якесь рішення чи ні
Кришна

1
@NaveenG Це приклад вузла, можливо, ви використовуєте звичайний JS?
Пуанті

7

Ось код однієї статті, з якою я зіткнувся, розмістивши нижче:

const imageUpload = async (base64) => {

  const AWS = require('aws-sdk');

  const { ACCESS_KEY_ID, SECRET_ACCESS_KEY, AWS_REGION, S3_BUCKET } = process.env;

  AWS.config.setPromisesDependency(require('bluebird'));
  AWS.config.update({ accessKeyId: ACCESS_KEY_ID, secretAccessKey: SECRET_ACCESS_KEY, region: AWS_REGION });

  const s3 = new AWS.S3();

  const base64Data = new Buffer.from(base64.replace(/^data:image\/\w+;base64,/, ""), 'base64');

  const type = base64.split(';')[0].split('/')[1];

  const userId = 1;

  const params = {
    Bucket: S3_BUCKET,
    Key: `${userId}.${type}`, // type is not required
    Body: base64Data,
    ACL: 'public-read',
    ContentEncoding: 'base64', // required
    ContentType: `image/${type}` // required. Notice the back ticks
  }

  let location = '';
  let key = '';
  try {
    const { Location, Key } = await s3.upload(params).promise();
    location = Location;
    key = Key;
  } catch (error) {
  }

  console.log(location, key);

  return location;

}

module.exports = imageUpload;

Детальніше: http://docs.aws.amazon.com/AWSJavaScriptSDK/latest/AWS/S3.html#upload-property

Подяки: https://medium.com/@mayneweb/upload-a-base64-image-data-from-nodejs-to-aws-s3-bucket-6c1bd945420f


4

Прийнята відповідь чудово працює, але якщо комусь потрібно прийняти будь-який файл, а не лише зображення, цей регулярний вираз чудово працює:

/^data:.+;base64,/

Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.