web-dev-qa-db-ja.com

DjangoプロジェクトをDjango-storagesとAmazon S3で、静的ファイルとメディアファイル用の異なるフォルダーでセットアップする方法は?

アプリの静的ファイル(STATIC_ROOT)とユーザーがアップロードしたファイル(MEDIA_ROOT)を保存するためにサーバーファイルシステムを使用していたDjangoプロジェクトを構成しています。

AmazonのS3ですべてのコンテンツをホストする必要があるため、このためのバケットを作成しました。 Django-storagesbotoストレージバックエンドとともに使用して、収集した静的データをS3バケットにアップロードできました。

MEDIA_ROOT = '/media/'
STATIC_ROOT = '/static/'

DEFAULT_FILE_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
AWS_ACCESS_KEY_ID = 'KEY_ID...'
AWS_SECRET_ACCESS_KEY = 'ACCESS_KEY...'
AWS_STORAGE_BUCKET_NAME = 'bucket-name'
STATICFILES_STORAGE = 'storages.backends.s3boto.S3BotoStorage'

その後、問題が発生しました。MEDIA_ROOTSTATIC_ROOTはバケット内で使用されないため、バケットのルートには静的ファイルとユーザーがアップロードしたパスの両方が含まれます。

だから、私は設定することができます:

S3_URL = 'http://s3.amazonaws.com/%s' % AWS_STORAGE_BUCKET_NAME
STATIC_URL = S3_URL + STATIC_ROOT
MEDIA_URL = 'S3_URL + MEDIA_ROOT

テンプレートでこれらの設定を使用しますが、Django-storagesを使用してS3に保存する場合、静的/メディアファイルの区別はありません。

これをどのように行うことができますか?

ありがとう!

以下はうまく機能し、Mandxの方法よりも単純であるはずですが、非常によく似ています。

s3utils.pyファイル:

from storages.backends.s3boto import S3BotoStorage

StaticRootS3BotoStorage = lambda: S3BotoStorage(location='static')
MediaRootS3BotoStorage  = lambda: S3BotoStorage(location='media')

次に、settings.py

DEFAULT_FILE_STORAGE = 'myproject.s3utils.MediaRootS3BotoStorage'
STATICFILES_STORAGE = 'myproject.s3utils.StaticRootS3BotoStorage'

異なるが関連する例(実際にテストしたもの)は、2つのexample_ファイル ここ

125
bradenm

私は現在、分離された_s3utils_モジュールでこのコードを使用しています:

_from Django.core.exceptions import SuspiciousOperation
from Django.utils.encoding import force_unicode

from storages.backends.s3boto import S3BotoStorage


def safe_join(base, *paths):
    """
    A version of Django.utils._os.safe_join for S3 paths.

    Joins one or more path components to the base path component intelligently.
    Returns a normalized version of the final path.

    The final path must be located inside of the base path component (otherwise
    a ValueError is raised).

    Paths outside the base path indicate a possible security sensitive operation.
    """
    from urlparse import urljoin
    base_path = force_unicode(base)
    paths = map(lambda p: force_unicode(p), paths)
    final_path = urljoin(base_path + ("/" if not base_path.endswith("/") else ""), *paths)
    # Ensure final_path starts with base_path and that the next character after
    # the final path is '/' (or nothing, in which case final_path must be
    # equal to base_path).
    base_path_len = len(base_path) - 1
    if not final_path.startswith(base_path) \
       or final_path[base_path_len:base_path_len + 1] not in ('', '/'):
        raise ValueError('the joined path is located outside of the base path'
                         ' component')
    return final_path


class StaticRootS3BotoStorage(S3BotoStorage):
    def __init__(self, *args, **kwargs):
        super(StaticRootS3BotoStorage, self).__init__(*args, **kwargs)
        self.location = kwargs.get('location', '')
        self.location = 'static/' + self.location.lstrip('/')

    def _normalize_name(self, name):
        try:
            return safe_join(self.location, name).lstrip('/')
        except ValueError:
            raise SuspiciousOperation("Attempted access to '%s' denied." % name)


class MediaRootS3BotoStorage(S3BotoStorage):
    def __init__(self, *args, **kwargs):
        super(MediaRootS3BotoStorage, self).__init__(*args, **kwargs)
        self.location = kwargs.get('location', '')
        self.location = 'media/' + self.location.lstrip('/')

    def _normalize_name(self, name):
        try:
            return safe_join(self.location, name).lstrip('/')
        except ValueError:
            raise SuspiciousOperation("Attempted access to '%s' denied." % name)
_

次に、私の設定モジュールで:

_DEFAULT_FILE_STORAGE = 'myproyect.s3utils.MediaRootS3BotoStorage'
STATICFILES_STORAGE = 'myproyect.s3utils.StaticRootS3BotoStorage'
_

元のコードは正当なパスに対してSuspiciousOperation例外を与えているので、_normalize_name()関数の「固定」バージョンを使用するためにsafe_join()プライベートメソッドを再定義する必要がありました。

私はこれを検討のために投稿していますが、誰かがより良い答えをしたり、これを改善したりできるなら、それは大歓迎です。


ファイル:PROJECT_NAME/custom_storages.py

from Django.conf import settings
from storages.backends.s3boto import S3BotoStorage

class StaticStorage(S3BotoStorage):
    location = settings.STATICFILES_LOCATION

class MediaStorage(S3BotoStorage):
    location = settings.MEDIAFILES_LOCATION

ファイル:PROJECT_NAME/settings.py

STATICFILES_LOCATION = 'static'
MEDIAFILES_LOCATION = 'media'

if not DEBUG:
    STATICFILES_STORAGE = 'PROJECT_NAME.custom_storages.StaticStorage'
    DEFAULT_FILE_STORAGE = 'PROJECT_NAME.custom_storages.MediaStorage'
    AWS_ACCESS_KEY_ID = 'KEY_XXXXXXX'
    AWS_SECRET_ACCESS_KEY = 'SECRET_XXXXXXXXX'
    AWS_STORAGE_BUCKET_NAME = 'BUCKET_NAME'
    AWS_HEADERS = {'Cache-Control': 'max-age=86400',}
    AWS_QUERYSTRING_AUTH = False

実行:python manage.py collectstatic

答えは非常にシンプルで、デフォルトで行われていると思います。これは、Django 1.6.5およびBoto 2.28.0を使用したAWS Elastic Beanstalkで機能しています。

STATICFILES_FINDERS = (
    'Django.contrib.staticfiles.finders.FileSystemFinder',
    'Django.contrib.staticfiles.finders.AppDirectoriesFinder',
)

TEMPLATE_LOADERS = (
    'Django.template.loaders.filesystem.Loader',
    'Django.template.loaders.app_directories.Loader',
)

DEFAULT_FILE_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
STATICFILES_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
AWS_ACCESS_KEY_ID = os.environ['AWS_ACCESS_KEY_ID']
AWS_SECRET_ACCESS_KEY = os.environ['AWS_SECRET_KEY']

AWSキーはコンテナ構成ファイルから渡され、STATIC_ROOTまたはSTATIC_URLがまったく設定されていません。また、s3utils.pyファイルは必要ありません。これらの詳細は、ストレージシステムによって自動的に処理されます。ここでのコツは、テンプレートでこの未知のパスを正しく動的に参照する必要があったことです。例えば:

<link rel="icon" href="{% static "img/favicon.ico" %}">

これが、~/Projects/my_app/project/my_app/static/img/favicon.icoにローカルに配置されている(展開前の)faviconに対処する方法です。

もちろん、開発環境でローカルにこのようなものにアクセスするための別個のlocal_settings.pyファイルがあり、STATICおよびMEDIA設定があります。この解決策を見つけるために、私は多くの実験と読書をしなければならず、エラーなしで一貫して動作します。

静的とルートの分離が必要であることを理解しており、バケットを1つしか提供できないことを考慮すると、このメソッドは~/Projects/my_app/project/my_app/static/でローカル環境のすべてのフォルダーを取得し、バケットルートにフォルダーを作成します(つまり:上記の例のようにS3bucket/img /)。そのため、ファイルを分離できます。たとえば、mediaフォルダーにstaticフォルダーを作成し、次のテンプレートを使用してアクセスできます。

{% static "media/" %}

これがお役に立てば幸いです。私は答えを求めてここに来て、ストレージシステムを拡張するよりも簡単な解決策を見つけるために少し難しくしました。代わりに、私はBotoの使用目的に関するドキュメントを読みましたが、必要なものの多くがデフォルトで組み込まれていることがわかりました。乾杯!

2
e.thompsy