Як посилатися на відносні шляхи ресурсів під час роботи з сховищем коду

Ми працюємо з сховищем коду, яке розгорнуто як для Windows, так і для Linux - іноді в різних каталогах. Як один з модулів всередині проекту повинен посилатися на один із ресурсів не-Python у проекті (файли CSV тощо)?

Якщо ми робимо щось на кшталт:

thefile=open('test.csv')

або:

thefile=open('../somedirectory/test.csv')

Він буде працювати лише тоді, коли сценарій запускається з одного конкретного каталогу або підмножини каталогів.

Я хотів би зробити щось на зразок:

path=getBasePathOfProject()+'/somedirectory/test.csv'
thefile=open(path)

Це можливо?

Спробуйте використовувати ім’я файлу відносно поточного шляху файлів. Приклад для './my_file':

fn = os.path.join(os.path.dirname(__file__), 'my_file')

У Python 3.4+ ви також можете використовувати pathlib :

fn = pathlib.Path(__file__).parent / 'my_file'

Якщо ви використовуєте інструменти налаштування або розповсюджуєте (встановлення setup.py), то, як видається, "правильним" способом доступу до цих запакованих ресурсів є використання пакет_ресурсів.

У вашому випадку прикладом був би

import pkg_resources
my_data = pkg_resources.resource_string(__name__, "foo.dat")

Що, звичайно, читає ресурс, а прочитані двійкові дані - це значення my_data

Якщо вам просто потрібна назва файлу, ви також можете використовувати

resource_filename(package_or_requirement, resource_name)

Приклад:

resource_filename("MyPackage","foo.dat")

Перевага полягає в тому, що він гарантовано працює, навіть якщо це архівний розподіл, як яйце.

Дивіться http://packages.python.org/distribute/pkg_resources.html#resourcemanager-api

У Python шляхи відносяться до поточного робочого каталогу , який у більшості випадків є каталогом, з якого ви запускаєте свою програму. Поточний робочий каталог , швидше за все , не так же , як і в директорії вашого файлу модуля, тому , використовуючи шлях щодо поточного файлу модуля завжди є поганим вибором.

Використання абсолютного шляху має бути найкращим рішенням:

import os
package_dir = os.path.dirname(os.path.abspath(__file__))
thefile = os.path.join(package_dir,'test.cvs')

Я часто використовую щось подібне до цього:

import os
DATA_DIR = os.path.abspath(os.path.join(os.path.dirname(__file__), 'datadir'))

# if you have more paths to set, you might want to shorten this as
here = lambda x: os.path.abspath(os.path.join(os.path.dirname(__file__), x))
DATA_DIR = here('datadir') 

pathjoin = os.path.join
# ...
# later in script
for fn in os.listdir(DATA_DIR):
    f = open(pathjoin(DATA_DIR, fn))
    # ...

Змінна

__file__

містить ім'я файлу сценарію, в який ви пишете цей код, тож ви можете робити шляхи відносно сценарію, але все-таки записані з абсолютними шляхами. Він працює досить добре з кількох причин:

• шлях абсолютний, але все ще відносний
• проект все ще може бути розгорнутий у відносному контейнері

Але вам потрібно стежити за сумісністю платформи - os.pathsep Windows відрізняється від UNIX.

import os
cwd = os.getcwd()
path = os.path.join(cwd, "my_file")
f = open(path)

Ви також намагаєтесь нормалізувати cwdвикористання os.path.abspath(os.getcwd()). Більше інформації тут .

Ви можете використовувати збірку в __file__змінній. Він містить шлях поточного файлу. Я б реалізував getBaseOfProject в модулі в корені вашого проекту. Там я отримав би частину шляху __file__і повернув би її. Цей метод може бути використаний скрізь у вашому проекті.

Я тут трохи наткнувся. Хотіли упакувати деякі файли ресурсів у колесо і отримати доступ до них. Упаковка використовувала файл маніфесту, але програма pip install не встановлювала його, якщо це не підкаталог. Сподіваючись, ці кадри сцени допоможуть

├── cnn_client
│   ├── image_preprocessor.py
│   ├── __init__.py
│   ├── resources
│   │   ├── mscoco_complete_label_map.pbtxt
│   │   ├── retinanet_complete_label_map.pbtxt
│   │   └── retinanet_label_map.py
│   ├── tf_client.py

MANIFEST.in

recursive-include cnn_client/resources *

Створений шматок за допомогою стандартного setup.py. pip встановив файл колеса. Після встановлення перевіряється, чи встановлені ресурси. Вони є

ls /usr/local/lib/python2.7/dist-packages/cnn_client/resources

mscoco_complete_label_map.pbtxt
retinanet_complete_label_map.pbtxt 
 retinanet_label_map.py  

У tfclient.py для доступу до цих файлів. з

templates_dir = os.path.join(os.path.dirname(__file__), 'resources')
 file_path = os.path.join(templates_dir, \
            'mscoco_complete_label_map.pbtxt')
        s = open(file_path, 'r').read()

І це працює.

Я довгий час розбирався у відповіді на це, але я нарешті це зрозумів (і це насправді дуже просто):

import sys
import os
sys.path.append(os.getcwd() + '/your/subfolder/of/choice')

# now import whatever other modules you want, both the standard ones,
# as the ones supplied in your subfolders

Це додасть відносний шлях вашої папки до каталогів python, щоб заглянути в Це досить швидко і брудно, але це працює як шарм :)