Меркурійне перетворення кодування імен файлів

У мене є сховища Mercurial, які працюють на Apache з mod_wsgi. У сховищах усі назви файлів закодовані у Windows-1251. Це кодування використовується з історичних причин: вони були перетворені в mercurial зі svn, Windows-1251 - це кодування Windows за замовчуванням для російської мови.

Тепер програмісти хочуть використовувати інструмент Crucible для перегляду коду. Він не може підкреслити імена файлів у будь-якому іншому кодуванні, ніж utf-8. Тому мені потрібно перетворити їх з Windows-1251 в utf-8. Хтось знає, як це зробити? Розширення Mercurial convert не має опцій для перетворення кодувань.

hgweb.config:

[web]
#encoding = UTF-8
encoding = windows-1251
#allow_archive = gz, zip, bz2
allow_archive = zip
allow_push = *
push_ssl = false

[extensions]

[collections]
/data/mercurial = /data/mercurial

Ви маєте рацію, що розширення для перетворення не підтримує це в хороший спосіб. Тобто, ви не можете попросити його перекодувати з кодує X кодування Y . Однак ви можете попросити його перейменувати файли один за одним для вас! Спочатку створіть файл з ім'ям rename.pyз

import sys
for path in sys.stdin:
    old = path[:-1] # strip newline
    new = old.decode("cp1251").encode("utf-8")
    print 'rename "%s" "%s"' % (old, new)

Потім бігайте

$ hg manifest --all | python rename.py > rename.txt

Це створює вашу карту файлів. Тепер ви можете використовувати

$ hg convert --filemap rename.txt cp1251-repo utf-8-repo

для перетворення сховища в нове сховище. У новому сховищі виглядатиме так, що файли завжди зберігалися за допомогою імен файлів UTF-8.

Примітка: Імена файлів тепер зберігаються як UTF-8 у сховищі. Це означає, що каси будуть виглядати чудово на сучасних машинах Linux. Однак Windows не використовує імена файлів UTF-8. Розширення FixUtf-8 необхідно використовувати для того, щоб Mercurial перетворював імена файлів UTF-8 в UTF-16 на льоту. Це також створить читабельні імена файлів у Windows.

Примітка. Кожному доведеться повторно клонувати нове сховище! Зміна будь-якої частини історії неминуче змінює і всі хеші наборів змін. Тож, щоб зняти це, вам потрібно будь-яке

1. змусити всіх натиснути на сервер,
2. конвертувати сховища на сервері,
3. змусити людей повторно клонуватись

або

1. змусити всіх запускати вищезазначені команди у своїх локальних сховищах
2. конвертувати сховища на сервері

У будь-якому випадку працює, оскільки конверсія детермінована, і тому ваші користувачі можуть запустити її самостійно, якщо у них є Python. Якщо вони мають лише встановлення TortoiseHg, то, мабуть, найпростіше, якщо ви конвертуєте їх на своєму сервері.

Я розглянув, як зробити підтримку розширення для конвертації це більш безпосередньо, і надіслав патч до списку розсилки Mercurial для більш прямої підтримки для цього.

У мене була така ж проблема. Мені потрібно було конвертувати купу сховищ, тому я написав сценарій, який перетворює всі сховища, подані як список.

використання:

hg_convert_filenames_encoding.py [-h] [-i INPUT_ENCODING] [-o OUTPUT_ENCODING] [-b] [-u] [repositories [repositories ...]]

Ви можете отримати з мого сховища в BitBucket.

Тільки видобуток з Mercurial Wiki FYI

Далі явно трактуються як бінарні дані в невідомому кодуванні:

• вміст файлу
• назви файлів

Ці предмети слід розглядати як бінарні дані та зберігати без втрат, де це можливо.

Таким чином, я гадаю, що лише зміна презентаційної схеми encoding =може зробити товсту

Якщо це припущення неправильне (це завжди можливо), спробуйте розширення FixUtf8 , прочитайте частину Виправлення існуючих імен файлів з readme уважно