Що таке обсяг інформації?


33

Це питання було задано Жанетті Вінг після її презентації PCAST з інформатики.

"З точки зору фізики, чи є у нас максимальний об'єм інформації?" (Приємне викликове питання для теоретичної спільноти інформатики, оскільки, на мою думку, це питання "Що таке інформація?")

Поза межами "Що таке інформація?" слід також з'ясувати, що означає "об'єм" у цьому контексті? Можливо, максимальна щільність інформації є кращим показником.


1
Я прихильнився тому, що не вважаю це питання важливим для сайту (незважаючи на те, наскільки це нескінченно цікаво). Наскільки я можу сказати, він дійсно не відповідає кваліфікації в FAQ. Без ненависті, Ленс: Я люблю ваш блог і колись сподіваюся зустрітися з вами. Скажи Gasarch, що мені шкода, що я ще не закінчив огляд книги для новин SIGACT. O_o Можливо, якби питання було трохи розпаковано? Я впевнений, що люди з фізики використовують ентропію (ступінь свободи) і визначають "фізичну" інформацію.
Росс Снайдер

1
@Ross: Я інтерпретував питання, що означає "чи існує фізична межа кількості інформації, яку ми запакуємо в область простору?" З цією інтерпретацією я вважаю, що це гарне питання, і я чув відповідь на нього раніше, тому знаю, що відповідь існує.
Робін Котарі

@Robin: У цьому випадку питання (хоча законне і цікаве) насправді не є питанням TCS (і так не підходить), а також не відповідає кваліфікації тут ( meta.cstheory.stackexchange.com/questions/225 /… ) [Див. Відповідь, вже подану нижче - швидкий запит Google, що включає "фізику", "інформацію" та "об'єм", доставить вас у те саме місце].
Росс Снайдер

@Ross: Фізичною основою інформації є не TCS? Я думаю, що це найкраще обговорювати на мета ... Voilà, Сфера застосування: Чи можуть питання для нас занадто фізичні?
Чарльз Стюарт

Я погоджуюся з Россом Снайдером і проголосував за те, щоб закрити це як поза темою. Хоча питання звучить цікаво, мені це виглядає як питання з фізики в його теперішній формі.
Цуйосі Іто,

Відповіді:


24

Ленс, насправді є теорема, яка дає межі цьому. Margolus-Левітін теорема обмежує швидкість обчислень з точки зору щільності енергії. Є приємний трюк, який потім можна зіграти: Якщо локальна щільність енергії перевищить певну межу, утвориться чорна діра, що спричинить горизонт подій, який, по суті, не дасть вам отримати відповідь, причинно відключивши цю область простору-часу від решта Всесвіту. Сет Ллойд має хороший документ, використовуючи цей трюк для оцінки обчислювальної сили Всесвіту ( Phys. Rev. Lett. 88, 237901 (2002) , arXiv ).

Звичайно, ви можете використовувати подібні міркування в будь-якій кінцевій області простору-часу.


22

Цей коментар у її статті не дає багато контексту щодо того, яку відповідь вона може очікувати. Але, безумовно, це вже відоме і поважне питання, про яке багато що вже відомо. Сторінка Вікіпедії за голографічним принципоммає хороший огляд. Найголовніше, що стосується голографічного принципу, - це те, що він говорить, що інформаційна спроможність регіону повинна бути пропорційною його поверхні; якщо ви думаєте про інформаційну ємність з точки зору того, скільки мініатюрних дводержавних пристроїв ви можете там упакувати, ви очікуєте, що об'єм інтер'єру буде обмежуючим фактором. Ця інтуїція справджується до певного моменту, але з часом концентрація масової енергії, відкидаючи проблеми квантової мініатюризації, стає настільки великою, що утворюється чорна діра. Грубо кажучи, за допомогою невеликого розмірного аналізу та того факту, що гравітація - це закон оберненого квадрата, його радіус у квадраті (пропорційний площі поверхні) - це відповідна кількість тут.


6
Це, мабуть, найкраща "науково-популярна" стаття, яку я читав за голографічним принципом: sufizmveinsan.com/fizik/holographic.html
arnab

"Те, що утворюється чорна діра, не означає, що вона не містить ніякої інформації" Насправді вона має максимальну ентропію щодо вміщеної у ній кількості масової енергії відносно сторонніх.
Per Vognsen

Пер: Я видалив свій коментар, оскільки це не означало того, що я хотів зробити, а це те, що я думаю, що нам потрібно бути обережними щодо фізичної теорії, яку ми беремо, щоб відповісти на це питання. У мене складається враження, що теорія квантової гравітації не розглядається як врегульована, а теоретико-теоретичні поняття щільності інформації точно не є. Гарна відповідь на це питання повинна тривати повільнішими темпами.
Чарльз Стюарт

Досить справедливо. Мій єдиний намір був вказати питаючого на існуючу літературу з фізики в цій галузі.
Per Vognsen

1
Чарльз: Однією з сильних сторін голографічного принципу є те, що він не заснований на певній теорії чи ідеології квантової гравітації; вважається лакмусовим тестом, який запропоновані теорії повинні приблизно пройти. Мої знання теорії струн практично нульові, але мені сказали, що теоретики струн враховували голографічний принцип.
Per Vognsen

-4

Це цікаве і дещо кумедне питання, але воно погано сформульовано в його теперішній формі.

Я візьму на себе інший удар / ризик у відповідь, сподіваючись, що забивання спричинить первісну складність та основну / властиву "м'якій" неоднозначності питання на увазі, і що, виходячи з сучасних знань про літературу, існує кілька можливих шляхів, але, можливо, немає "правильної відповіді ".

Основним запитом, здається, є "фізичні аналогії в інформатиці", обсяг яких є одним з них. Тому це дуже пов'язане з цим іншим питанням. Фізика призводить до ТКС?

Щоб відповісти на це питання, я скористаюся кількома різними підходами, які, на мою думку, мають усі заслуги.


по-перше, одним із підходів, який іноді застосовують у галузі фізики та техніки, є "розмірний аналіз".

У цьому випадку строго трактується, об'єм знаходиться в одиниці "простір" або "довжина в кубі". (Хоча в приміщенні фізики іноді термін "простір" вимірюється або довжиною, або довжиною в кубі.)

O(n3)

O(n3)

O(nc)


Інший підхід до аналогії обсягу (та інших фізичних величин) у TCS полягає в наступному, як це обговорювалося в іншому питанні. Відомо, що SAT має точку переходу, надзвичайно аналогічну точці переходу у фізиці / термодинаміці, що відбувається, наприклад, з ідеальними газами при стисненні від однієї фази до іншої, наприклад, газ у рідину. Це відбувається при зменшенні обсягу (скажімо, ємності з газом). Зараз у SAT із випадковими входами основними двома параметрами щодо розміру входу є пункти та змінні. (Інший параметр - кількість змінних у застереженнях, хоча це часто фіксується на 3 для 3-SAT.)

Налаштування або пунктів, або змінних, зберігаючи інші фіксовані, висуває проблему труднощів через точку переходу легко-важко-легко. Тому здається, що ці параметри якимось чином аналогічні обсягу, хоча я не бачив конкретизованих специфік. Заглиблення в деякі глибокі статті зі статистичної фізики SAT можуть виявити аналог Volume. Див. [5] основне відображення САТ на термінологію статистичної фізики.

[5] Аналітичний та алгоритмічний розв’язання задач на здатність випадкових сатиссів Mezard, Parisi, Zechina
http://dynamics.org/Altenberg/UH_ICS/EC_REFS/K-SAT/Mezard.Science.297_812.pdf


lp

lp3


ps Я розділю це на окремі відповіді, якщо є підтримка, будь ласка, підкажіть цей коментар, якщо ви згодні. Я також повинен включити прийнятну на даний момент відповідь "немає сенсу в обсязі інформації!" & аргументуйте цю справу коротко
vzn
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.