ості інформації та обсягу даних. p align="justify"> Синтаксична міра - це міра інформації, яка оперує з знеособленої інформацією, не виражає смислового ставлення до об'єкта. Обсяг даних (V д ) вимірюється кількістю символів в повідомленні. У різних системах числення один символ має різну вагу:
В· У двійковій системі одиницею виміру є біт
В· У десятеричной системі числення одиниця виміру - дат
Кількість інформації I на синтаксичному рівні не можна визначити без розгляду поняття невизначеності стану системи. Насправді, отримання інформації про який-небудь системі завжди пов'язане зі зміною ступеня обізнаності одержувача про стан цієї системи. Розглянемо цей приклад докладніше. Нехай до отримання інформації одержувач має якісь попередні (апріорні) відомості про цю систему a . Мірою його непоінформованості про дану систему є функція H ( a ). Після отримання якого-небудь повідомлення, одержувач отримує деяку кількість додаткової інформації I b ( a ), і ступінь його попередньої необізнаності зменшується так, що необізнаність після отримання повідомлення b (апостериорная) знижується до H b ( a ). Кількість інформації, отриманої з повідомлення b , дорівнюватиме I b span> ( a ) = H ( a ) - H b ( a ). Іншими словами можна сказати, що кількість інформації зміною ступеня необізнаності про дану систему.
Інформація часто кодується кодами тієї чи іншої системи числення. Особливо актуальний характер це носить при поданні інформації в комп'ютері. Природно, що одне і те ж кількість символів (розрядів) в різних системах числення може передати різне число станів відображуваного об'єкта. Це можна представити у вигляді співвідношення:
= mn
N - число можливих відображуваних станів, m - основа системи числення, n - число розрядів) Найбільш часто використовувані системи - це двійкова і десяткова. Одиницями виміру в цих випадках - це біт і дит. Коефіцієнт інформативності (Y) повідомле...