Теории информации

Понятие энтропия информации ввел один из авторов теории информации - Шеннон. Поводом для этого послужил чисто формальный признак функция Шеннона, связывающая информацию с числом N возможных событий в поведении системы, математически оказалась сходной с Н-функцией Больцмана. Мерой энтропии информации I по Шеннону служит не само число N, а его логарифм по основанию 2 [c.10]

За последнее время появились работы, в которых исследуются возможности значительно превзойти общепринятый пр дел разрешения оптической системы без увеличения диаметра объектива или уменьшения длины волны излучения. Это связано с применением для решения данной задачи методов теории информации. Охарактеризуем суть этих весьма перспективных исследований в приложении к рассматриваемой задаче — возможности увеличения разрешающей силы телескопа, хотя, конечно, они имеют более общее значение. [c.337]

Научной основой МО НК является метрология — наука об измерениях с использованием элементов теории информации и теории распознавания образов и ситуаций. [c.25]

Раскрытие этих связей возможно на основе функциональных зависимостей с привлечением теории вероятностей и теории случайных процессов, методов оптимизации, теории информации и математической логики и других разделов математики [c.11]

Связь между термодинамикой и теорией информации определяется еще и тем, что производство, преобразование и получение информации требуют затраты энергии. Чтобы познать что-то в любой форме — произнести фразу, записать ее на бумаге и т. д., — надо затратить энергию, но неизвестно, какова количественная связь между затраченной энергией и полученной информацией. [c.172]

Мы видели, как через энтропию и энергию термодинамика проникает и в теорию информации, и в кибернетику, и в биологию... Но встречаются случаи, когда термодинамикой называют совокупность соотношений, чисто внешне подогнанных под термодинамические, но не имеющих ничего общего ни с изменениями энтропии, ни с превращениями энергии. К таким случаям относится и термодинамика процесса производства или экономическая термодинамика . [c.182]

Несколько особняком стоит специальная двоичная логарифмическая единица бит, применяемая в теории информации. Если данная информация определяется из возможного числа п равновероятных событий, то мера этой информации дается выражением [c.343]

В теории информации наряду с двоичной единицей битом применяется натуральная единица нат — натуральный логарифм равновероятных возможностей. Очевидно, [c.344]

Теория проектирования машин-автоматов развивается в наши дни, базируясь не только на математике, электронике и механике, но и на ряде физикохимических дисциплин, причем она все шире использует аналитические методы, в частности методы теории информации. Важное значение для нее имеет разработка теории производительности автоматических систем и их надежности. [c.33]

В теории машин-автоматов нашли применение современные методы теории информации. Информационны подход позволил расклассифицировать автоматы по существенным признакам, связанным с числом потоков информации и с методами их использования, увязать методы теории машин-автоматов с общими методами теории автоматического управления. [c.34]

Для решения задач были разработаны на базе метода канонических разложений случайных функций общие методы определения оптимальных линейных систем для нестационарных входных сигналов, применяемые к системам с любым числом входов и выходов, а также решен ряд частных задач по определению оптимальных систем различного назначения. Кроме того, нри помощи теории канонических разложений был разработан общий метод нахождения оптимальных систем и оптимальных алгоритмов обработки информации но любым статистическим критериям качества. Этот метод, применимый к линейным и нелинейным системам с любым числом входов и выходов, позволил объединить одной общей теорией все задачи обнаружения сигналов в шумах и их оптимальной обработки, возникающие в теории информации, теории связи, радиотехнике, автоматике и других областях науки и техники. Было показано, как этот общий метод может быть применен для построения алгоритма обучающихся машин. [c.274]

Развитие теории информации наложило глубокий отпечаток на весь дальнейший ход совершенствования средств связи, прежде всего средств дальней проводной связи. Становились очевидными преимущества как в отношении надежности, так и в отношении эффективности кабельных линий по сравнению с воздушными линиями на магистралях электросвязи страны. Поэтому рассматриваемый период стал периодом интенсивного строительства кабельных линий на основе созданной советскими специалистами оригинальной аппаратуры уплотнения. [c.391]

Как указывалось выше, теория и проектирование машин и систем машин автоматического действия родились на стыке двух наук механики машин и теории управле ния. Механика машин развивалась и развивается на базе теории механизмов и машин, а теория управления — на базе классической теории регулирования. Привлекая к решению своих задач аппарат современной математики, достижения в области физических наук, используя теоретическую механику, теорию информации, кибернетику, электронику и другие фундаментальные науки, механика машин и теория управления машинами призвана развивать инженерные методы анализа и синтеза машин-автоматов и систем машин автоматического действия. [c.133]

Предполагаем, что г) (i) и х (О — S-коррелированные гауссовские случайные процессы. Условию (6.76) соответствует следующая физическая интерпретация левой части равенства (6.76) соответствует среднеквадратичное отклонение параметрической системы, а правой части — модели-эталона. На практике часто о возмущениях имеется неполная статистическая информация, а известен лишь уровень нагрузок. С точки зрения оптимальных статистических решений и методов теории информации в этом случае в качестве расчетных воздействий необходимо, принимать б-коррелированный случайный процесс с интенсивностью, равной амплитуде нагрузки. Таким образом, решению задачи (6.76) соответствует решение задачи оптимизации параметрических систем в условиях существенно неполной статистической информации. [c.255]

Базируясь на теории вероятностей и математической статистике, а также на смежных с ними дисциплинах —теории массового обслуживания, теории информации, математической логике и других, —созданы и разрабатываются специальные методы расчета, связанные с основными аспектами проблемы надежности изделий. При этом, как справедливо указывает акад. Б. В. Гнеденко, математика является лишь средством исследования и расчета, но не самоцелью. Во главе всегда [c.36]

В математической теории надежности рассматриваются методы расчета и анализа, связанные с оценкой степени надежности изделий, с контролем их качества, обработкой опытных данных по надежности, выбором оптимальных решений, резервированием, оценкой происходящих процессов потери качества, анализом законов распределения показателей надежности и долговечности. В этом разделе изучаются теория вероятностей и математическая статистика, основы теории массового обслуживания, элементы теории информации, математической логики, методы оптимизации и другие применительно к задачам надежности, а также математические методы расчета надежности (имеется в виду расчет сложных систем и резервирование, контроль качества и т. д.). [c.282]

ОСНОВНЫЕ ПОНЯТИЯ ТЕОРИИ ИНФОРМАЦИИ [c.336]

Теория информации является самой новой ветвью прикладной теории вероятностей [84]. [c.336]

В теории информации употребляется кодирование цепочками последова- [c.342]

Основные понятия теории информации [c.359]

X и и ч и EI А. Я., Об основных теоремах теории информации. Успехи мат. н. XI, вып, I (67) (1956). 17-75. [c.359]

Энергия потенциальная 376 Энтропия (в теории информации) 336, 337, 338, 340 Эпициклоиды 279 [c.592]

Б области автоматизации дуговой сварки определились тенденции производства работ установками с программным управлением, и по принципу слежения в ИЭС им. Е. О. Патона создан станок с программным управлением. Рядом организаций созданы искатели, перемещающиеся перед дугой и определяющие параметры отклонений от нормальной подготовки кромок. Создаются самонастраивающиеся системы, содержащие блоки памяти и действующие по принципу систем с обратными связями. Это уже переход к автоматическим вычислительным методам с использованием теории информации. Искатели строятся на разных принципах с применением радиоактивных изотопов и т. д. [c.114]

Вот почему телескопы изготовляются с возможно большим диаметром объектива. Уменьшение длины волны также приводит к увеличению разрешающей силы телескопа. Пользуясь методами теории информации, при данных г ш X можно получить разрешающую силу, значител1>но превышающую разрешающую силу, вычисленную по (7.36). [c.199]

Таким образом, успех решения задачи, в первую очередь, определяется погрешностью измерений, т.е. уровнем шумов. Следовательно, статистическая обработка результатов измерений и применв ще различных методов теории информации, ограничи-вающих влияние шумов, приобретают первостепенное значение в увеличении разрешающей силы оптических инструментов. [c.339]

Тогда против демона выступил — в 1950—1960 гг.— один из творцов теории информации, крупный французский физик Л. Бриллюэн, обнаруживший в его работе еще один изъян невозможность видеть отдельные атомы. Дело в том, что за 30 лет до создания квантовой теории Планка (1900) и термодинамики излучения Максвелл не подумал о включении излучения в систему, находящуюся в равновесии при температуре Т. Но демон-то в темноте не может видеть молекулы и управлять дверцей Конечно, если он демон и достаточно ловок, то попытается использовать другие средства обнаружения—будет измерять силыВан-дер Ваальса, силы, обусловленные электрическими диполями или магнитными моментами и т. д. Но все эти силы действуют на малых расстояниях, и демон обнаружит молекулу слишком поздно, чтобы можно было открыть дверцу, не совершая никакой работы. А кроме тою, те силы, которые помо- [c.169]

Тем не менее всего лет 15—20 назад эта связь была развита до такой степени, что уже на основе теории информации (а Не наоборот ) разработана сложная система универсальной — обратимых и необратимых процессов — термодинамики, вытекающая из единой группы исходных уравнений (автор ее американец М Трайбус). Заметим, что до этого существовали отдельно термодинамика обратимых, то есть идеальных, процессов — классическая, и термодинамика необратимых — реальных процессов. В первой все реальные процессы рассматриваются и просчитываются как идеальные, обратимые а для учета их действительной необратимости конечные результаты умножаются на соответствующие поправочные опытные коэффициенты. Во второй в исходные зависимости включаются показатели — скорость возраста- [c.172]

Макроопыты. Выше, при обсуждении тех или иных элементов теорий процесса накопления рассеянных микродефектов, уже неоднократно упоминались макроопыты. В любой модели реального тела, построенной с учетом микроструктуры, должна быть указана система макроопытов, позволяющая, с одной стороны, снабдить теорию информацией для построения тех или иных функций, а, с другой стороны, произвести количественную проверку согласованности свойств модели с существенными в рассматриваемой ситуации свойствами реального тела, т. е. проверку того, отражены ли и адекватно ли отражены в модели самые существенные свойства реального тела в изучаемой ситуации. [c.598]

Таким образом, в рассматриваемый период возникла необходимость в новой теории, которая в процессе становления получала различные наименования статистическая теория связи , общая теория связи и, наконец, более широкое — теория передачи информации , или просто теория информации . Существенной основой для ее развития послужила математически обосноваццая А. Котельниковым в 1933 г. теорема, позволявшая рассматривать не1 рерывный сигнал (телефонный, телевизионный и т. п.) состоящим из ограничерцрго числа прерывистых (дискретных) сигналов. Исходя из [c.390]

Из теории информации известно, что производительность источника информации. не должна превосходить пропускную способность ка нала связи. Применительно к ПДМ первым параметром является объем формальной информации в программе, воспринимаемой обучаемым в единицу нормированного учебного времени, а вторым — его условная средняя пропускная способность. Последняя по рекомендациям [2] для II и III уровней усвоения находится в пределах 1,5 3 бит]сек. В свете изложенного критерий посильно-сти ПДМ принимает вид [c.394]

В первый том справочника включены основные сведения по теории информации, а также по теории механического подобия и моделирования во втором томе заново написан раздел Химия , в котором уделяется должное внимание пластмассам, раздел Электротехника дополнеиданиымипо электронике,переработан раздел Теплота и др. [c.599]

Энциклопедия по машиностроению XXL

Оборудование, материаловедение, механика и ...