情報
統語論はメッセージを表現する際に使われる形式を扱う。統語論はコミュニケーションにおける記号体系の論理や文法を研究する分野である。統語論は記号や記号体系の内容よりも形式を研究する分野である。
Empiricsはメッセージを伝達する信号、通信媒体の物理特性についての研究である。Empiricsは通信路とその属性(例えば、音、光、電子など)を研究する分野である。
Nielsen (2008)では、辞書における記号学と情報の関係を論じている。そこで提唱された lexicographic information cost という概念は、辞書を使う際に目的の項目を見つけるのにかかるコストと、その項目に書かれている内容を理解して情報を生成するのにかかるコストを指すものである。
Shu-Kun Lin は新たに情報を「データ圧縮後のデータ全体」と定義した。
1945年に提唱された「一般システム理論」は、その後、科学的・工学的な部分はシステム科学やシステム工学として広く発展し発展的解消のようになったため、以下は専ら哲学的な議論であるが、情報を「なんらかの「パターン」」だと「見なす」。パターンが別のパターンの生成・変換に影響を与える、と見なす。一般システム理論という考え方では、パターンを知覚する意識は理論に含まれておらず、パターンを評価する必要もない、と考える。例えばDNAについて見てみると、ヌクレオチドの配列は有機体の形成や発育に影響を与える。一般システム理論における《情報》はこうした用法で用いられており、意識がなくとも情報は存在する、として、システム内を(フィードバックによって)循環するパターンを情報と呼ぶことができる、と考える。
マクスウェルの悪魔という1867年ごろに考案され、20世紀にも議論が行われた思考実験に、情報が関わっている。この実験では、情報とエントロピーの直接的関係が示されている。この思考実験は長らく難問として議論の的となっていたが、1980年代に、系のエントロピーを増大させずに情報を破壊することはできない、との見解に達した。エントロピーの増大とは、一般的には熱の発生を意味する。この考え方を論理回路に適用すると、ANDゲートが発生する熱エネルギーの理論的最小値はNOTゲートのそれよりも大きいということになる(ANDゲートは2ビットを入力として1ビットを出力するため、情報が破壊されているが、NOTゲートでは単に反転させるだけで情報が破壊されていないため)。こういった理論は量子コンピュータとも関連する(可逆計算)。
量子もつれ現象によって、2つの粒子が分離して参照されていない状態で、ある種の、光速を超えて「情報」がもたらされる、ように見える現象がある(「相互作用」ではない)。2つの粒子が離れ、一方の粒子が観測されて量子状態が決定されたとすると、自動的に他方の粒子の量子状態も決定される(ベルの不等式の破れ)。