ビットとは
ビットとは、情報の量を表す単位です。
1ビットとは、天気が晴れか雨か２とおりしかないとした場合、どちらかが実現することを事前に知っている人が持っている情報の量です。
ビットとはこのように２進数と関係が深いことから分かるようにBINARY DIGIT（２進数の桁）を元に作られた言葉です。
アルファベットや半角のカタカナなどは全部あわせても２５６種類以下です。そこで１文字が隠されている場合に、２５６種類のいずれかであることを予め知っている人が持っている情報量は、８ビットです。
これは、２５６が２の８乗（２を８回掛け合わせたもの）であることから分かります。
なお、数学的には、ビットとは、生ずる現象の確率の逆数の対数（２を底とする）として定義されます。
１ビットとは、天気が晴れか雨か２とおりしかないとした場合、どちらかが実現することを事前に知っている人が持っている情報の量です。
従って、確率が１／１０２４の場合の情報量は、１０ビットです。また、バイト単位では、１．２５バイトです。