简述信息量与熵的概念

第一篇：简述信息量与熵的概念

简述信息化教学设计概念

在教育信息化环境下的教学设计，是运用系统方法，促进以学为中心的学习方式的转变，充分地、恰当地利用现代信息技术和信息资源，科学地安排教学过程的各个环节和要素，以实现教学过程的最优化。教育信息化环境下的教学设计是在传统的教学设计基础上的发展，这是由于信息技术的发展引起教学环境变化，从而引起教学活动的变化。

信息化教学设计是我们学习和实践国内外教育改革理论和新型教学方式的基础上，与中国教育改革现实相结合而发展起来的，它十分注意吸收全人类的教育理论精华为我所用

信息化教学设计以学生主体发展为中心的哲学理念,“以人为本”，主张教育要以学生为中心，反对以教师为中心的灌输式教育，强调在教学中科学地训练学生的思维能力。信息化教学设计以国家新课程改革的教育哲学作为行动的基础。在教师指导下、以学习者为中心的学习。学生是信息加工的主体，是认知结构的主动建构者，而不是外部刺激的被动接受者和被灌输对象;教师是意义建构的帮助者、引导者与促进者，而不是知识的传输者与灌输者。这样我们就可以把学生、教师、教学信息、学习环境作为信息化教育教学模式的四个要素，这四个因素相互作用、相互联系成为稳定的信息化教育的教学模式结构。

信息化教学设计的原则：强调以学生为中心。要以学为中心，注重学习者学习能力的培养。教师是作为学习的促进者，引导、监控和评价学生的学习进程;强调“情境”对意义建构的重要作用;强调“协作学习”对意义建构的关键作用。要强调与突出“协作学习”。这种协作学习不仅指学生之间、师生之间的协作，也包括教师之间的协作，如实施跨年级和跨学科的基于资源的学习等;强调对学习环境(而非教学环境)的设计;强调利用各种信息资源来支持“学”;强调学习过程的最终目的是完成意义建构。

总之，在进行信息化教学设计时，既要尊重几个基本的原则，还要考虑其运用模式，千万不能只是在教学过程中插入一段音乐或图片就算是把信息技术教学用好了，既要灵活，又要科学，这种新型的教学模式，应反映现代的教学理论和先进的教学思想，充分发挥学生的主体地位，让学生的创新思维尽情展现。

第二篇： 简述信息化教学设计概念

在教育信息化发展过程中，随着我国基础教育阶段新课程改革的全面实施，以学生发展为中心的新课程理念要求信息化教学资源的设计遵循新的设计理念，改变传统的资源设计思想。因此，扩大资源开发主体，选择恰当的设计原则与方法、以先进的教学理论为指导，设计面向学习者的“学教并重”的信息化教学资源等新型资源设计理念的贯彻，保障了信息化教学资源的质量，能够为新课程的顺利实施和信息化教育的发展提供良好的基础。新课程的改革和全面发展针对教学中的重点、难点，设计便于直接应用的信息化教学资源具体表现在入下三方面。

一.从实际出发，选择恰当的媒体技术。信息化教学资源是以现代信息技术为基础的教学资源，在资源设计过程中，在确定了资源的内容和表现形式以后，选择媒体技术时，要考虑国内各中小学信息化建设的实际，考虑师生获取新媒体的可能性，利用现有的媒体技术能开发的教学资源，不片面追求新技术，尽量选择在大部分中小学比较普及的媒体技术来设计开发教学资源，注意照顾学校之间、城乡之间的差异，选择恰当的媒体技术，增强信息化教学资源的适用性和推广性。

二.提高资源开发人员的信息化教学资源设计能力。信息化教学资源建设不同于传统的教学资源建设，设计者既要熟悉教学内容、新的教学理论、学习理论等知识，还要熟悉各种媒体技术和工具，具备相关的知识与技能，当前信息化教学资源开发人员的素质和能力参差不齐，接受过专业训练和相关培训的人员还比较少，要开发出符合新课程改革理念的信息化教学资源，必须提高教学资源开发人员的资源设计能力。

三.扩大信息化教学资源建设主体。信息化教学资源建设不仅仅是教育部门、教育公司和学校的事情，各类资源使用者、管理者以及社会各界人士都可以是资源建设者，各级教学资源中心要采取激励措施，调动学科教师、学生、管理人员和社区居民等人员参与资源建设的积极性。

第三篇：简述信息化教学设计的概念

信息化教学设计的概念：在教育信息化环境下的教学设计，我们将其简称为信息化教学设计，以区别于 90年代以前没有使用计算机和网络等信息技术的教学设计。具体说，信息化教学设计是运用系统方法，促进以学为中心的学习方式的转变，充分地、恰当地利用现代信息技术和信息资源，科学地安排教学过程的各个环节和要素，以实现教学过程的最优化。

教育信息化环境下的教学设计是在传统的教学设计基础上的发展，这是由于信息技术的发展引起教学环境变化，从而引起教学活动的变化。具有如下特点：

1、实践与理论相结合的产物。

2、以学生主体发展为中心的哲学理念，“以人为本”，主张教育要以学生为中心，反对以教师为中心的灌输式教育。

3、以国家新课程改革的教育哲学作为行动的基础。 信息化教学设计的基本原则有：

1、以学为中心，注重学习者学习能力的培养。教师是作为学习的促进者，引导、监控和评价学生的学习进程。

2、充分利用各种信息资源来支持学。

3、以“任务驱动”和“问题解决”作为学习和研究活动的主线，在相关的有具体意义的情境中确定和教授学习策略与技能。

4、强调“协作学习”。这种协作学习不仅指学生之间、师生之间的协作，也包括教师之间的协作，如实施跨年级和跨学科的基于资源的学习等。

5、强调针对学习过程和学习资源的评价。

第四篇：信息论中有关信源熵的不等式

论文题目： 信息论中有关各种熵之间关系的证明 学院：数学科学学院 专业：信息与计算科学 姓名：周艳君 学号：20071115158

信息论中有关各种熵之间关系的证明

07信息班 周艳君 20071115158

指导老师 王桂霞

摘 要 根据信息量与熵的定义和重要定理以及主要公式，对各种熵之间的关系进行分析和证明.

关键词 无条件熵 条件熵 联合熵 交互熵.

⒈基本定义

1.1信息就是对事物动态(或它的存在方式)的不确定性的一种描述.不确定 性及随机性，可以用研究随机现象的数学教具—概率论与随机过程来描述信息. 1.2自信息量：一个随机事件发生某一结果后所带来的信息量称为自信息量，简称自信息.用I(ai)来表示. 1.3联合自信息量：自信息量是二维联合集XY上元素aibj的联合概率

p(aibj)数的负值，称为联合自信息量.用I(aibj)来表示. 1.4条件自信息量：为条件概率对数的负值.用I(ai/bj)来表示. 1.5交互信息量：ai后验概率与先验概率比值的对数为bj对ai的互信息量, 也称交互信息量(简称互信息).用I(ai;bj)来表示. 1.6信源熵：信源各个离散消息的自信息量的数学期望(即概率加权的统计 平均值)为信源的平均自信息量，一般称为信源的信息熵，也叫信源熵或香农熵，记为H(X). 1.7条件熵：在联合符号集合XY上的条件自信息量的数学期望.可以用

H(X/Y)表示. 1.8联合熵：也叫共熵，是联和离散符号XY上的每的元素aibj的联合自信息量的数学期望，用H(XY)表示. 2.基本公式

2.1 自信息量：I(ai)log2p(ai) 2.2 联合的自信息量：I(aibj)log2p(aibj) 当X和Y相互独立时，p(aibj)p(ai)p(bj);则有：

I(aibj)log2p(aibj)log2p(ai)p(bj)log2p(ai)log2p(bj)I(ai)I(bj)

2.3条件自信息量：I(ai/bj)log2p(ai/bj) 或 I(bj/ai)log2p(bj/ai)

2.4互信息量：I(ai;bj)log2p(ai/bj)p(ai) (i1,2,,n;j1,2,,m)

n12.5信源熵：H(X)E[I(ai)]E[log2]p(ai)log2p(ai)

p(ai)i12.6条件熵：ⅰ：在已知随机变量Y的条件下，随机变量X的条件熵H(X/Y)为：

H(X/Y)E[I(ai/bj)]p(aibj)I(ai/bj)

j1i1mn

p(aibj)lo2gp(ai/bj).

j1i1mn

ⅱ：在已知随机变量X的条件下，随机变量Y的条件熵H(Y/X)为：

H(Y/X)E[I(bj/ai)]p(aibj)I(bj/ai)

j1i1mmn

p(aibj)lo2gp(bj/ai).

j1i1n2.7联合熵：H(XY)p(aibj)I(aibj)p(aibj)log2p(aibj).

i1j1j1i1nmmn2.8有关概率的基本公式：p(ai)1，p(bj)1，p(ai/bj)1，

i1nmnj1i1p(bj1mj/ai)1，p(ab)1，p(ab)p(b),p(ab)p(a)ijijjnmnmiji，i1j1i1j1p(aibj)p(ai)p(bj/ai)p(bj)p(ai/bj).

3.各种熵之间的关系 3.1无条件熵 3.1.2 H(X)H(X/Y)I(X;Y)H(X/Y). 证明：①H(X)p(ai)log2p(ai)

i1n

p(ab)logp(a/b)p(a/b)

ij2ijj1i1nijmnp(ai)

p(aibj)lo2gj1i1mp(ai/bj)p(ai)p(aibj)lo2gp(ai/bj)

j1i1mn

I(X;Y)H(X/Y).

②H(X/Y)p(bj)p(ai/bj)log2p(ai/bj)

ji

p(bj)[p(ai/bj)log2p(ai/bj)].

ji

由熵的极值性知：

H(X/Y)p(bj)[p(ai/bj)lo2gp(ai)]

ji

[p(bj)p(ai/bj)]lo2gp(ai)

ij

H(X),

其中 p(b)p(a/b)p(ab)p(a).

jijijijj同理： H(Y)H(Y/X)I(X;Y)H(Y/X). 3.1.2. H(X)H(XY)H(Y/X). 证明：H(X)p(ai)log2p(ai)

i

[p(bj)p(ai/bj)]log2ijp(aibj)p(bj/ai)ij

p(aibj)log2p(aibj)[p(aibj)log2p(bj/ai)]

ij

H(XY)H(Y/X), 同理：H(Y)H(XY)H(X/Y).

3.2条件熵 H(X/Y)H(XY)H(Y)H(X)I(X;Y). 3.2.1 H(X/Y)H(XY)H(Y). 证明：H(X/Y)p(ab)logiji1j1mnnm2p(ai/bj)

p(aibj)log2p(aibj)i1j1nm[p(ab)]logijj1i1mmn2p(bj)

p(aibj)log2p(aibj)p(bj)log2p(bj)

i1j1j1H(XY)H(Y),

其中：p(aibj)p(bj).

i1n3.2.2 H(X/Y)H(X)I(X;Y) . 证明：H(X/Y)p(aibj)log2p(ai/bj)

i1j1nm

p(aibj)lo2gp(ai)i1j1nmnmp(aibj)p(ai)n

m

[p(aibj)]lo2gp(ai)i1j1i1mp(aibj)lo2gj1ijip(ai/bj)p(ai)

H(X)I(X;Y), 其中：

p(ab)p(a).

j1同理：H(Y/X)H(XY)H(X)H(Y)I(X;Y). 3.3联合熵 H(XY)H(YX)

H(XY)H(X)H(Y/X)H(Y)H(X/Y)

H(X)H(Y)I(X;Y) H(X/Y)H(Y/X)I(X;Y). 3.3.1H(XY)H(X)H(Y/X)H(Y)H(X/Y) . 证明：H(XY)p(aibj)log2p(aibj)

i1j1nm

p(aibj)lo2gp(ai)p(bj/ai)

i1j1nnm

[p(aibj)]lo2gp(ai)p(aibj)p(bj/ai)

i1j1i1j1mmnm

H(X)H(Y/X),

其中：p(aibj)p(ai).

j1同理：

H(XY)H(Y)H(X/Y). 3.3.2 H(XY)H(X)H(Y)I(X;Y)

. 证明：H(XY)p(aibj)log2p(ai)p(bj/ai)

i1j1nm

p(aibj)lo2gp(ai)p(bj)i1j1nmmnmp(bj/ai)p(bj)n

[p(aibj)]log 2p(ai)[p(aibj)]log2p(bj)i1j1j1i1

p(aibj)log2i1j1nmp(bj/ai)p(bj)

H(X)H(Y)I(X;Y).

3.3.3 H(XY)H(X/Y)H(Y/X)I(X;Y). 证明：H(XY)p(aibj)log2p(ai)p(bj/ai)

i1j1nm

p(aibj)lo2gp(ai/bj)p(bj/ai)i1j1nmnmnmp(ai)

p(ai/bj)

p(aibj)loggp(bj/ai) 2p(ai/bj)p(aibj)lo2i1j1i1j1

p(aibj)lo2gi1j1nmp(ai/bj)p(ai)

H(X/Y)H(Y/X)I(X;Y) 3.4交互熵 I(X;Y)I(Y;X)

I(X;Y)H(X)H(X/Y)H(Y)H(Y/X)

H(XY)H(X/Y)H(Y/X)H(X)H(Y)H(XY) . 3.4.1 I(X;Y)H(X)H(X/Y)H(Y)H(Y/X) 证明：I(X;Y)p(aibj)log2i1j1nmnmp(ai/bj)p(ai)

nm

[p(aibj)]lo2gp(ai)p(aibj)lo2gp(ai/bj)

i1j1i1j1m

H(X)H(X/Y), 其中：p(aibj)p(ai).

j1同理：I(X;Y)H(Y)H(Y/X). 3.4.2证明: I(X;Y)p(aibj)log2i1j1nmp(ai/bj)p(ai)

p(aibj)log2p(ai/bj)p(bj/ai)i1j1nmnmnm1

p(aibj)p(aibj)log2p(aibj)p(aibj)log2p(ai/bj)

i1j1mi1j1p(aibj)log2p(bj/ai)

i1j1nH(XY)H(X/Y)H(Y/X).

3.4.3证明：I(X;Y)p(aibj)log2i1j1nmp(ai/bj)p(ai)

p(aibj)lo2gi1j1nmnmp(aibj)p(ai)p(bj)

mn

[p(aibj)]lo2gp(ai)[p(aibj)]lo2gp(bj)

i1j1mj1i1

p(aibj)lo2gp(aibj)

i1j1n

H(X)H(Y)H(XY). 其中：p(aibj)p(ai)，p(aibj)p(bj). j1i1mn参考文献

[1]傅祖芸，赵建中.信息论与编码.电子工业出版社,2006,4. [2]邓稼先，康耀红.信息论与编码.西安电子科技大学出版社,2007,5. [3]陈运.信息论与编码.电子工业出版社,2007,12.

[4]贾世楼.信息论理论基础. 哈尔滨工业大学出版社,2002,6.

第五篇：信息时代旅行社营销策略简述

随着计算机技术的不断发展，计算机网络的不断普及，使旅游信息的传播不再受时间和空间的限制，旅游经营者和旅游消费者能够建立起直接的联系。

在以往的旅行社组织当中，过分强调“分工”，导致机构臃肿，效率低下，使员工工作乏味，也失去了原有的创造力。旅行社通常由外联部，采购部，市场部，人事部，计调部，接待部和财务部组成，各个部门的工作很受限制，并且效率也不高，可是如果利用信息技术增加了信息部，建立一个数据库，那么将极大的提高旅行社的工作效率，也为每一位员工提供了更充余的时间去提高工作技能。我认为旅行社通过网络营销有以下几点优势。首先，与传统营销模式相比网络营销有更大的灵活性。旅行社可以通过建立自己的网站或网页，或把几条旅游路线放在网上让消费者选择，或让消费者自行设计旅游路线，通过点击率的统计，可以看出大部分旅游者的爱好偏向，为以后可设计出更多满足旅游者需求的线路而提供了参考依据。其次，旅行社可以通过计算机的统计工具，统计出哪条线路在哪段时期经营较旺，哪条线路的哪个景点去的游客最多，哪个景点在哪段时期出售率较高。得到了这些统计数据，旅行社就可以有针对性的进行宣传，当游客正有这些需求的时候，通过有力的宣传把他们拉拢到自己身边，不但吸引了更多的客源，还减少了一些无谓的宣传费用。再者，利用网络营销可以突破时间和空间的限制，既可以节省门店的日常开销支出，也可以为旅行社挖掘更多的客户。如今电子商务正如火中天，新型的商业模式给传统的零售行业带来了不小的挑战。旅游业也应该借助网络这个平台积极开展电子商务，将我们的服务更全面的推送给消费者，满足他们的需求。旅游业是一个集食，住，行，游，购，娱的综合产业，旅行社作为中间商有义务去整合各种信息资源，为旅游者提供物美价廉的品质旅游。因此一个强大的信息数据库必不可少，而这个就是我们的门户网站。我们可以通过门户网站完成市场调研，产品销售，售后服务等步骤，极大地提高了工作效率，同时也节约了成本。下面简单谈谈建立门户网站的步骤

(1)建立自己的站点，设计自己的网页(注意突出自身特色)，在网上开展广告活动，树立形象，推销自己组织的旅游产品。网页要做得吸引人，形象美观大方，内容要图文并茂。

(2)网站内容的丰富性，我认为可以建立几个不同类型的主题旅游吸引消费者眼球。如根据消费者类型可以设立毕业旅行，单身派对旅行，夕阳红旅行等，根据旅游目的地可以设计古镇风情旅行，商业文明旅行，自然风光旅行，异域风情旅行等。通过不同的主题栏目满足不同人群的需求。

(3)开展交互式的旅游服务。过去旅行社提供的线路都是旅游社自己设计好再推销给游客的，游客很难根据自己的意愿加以修改。如今在互联网上，旅游社和游客之间的交流极其迅速和快捷，双方可以进行“交互式”的信息沟通，旅游者不再是一个仅仅被动的接受者，而可以通过互联网向旅行社提出“我需要何种旅游”。这样，旅行社就从主要提供旅游产品发展到主要提供旅游信息和创意，而让旅游者自身参与进来，也是旅游个性化发展的必然结果。

综上所述，我认为旅行社有必要改变传统营销观念，主动利用互联网来宣传自己的产品，开展网上采购以及网上产品促销和销售，利用互联网进行信息反馈。通过这种经营模式推动现代旅游业的发展，让旅游活动更加充满人性关怀，更加能够满足人们进行旅游活动的心理需求和自我实现的需要。