1.2 信息分析的产生和发展
1.2.1 信息分析的产生过程
信息分析首先产生于科技领域,是科技、经济和信息工作发展到一定阶段的产物,是提高科技劳动效率和科技管理科学化的必然要求。从15世纪资本主义萌芽到19世纪70年代,常被称为近代科学技术时期。这一时期的科学研究以分散的个体自由研究为主要特征,虽然各个研究者自发形成了一些学术团体,创办了一些学术期刊,但是总体上科学信息的传播交流基本上都是自发进行的,科学信息工作还只是科学研究工作的微不足道的组成部分。
从19世纪70年代到第二次世界大战前夕,这一时期被称为现代科学技术发展的前期。随着科学技术的发展,学科分支增加,研究课题复杂,使得科学研究趋向于有组织的集体研究;同时文献数量迅速增加,研究人员开始感觉到资料收集的困难,使得文摘刊物应运而生。自1830年德国《药学文摘》创刊到1940年美国《数学评论》的问世,从事科技信息的整理加工和编写报道等二次文献的出版机构纷纷成立,以提供文献检索服务为主题的世界权威性的涵盖各知识门类的检索期刊体系已被完整确立,信息分析工作开始出现萌芽。
第二次世界大战之后,现代科学技术进入飞速发展时期,即所谓“大”科学时代。独立服务于科学研究和科技管理的科技信息机构开始登场。科技信息机构的一个重要任务就是将众多的各种文种、各种载体、分散重复的文献整理加工,并且对其内容进行深入分析、综合、评价和预测,这一工作的出现具有划时代的意义,表明了科技信息工作进入了一个新的阶段,也表明了信息分析工作从此产生。
20世纪中期以来,信息技术迅猛发展从根本上改变了传统信息服务的技术手段。特别是70年代以后,计算机与远程通信技术密切结合,为现代化信息服务业务的开展创造了必要的技术条件,将信息服务推进到网络化、数字化时代。同时,整个世界呈现出科技、经济、社会一体化发展趋势,因此信息分析开始从科技领域向其他领域渗透。
为了满足社会各阶层多样化的信息需求,除科技信息外,技术经济信息、市场信息、社会信息、政治军事信息等都开始成为信息分析的对象。在这些全方位的信息分析领域,研究者不断形成和完善各种新的分析方法,深化信息分析内涵,增加分析结果的准确性,使得信息分析成果的质量得到极大的提高。这样一来,作为信息服务业的一个重要分支,信息分析才真正诞生了。
1.2.2 信息分析的发展概况
1.国外发展概况
在国外,信息分析是信息服务业的重要组成部分,特别是咨询服务业,通常由一些专业性的机构和团体完成,包括政府及各部门的决策附属机构、信息服务机构、咨询服务机构、科学研究机构、行业协会、社会团体等。各国的信息分析在发展过程中因社会环境的差异,形成了各具特色的信息分析体系。下面以美国和日本为例进行说明。
(1)美国的信息分析
美国的信息分析始于软科学研究机构,主要分为五种类型:①信息分析中心,主要任务是由专家就某一问题及时写出评价性的、分析性的综述。②思想库或智库,主要是为统治集团在各个领域进行调查研究,出谋划策,并为美国政府培训、储备和输送人才。思想库是一种稳定的、相对独立的政策研究机构,其研究人员运用科学的研究方法对广泛的政策问题进行跨学科研究。美国思想库的信息分析在世界上享有盛誉,主要是因为它们具有良好的信息环境、高素质的研究人员、靠近决策层以及独立自主的地位,如兰德公司、斯坦福国际咨询研究所、布鲁金斯学会、巴特尔纪念研究所等。③咨询机构,其产品形式包括研究报告、专利数据库、可行性报告、工程分析与技术支持等。主要靠有效的市场调研和高质量的信息服务盈利。④联邦信息机构,隶属于国务院。⑤企业信息机构,即公司或企业的信息分析中心。
【阅读材料】
美国兰德公司的预测神话
1946年兰德项目组刚刚成立,开展的第一个项目就是有关人造卫星的初步设计。20世纪50年代初,兰德公司向美国国防部提出过不少有关卫星的研究报告,详细论述了人造卫星在未来作战中所发挥的无与伦比的作用,但当时五角大楼的官员们却搞不清卫星到底为何物,并没有引起重视。直到1957年苏联抢先发射了第一颗人造卫星,这时美国政府高官才回想起兰德公司在该领域所做的一系列研究与预测,自此把兰德公司奉为上宾。兰德公司对于苏联最著名的研究,是根据公开信息成功预测苏联于1957年发射第一颗人造卫星,具体时间仅相差两周。
1950年朝鲜半岛局势风雨飘摇之时,兰德公司才刚成立不久,对新中国各方面情况的了解不可能很多。但它通过组织大量专家进行研讨、分析中国参战的可能性。最后得出了“中国将出兵朝鲜”的结论,并因此震惊世界。兰德公司希望以500万美元的价格将“中国将出兵朝鲜”的研究结论和研究报告卖给美国政府和军方,但被拒绝。战后,美国政府仍以200万美元的高价买下了这份研究报告,以此作为决策失败的教训,兰德公司却因此而声名鹊起。
从发展阶段来看,20世纪80年代中期以前,美国的信息分析主要侧重于政治情报研究,主要标志是美国中央情报局及其所开展的一系列工作,对美国的政府决策者产生了直接而关键的影响。20世纪80年代中期以后,美国的信息分析开始向以企业运作为核心的竞争情报研究转移,主要标志是美国成立了竞争情报专业人员协会(Society of Competitive Intelligence Professionals,SCIP),强化获取和分析经济信息、市场信息、商贸信息等的手段和能力,增强自身竞争力。
【阅读材料】
美国重视利用公开信息进行分析
美国历来十分重视信息分析研究。美国中央情报局原局长希伦科特(Hillenkoetter)曾指出:“大多数公开情报信息来源于诸如外国书刊、科技调查报告、图片、商业分析报告、报纸和新闻广播,以及精通国际关系的提供综合性看法之类的普遍渠道。”利用合法手段进行信息搜集和研究是美国的一贯方针,在情况活动中占有重要地位,目前以公开手段获得的情报信息已占美国整个情报量的80%左右。
1992年3月,比尔·盖茨在“情报改革计划”中提出设立“公开情报协调员”,要求充分利用公开资料,通过协调使政府部门的研究机构相互通气,形成一个整体。
在美军抓获萨达姆的战斗中,军事情报分析人员发挥了重要作用,据称美国中央情报局在世界各地有文职情报分析人员达1万多人。
美国的信息分析侧重于以下工作:编写评价性、分析性的综述;编写动态信息;广泛搜集反映各国潜在能力和意图的信息,并加以分析和评价,提供给政策制定者;了解情报、分析形势、出谋划策、提供对策、充当政府机构和重要财团的幕后决策支持机构和咨询机构;提供政策咨询、管理咨询、科技咨询、医疗咨询、技术咨询、工程咨询、法律咨询等各类咨询服务。在信息化高度发达的今天,美国的信息分析尤其注重创新性研究和开放式研究,信息分析贴近高层决策、与战略研究相结合,呈现出综合化发展趋势。
(2)日本的信息分析
日本的信息分析是在服务于经济扩张和科技发展的过程中产生的。日本十分重视信息分析,把信息分析作为国力指数的十大要素之一,认为它是综合国力的重要体现,在国家科技和经济发展中发挥了重要的战略作用。日本把开展信息分析的机构统称为思想库或智库,主要有为决策服务的官方思想库、民间思想库(智库)以及进行技术、行业信息分析的情报调查机构和企业情报调查机构三种类型,如日本科学技术情报中心和日本贸易振兴会,前者是日本最大的国家级情报机构,后者是商业性协会,它们是日本重视技术经济情报收集和分析的典型体现。日本的信息分析紧密围绕技术、经济、金融等问题展开,主要包括科技政策研究、技术动向分析、国际技术跟踪以及全球性经济问题的研究。
【阅读材料】
日本重视信息搜集和利用
日本是一个非常重视信息搜集和利用的国家,由于第二次世界大战战败国这一局限,公开情报信息搜集与研究是其主要的情报手段和情报来源。不仅政府和专业情报机构积极开展此项工作,而且以委托的形式,借助民间机构进行。日本文部省还组建了一个搜集、分析世界各国科技情报的专门组织—“研究开发战略中心”,每年投入经费高达600亿日元,重点是在分析世界各国科技信息的基础上,研究日本应该重点投资的领域。
20世纪60年代,我国刚刚建设大庆油田,当时是保密的,国内大都不知它的地址,可日本人很快就知道了。他们是怎么知道的呢?他们靠的就是零零星星搜集到的关于大庆的公开资料。日本人首先看到《中国画报》封面上“王铁人”王进喜的照片,身穿大棉袄,冒着鹅毛大雪,他们估计这很可能是在东三省北边,否则不会下这么大的雪。当他们看到《人民日报》一篇报道说,王进喜到了马家窖,并说了一声:“好大的油海啊,我们要把中国石油落后的帽子扔到太平洋里去”。由此他们又知道马家窖是大庆油田的中心。地址找到了,什么时候出油呢?他们也预测准了。1964年王进喜出席了第三届全国人民代表大会,日本人认为大庆油田肯定出油了,不然王进喜就当不了人民代表。接着,他们又根据《人民日报》一上幅报道铁人王进喜的新闻照片推算出了大庆油田的石油产量:他们根据照片上王进喜的身高大致估算出了他身后石油钻塔的高度,又从钻台上手柄的形状推算出了油井的直径是多大,再根据钻塔高度、油井直径和国务院政府工作报告来套算,把全国石油产量减去原来的石油产量,就是大庆油田的石油产量。在此基础上,他们很快设计出适合中国情况的石油设备。等我国向世界各国征求设计方案时,日本人已经做好了准备,很快谈判成功。
2.国内发展概况
我国的信息分析始于科技领域,早期称为科技情报研究。自1956年成立中国科学院科学情报研究所以来,我国的科技信息事业已经走过了60多年的历程。长期以来,我国的信息分析工作伴随着国家的科技和经济建设在曲折中前进。信息分析工作在加快我国科技与经济发展,在政府决策以及科技、经济和社会管理领域的各项决策中发挥了重要作用。我国信息分析工作是在学习和借鉴国外类似工作的基础上形成的,大体经历了四个发展阶段:
1)1956~1966年,信息分析的产生和初步发展时期。主要标志为:①1956年中国科学院正式成立了我国第一个科技信息机构——中国科学院科学情报研究所,1958年更名为中国科学技术情报研究所;②1958年,国务院批准了《关于开展科学技术情报的工作方案(草案)》,提出了我国科技信息工作的任务,对管理体制、机构设置、建立全国科技信息体系、发展专业的和地区的科技信息机构等做了明确的规定。
2)1967~1975年,信息分析工作停滞时期。
3)1976~1992年,信息分析工作的恢复和重新发展时期。“文革”结束后,从中央到地方,一些科技信息机构得到恢复,科技信息分析工作得到充实和加强;1983年,中国科技情报学会组建了情报研究专业委员会(后改为信息研究与咨询专业委员会、信息咨询专业委员会),标志着科技信息分析有了自己的学术研究、交流的组织和平台。
4)1992年以后的发展时期。主要标志为:①1992年,第八次全国科技情报工作会议将“科技情报”更名为“科技信息”;②1995年,中国科学技术情报学会竞争情报分会成立,对外称为中国竞争情报研究会(Society of Competitive Intelligence of China,SCIC),推动了面向企业的竞争情报在中国的崛起和发展;③随着市场经济体制改革的深入,大多数科技信息机构开始由社会公益型向服务经营型转变,与此同时,各类信息中心、咨询公司、信息服务公司、网络信息服务商及政府的经济与政策研究机构等纷纷成立,不同程度地加入了信息分析行列,此外,国外著名的市场调查研究机构、咨询公司、数据库服务商等也纷纷登陆中国,在我国形成了一个规模庞大的、迅速增长的行业;④科技信息改变运行机制,逐步进入市场,增强了竞争实力,信息分析开始发展成为一项经常化、社会化、规范化的信息深加工活动;⑤进入21世纪以后,伴随战略研究的兴起及其在经济和社会发展地位的日趋重要,基于信息分析的战略研究开始成为人们关注的焦点;⑥随着大数据时代的到来,信息分析的对象和手段发生了革命性变化,大数据分析、数据挖掘、知识发现及其可视化展示等成为信息分析的热点问题。
随着我国科技、经济和社会的快速发展,信息分析工作也逐步发展完善和成熟,与早期的科技信息工作相比,现代信息分析工作发生了一系列根本性的变化:①在服务目的上,从作为科学研究的前期工作逐渐转变为直接参与科学决策、研究与开发、市场开拓等活动,成为现代科学决策、研究与开发、市场开拓等活动的首要环节;②在服务内容和范围上,从单纯面向科技领域的信息服务转向面向政治、科技、经济、军事、社会等广泛领域的信息服务,从简单的“发生什么事”的情况研究发展到“应该怎么办”的综合性对策研究和面向宏观决策的战略研究,从以传播国外科技信息为主转向国内与国外信息分析相结合,特别注重国内外信息的分析与比较研究;③在服务方式上,从无偿服务逐步向有偿服务转变;④在研究方法上,从单纯的定性研究转向定性与定量相结合,从传统的单层次、单目标、单因素研究转向多层次、多目标、多因素及其相互关系的综合研究。
尽管我国的信息分析发展已经取得了很大的成就,建立了完整的信息分析体系,成为政策决策和各行业领域科学决策的重要依托,但我国的信息分析工作仍然存在很多问题,与发达国家仍然存在着巨大的差距,因此,我国的信息分析工作发展仍然任重道远。
【阅读材料】
信息分析在我国科技、经济发展中发挥了巨大作用
我国研制第一颗原子弹时,对氟的提取是通过调研国外期刊中的65篇文献获得成功的。
20世纪英国皮尔金顿公司在向我国转让浮法玻璃生产技术时,一开始竟要入门费2500万英镑。情报部门经过对专利情报的信息分析,发现该公司围绕此项技术的137项专利中有51项已经失效,在事实面前,英商只得把入门费降低为52.5万英镑,约为原来的2%,为国家节约了大量外汇。
1.2.3 信息分析面临的机遇和挑战
21世纪是信息时代、数据时代、网络时代,也是知识经济时代。信息分析作为一种典型的信息深加工活动,在信息时代、数据时代、知识经济时代将大有可为。在社会信息化的过程中,信息技术飞速发展,全球网络化趋势不断加强,经济体制改革进一步完善,这些都给信息分析带来了前所未有的机遇。主要体现在:信息技术尤其是计算机技术、远程通信技术、数据库技术和网络技术的迅速发展和广泛应用,加强了信息搜集、分析、处理、加工和存储的能力;定量分析方法应用软件的成熟为信息分析进行定量研究提供了工具;网络化发展趋势,加快了信息交流传递的速度,扩大了信息分析的来源,并为信息分析产品的发布和信息分析人员的交流建立了平台;市场经济体制的建立与完善,加快了经营市场化的进程,促使政府和企业决策由经验决策向科学决策转化,信息分析和咨询服务的社会需求不断增加。
知识经济、数字网络时代,信息分析的发展同样也面临着严峻的挑战:①陈旧的信息分析体制已不能满足知识经济和数字网络时代社会发展和用户的需求;②面对社会信息量的激增,必须通过提高搜集、分析、处理、加工和存储信息的能力,增加信息“吞吐量”;③面对新旧信息更迭加快,必须提高信息分析工作的节奏,缩短从搜集信息到产生和发布信息分析产品的周期;④必须逐步提高定量分析的比重;⑤需要进一步改善信息分析队伍的知识结构。
1.2.4 信息分析的发展趋势
随着科技、经济、社会的发展,人们对信息分析提出了越来越多、越来越高的要求,信息分析本身也在不断发展和演变,呈现出一些新的特征和发展趋势。
1)信息分析方法向多元化发展。由于信息分析本身并没有特有的方法,吸收和借鉴其他学科的分析方法显得尤为重要。信息分析人员从相关学科引入分析方法,在应用中对其进行拓展、改进和创新,形成自己的特色。用户需求的多元化和多层次性,促使信息分析方法呈现出显著的多元化趋势。
2)信息分析市场化和产业化。市场经济的发展,使得信息分析研究不再仅为政府部门服务,而成为以市场需求为导向、以满足用户需求为目的市场行为。随着信息服务市场的规模持续扩大,信息分析的产业化趋势将更加明显。从国外的发展经验来看,美国的兰德公司、日本的野村综合研究所、英国的国际战略研究所等信息分析机构都已经实现了规模经营,产业化程度很高。
3)信息分析研究国际化。信息分析的国际化体现在信息分析服务的国际化和研究交流的国际化两个方面。随着信息的发展,尤其是互联网的广泛应用,信息分析研究的领域不断扩大,为各国之间的信息分析研究的横向联系、协作研究奠定了基础。相关数据表明,麦肯锡公司的服务收入中有57%来自分散在国外的分支机构。
4)信息分析手段现代化。随着现代信息技术的发展和科学研究方法的普及,计算机技术、网络技术、可视化技术等已经进入信息分析领域。各种数据库的建立,为信息分析研究奠定了良好的基础,而一些辅助性分析系统和应用软件也得到了广泛应用。例如,Excel、SPSS、SAS等统计分析软件可辅助分析人员进行程式化和非程式化的信息分析活动;SATI、CiteSpace、UCINET、Pajek、VOSviewer等文献计量和可视化分析软件可辅助信息分析人员进行关联分析;与数据库技术密切相关的、面向复杂信息分析与预测的、高层次决策支持的数据仓库、联机处理技术和数据挖掘等技术也日渐成熟。
5)信息分析人员专业化和社会化。信息分析是智力密集型的跨学科、多层次、综合性工作,其从业人员正逐步从专职情报人员向兼职的专业多样化和知识综合化的复合型人才发展。一方面,分析领域的综合化要求工作人员具有系统性思维能力;另一方面,行业服务的特点要求分析人员具有相关的行业知识和从业背景。目前,很多机构举办种类繁多的信息分析培训班,大多面向在职的行业人员,以提高他们的分析能力为主要目的。
6)信息分析领域的拓展化。以前的信息分析主要是针对科技信息进行搜集和分析,为科研机构和科研人员提供服务。随着信息技术的不断涌现,计算机网络的日益普及,从网上获得信息越来越容易。同时,信息和技术、经济紧密结合,使得信息分析领域进一步扩大。社会信息化的发展,使信息分析的领域拓展到社会各个方面。信息分析开始由单纯研究国内或国外转向国内外研究相结合,由单纯研究科技问题转向同时研究经济和社会问题,由主要面向政府部门所属机构和企业转变到面向整个市场,发展到为满足市场需求提供服务。
7)信息分析机构多样化。信息需求的多样性和迫切性,导致信息分析机构的多样化。单一的信息分析机构已不能满足市场和用户的多样化需求,多样化的智囊机构、智库、信息服务机构和信息咨询机构等应运而生。
8)信息分析规范化。这包括信息分析活动的规范化和信息分析管理的规范化,相关政策、法律、法规等的产生以及市场经济体制的完善,使信息分析逐步走向科学化、规范化、制度化轨道。
【阅读材料】
大数据改变信息分析
1.沃尔玛,把蛋挞和飓风用品摆在一起
沃尔玛是世界上最大的零售商,拥有超过200万名员工,销售额约4500亿美元。在网络带来巨大的数据库之前,沃尔玛在美国企业中拥有的数据资源应该是最多的。20世纪90年代,零售链网络通过把每个产品记录为数据资源而彻底改变了零售行业。沃尔玛让供应商监控销售速率、数量以及存货的情况,并通过打造透明度来迫使供应商照顾好自己的物流。2004年,沃尔玛对过去交易的庞大数据库进行了观察,这个数据库记录的数据不仅包括每个顾客的购物清单以及消费额,还包括购物篮中的物品、具体购买时间,甚至购买天气。沃尔玛公司注意到,每当在季节性飓风来临之前,不仅手电筒的销售量会增加,而且蛋挞的销量也会增加。因此,当季节性风暴来临时,沃尔玛会把蛋挞放在靠近飓风用品的位置,当然,这一改变也增加了蛋挞的销量。
2.沃尔玛,把啤酒与尿布摆放在一起
“啤酒与尿布”的故事发生于20世纪90年代的美国沃尔玛超市,超市管理人员在分析销售数据时发现了这样一种现象:“啤酒”与“尿布”这两种看上去毫不相关的商品经常被同时购买。他们经过调查发现,这种现象多出现在年轻的男人身上。原来,在美国有婴儿的家庭中,一般是妈妈在家照看孩子,爸爸去超市买尿布。男人在买尿布的时候,往往会顺便为自己买几瓶啤酒。沃尔玛发现了这一独特的现象后,在卖场中将啤酒与尿布摆放在相同的区域,让年轻的爸爸们可以方便地同时拿到这两件商品,这样做使得沃尔玛超市提升了啤酒的销售量。
3.塔吉特,成功预测女孩怀孕
美国《纽约时报》的记者查尔斯·杜西格(Charles Duhigg)在一份报道中阐述了塔吉特公司怎样在不被清楚告知的情况下预测出一位女性怀孕的情况:一天,一位男子冲进了一家位于明尼阿波斯市郊的塔吉特零售商店,要求经理出来见他。他气愤地说:“我女儿还是高中生,你们却给她邮寄婴儿服和婴儿床的优惠券,你们是在鼓励她怀孕吗?”而几天后,经理打电话向这位男士道歉时,这位男子语气变得平和起来,他说:“我跟我女儿谈过了,她的预产期是8月份,是我完全没有意识到事情的发生,应该说道歉的是我。”
塔吉特公司的市场部希望通过女性顾客的购物方式判断其是否怀孕,在分析部的帮助下他们利用女性消费记录实现了这一目标。塔吉特公司的分析团队首先查看了签署婴儿礼物登记簿的女性消费记录,他们发现登记簿上的妇女会在怀孕大概第三个月的时候买很多无香乳液。几个月后,她们会买一些营养品,如镁、钙、锌。公司最终找出了大概20多种关联物,这些关联物可以给顾客进行“怀孕趋势”评分,甚至能够比较准确地预测预产期,这样公司就能够在孕期的每个阶段给客户寄送相应的优惠券。