大数据分析师的书架

本系列文章介绍国外大数据分析师培训中需要阅读和用到的一些书籍和手册。这些书籍大部分在国内京东、淘宝等也能买到全中文译本。

一、《情报入门手册-改进情报分析的结构化分析技术》

中情局情报研究中心1999年

作者：Robert M. Clark

下载地址：

https://www.cia.gov/library/center-for-the-study-of-intelligence/csi-publications/books-and-monographs/psychology-of-intelligence-analysis/PsychofIntelNew.pdf

作者80年代曾在中情局工作，本书主要是从他工作期间发表的情报学文章中整理而成，因内容精彩，被情报分析师作为案头书。

情报分析，是一项纯思维性的工作，从证据中思考、分析得出结论，在开始讨论如何分析问题之前，先要打好基础，明白人类思维的特点，避免从开始就开始犯错。有限理性，由于人类自身思维能力的局限，思维本身并不能直接应对复杂的世界，因此我们会建立一个关于现实的简化思维模型，然后据此进行思考。

作者从三个点讨论了人类思维机制的缺陷。

1、人类认知的局限性，这部分解决办法就是思维模型，完整、清晰分类的思维模型。

2、人类在预期模式下的认知盲点，这个"行为心理学"已经有很完整的分析了，归其本质，还是古老人类在面对荒野中的种种危险，需要一种快速认知事物，判断是跑还是吃的，融入基因的习惯。

3、人类的记忆模式，分为触感记忆、短时记忆、长时记忆，这部分挺新鲜，尤其是如何增强长时记忆能力，作者给出了抽象信息点，抓住信息网络中的关键节点，这个方法。

情报人员提出和评估假设一般有三种策略，即情势逻辑、理论分析、历史比较。

1、情势逻辑，从当前形势的前因后果出发，结合各种信息，理解在这一时间、地点发挥作用的各种特定力量，由此在逻辑上确定当前形势的前因后果。

2、理论分析法，公式，当前满足一系列条件后，就必然会得出事实结论。

3、历史比较法，参考该国历史上发生的时间，类比。比较法与情势逻辑不同，主要是通过考察其他时间、地点的类似情况，得出相对清晰的概念模型，来理解当前形势。

一个情报人员应该如何分析问题？

1、定义问题

2、提出假设

3、搜集信息

4、评估假设

5、选择最可能的假设

三、《情报研究与分析入门》

作者：Jerome Clauser

下载地址：

https://williamgirardot.blogspot.com/2018/11/download-introduction-to-intelligence.html

虽然自冷战以来今天的环境发生了很大变化，但情报分析师仍然需要了解情报分析基本知识。本书侧重于如何进行研究，成为情报分析师需要什么样的素质，以及可以采用哪些方法来帮助生产产品。为了避免政治化，情报分析师应该努力使他们的方法更加透明。他们是如何得出他们的结论的。情报研究和分析提供了几种方法来帮助实现这一目标。

四、《情报和情报分析》

下载地址：

https://researchoutput.csu.edu.au/ws/portalfiles/portal/9309661/46859

作者：Patrick F. Walsh

澳大利亚人Patrick F. Walsh是查尔斯图尔特大学刑事情报高级讲师。在此之前，他是堪培拉国家评估办公室的情报分析员。《情报和情报分析》审视了澳大利亚，加拿大，新西兰，英国和美国的9/11后职业改革。特别是，他着眼于必须在国内安全机构与这些国家的传统外国情报组织之间建立更密切关系的变化。在对9/11之前的情况进行调查之后，Patrick F. Walsh着眼于两个出现新做法的领域，以应对变化的威胁：纠正和主体安全。两者都说明了挑战的严重性以及快速交换综合信息的必要性。随后的主题包括提高各级政府的业务能力，可能实现这一目标的情报模型和框架，以及如何评估有效性。同时，在有关领导和管理，创新和协作的需要，教育的重要性以及研究和理论建设的价值的章节，Patrick F. Walsh并没有忽视个人的贡献。对每个主题的讨论伴随着对当前关于该主题的文献的评论以及Patrick F. Walsh的案例研究。后者实际上是他的书中各国在每个主题上所做的事情的摘要。例如，在关于情报框架和/或组织问题的章节中，有一个案例研究，说明每个国家如何在问题中应用新框架。例如，就美国而言，它是融合中心;在新西兰，正是将情报整合到其单一的警察机构中。《情报和情报分析》并没有假装为满足所有9/11事件后的挑战提供答案，但Patrick F. Walsh提供了五个国家的实例，明确表明这些问题得到了认可，并且每个问题都得到了解决。

五、《情报：从秘密到政策》（第五版）

作者Mark M. Lowentha

下载地址：

https://www.academia.edu/attachments/59535896/download_file?st=MTU2MzgwNTA4OCwxMDMuMTE3LjEwMy44NCwxMTkyMjcwMTA%3D&s=swp-toolbar&ct=MTU2MzgwNTA4OSwxNTYzODA1MDkyLDExOTIyNzAxMA==

Mark M. Lowentha通过研究和服务国务院，众议院情报常设委员会，国家情报委员会和中央情报局局长， 对该书进行了扩充更新，内容涵盖情报专业基本功能的15章保持不变，增加包括有关运营事项的变化， 例如，无人机的使用，奥巴马政府的政策举措以及自2009年以来的人事变动的内容。关于跨国问题的章节中还有几个新的部分：人口统计，对军队的支持和网络空间。后者取代了关于网络战的部分。正如关于外国情报部门的章节一样，关于情报改革的章节已经过大幅修订和更新。在每章末尾的进一步阅读建议中增加了新的资料来源。该书不仅仅是对情报的功能，操作规程和其他义务的描述。还包括对绩效的分析，改进建议，道德的作用以及全社会问责制和改革的必要性。出于这些原因，本书既是有价值的介绍性文本，也是情报面临的当代问题的信息来源。

六、《以目标为中心的情报分析方法》

作者：Robert M. Clark

下载地址：http://lockhart.orangesky.org.au/intelligence-analysis-a-target-centric-approach-3rd-edition_2019_printable_file.pdf

针对美国情报界在“9·11”事件和伊拉克战争中的情报失误，作者创造性地提出运用“以目标为中心”的情报分析方法，完善情报分析的逻辑过程，形成“确定目标—问题分解—建立模型—评估数据—填充模型—进行预测”的情报分析流程：

1、确定目标：对需要分析的情报目标进行界定；

2、问题分解：对问题进行准确、详细的定义和分解；

3、建立模型：利用已掌握的情报建立一个目标模型；

4、评估数据：核心是选择适用于眼前事实的最简单解释；

5、填充模型：不断地把新情报纳入到模型中并进行提炼；

6、进行预测：对可能发生的情况进行预测的结构性思考。

在阐述上述流程时，全书涵盖了情报分析中的各类关键问题，如情报周期、反情报、情报分类、征候与预警、情报模型、情报来源、情报搜集、情报评估、拒止与欺骗、窃密方法与技术、预测方法、团队互动，等等，称得上是一部名副其实的情报分析教科书和人类窃密技术简史。它可以为学生、分析人员和其他相关专业人士概括情报问题的分析方法，提供必备的辨别与洞察工具。

七、《批判思维与情报分析》

作者：David T. Moore

下载地址：

http://www.au.af.mil/au/awc/awcgate/dia/ndic_moore_crit_analysis_hires.pdf

本书系列论文介绍了由国防情报学院（NDIC）通过其战略情报研究中心提供支持或鼓励的教师，学生和其他人的情报研究工作。这些文件通过国家技术信息服务处（www.ntis.gov）分发给国防部学校和情报界，并向公众提供非机密文件。这些论文也可通过美国政府印刷局（www.gpo.gov）获得。这项工作建立在本系列早期出版物的基础上，包括：获得正确的情报的逻辑程序，每个人的智力要素；以及联合情报中心的应用结构化方法的情报分实验。作者的见解是通过多年与情报界领导者在分析方法论上的创造性互动而发展起来的，并通过整个情报界的培训和教育课程中的学生连续测试实践性。这些论文的拟议稿件已提交NDIC新闻编辑委员会审议。论文接受国防，情报和民间学术或商业界高级官员的审查。有关临时文件的附加副本的手稿或要求应发送给国防情报局，国防情报学院，MC-X，Bolling空军基地。该出版物已被国防部安全审查办公室批准不受限制地分发。Russell Swenson@dia.mil，战略情报研究中心主编兼主任。

八、《情报分析的批判性思维技巧》

作者：Douglas H. Harris and V. Alan Spiker

下载地址：

http://cdn.intechopen.com/pdfs/35820/InTech-Critical_thinking_skills_for_intelligence_analysis.pdf

无论是由国家机构还是当地执法机构执行，情报分析的最终目标是及时制定可以自信行动的推论。为此，有效的情报分析包括整合收集的信息，然后通过连续迭代额外的数据收集，评估，整理，整合和归纳推理，基于该信息开发和测试假设。所需的最终产品是推断，指定感兴趣的活动的人，事，时间，地点，原因和方式，并指导适当的行动。

虽然在过去的几十年中已经开发了许多有用的工具来帮助数据收集，评估，整理和整合，但分析仍然高度依赖于人类分析师的认知能力，特别是批判性思维技能。因此，重要的是要了解分析师的固有能力和局限性，特别是必须通过批判性思维的培训和应用来克服的情报分析的认知挑战。作者对情报分析的批判性思维技能的关注和研究涉及人体工程学研究的这一方面，该研究旨在了解人们如何参与认知工作以及如何开发最能支持该工作的系统和培训。这些努力已被称为认知人体工程学或认知工程。虽然讨论的重点是情报分析领域，但需要批判性思维技能的领域很多，包括专业，商业，军事，教育和研发。

什么是批判性思维？批判性思维最早是在20世纪40年代早期由两位心理学家Goodwin Watson和Edward Glaser构思出来的。Watson和Glaser也开发了一项技能测试，即Watson-Glaser批判性思维评估，该测试仍被广泛使用。从那时起，几乎所有的理论发展都是由教育工作者和哲学家进行的，其中重点是通过测试来识别具有优秀批判性思维能力的人。批判性思维作为一种技能可以通过集中训练来改进，就像心理结构的观点一样，受到的关注却少得多。

批判性思维还没有经历过通常赋予心理学家开发的结构的经验检验。例如，它与其他完善的心理结构（如智力，工作记忆和推理）之间的关系很少被研究过。作者公认的主观观点认为，缺乏对批判性思维的实证研究及其与其他个体差异维度的关系，已经产生了对结构的分割观点。没有数据的基础，理论家可以自由地假设不同的概念。

在1990年达成共识定义的哲学努力对统一该领域几乎没有影响。为填补这一空白，Fischer和Spiker开发了一个足够具体的模型，可以进行经验测试。该模型确定了批判性思维在推理和判断相关领域中的作用，这些领域自20世纪50年代以来经过实证研究，并在理论上得到更好的理解。它结合了思想家（例如Paul和Elder，2001）在哲学和教育方面提出的许多想法。它还体现了相关文献中讨论的许多变量（例如，倾向于态度，经验，知识和技能）并指定它们之间的关系。该模型可以并且一直用于对影响批判性思维和相关心理后果的因素进行可测试的预测。它还为系统和培训的发展提供实用指导。在简要回顾当前关于推理和判断的思考（模型所基于的）之后，本文提供了该模型的主要特征的概述。

九、《战略情报的批判性思维》

作者：Katherine Hibbs Pherson and Randolph H. Pherson

下载地址：

https://www.jaba.ca/file-ready/critical-thinking-for-strategic-intelligence

对于所有新的美国情报界分析师来说，战略情报的批判性思维应该是一个入门。作者以非常实用的方式处理批判性思维方法，这些方法很容易转化为情报分析师的日常工作，即研究，编写，汇总和呈现及时，准确和决策者相关的情报信息或者其他关键数据。

本书逐章介绍分析过程，从了解用户，到研究信息，到展示成品。它还提供了指导，以帮助防止情报分析员在面临大量工作负载和紧迫的截止日期时经常犯的许多错误。本书还包括几个有用的图形，关键要点和案例研究。

使战略情报批判性思维脱颖而出的关键因素是，它是由分析师考虑到情报分析师的典型日常任务专门为分析师编写的。作者理解对分析师的期望，并以实际和可用的方式传达批判性思维方法，以帮助分析师研究，编写和生产更好的产品。他们从他们自己的经验中非常了解分析师有一个小机会将关键数据传递给他们的上级或决策者，并建立他们作为分析师的可信度。要做到这一点，产品必须准确，及时，有影响力，以建立可信度，并获得决策者的关注。没有这种可信度，分析师的工作通常是徒劳的。

十、《无声的战争—认识情报世界》

作者:ABRAM N. SHULSKY    GARY J. SCHMITT

下载地址：

https://the-eye.eu/public/concen.org/Abram%20N.%20Shulsky%20-%20Silent%20Warfare%20-%20Understanding%20the%20World%20of%20Intelligence%20-%20pdf%20%5BTKRG%5D/Abram%20N.%20Shulsky%20-%20Silent%20Warfare%20-%20Understanding%20the%20World%20of%20Intelligence%20-%20pdf%20%5BTKRG%5D.pdf

《无声的战争：认识情报世界》结合美英等主要大国的情报工作实践，全面介绍情报理论和情报实践发展前沿，内容涉及情报理论、情报搜集、情报分析、隐蔽行动、间谍和反间谍等，对我国的保密工作、安全工作有一定的启示意义，对我国的情报研究领域也有替补空白的学术价值。初版于1991年，1993年出版了第2版，2002年第3版，是美国政府官员和高校的情报学教材。作者艾布拉姆·舒尔斯基是美国外交与安全问题专家，曾任参议院情报常设特别委员会民主党领袖，对情报与安全事务有30年研究。

第二次世界大战以前，人们通常认为情报工作的重心是情报搜集，谍报是主要的情报手段，情报工作是一种艺术，保密性是情报工作的主要特性。但是，从第二次世界大战开始，一种新的情报观就在美国出现。以威廉·兰格和谢尔曼·肯特为代表的美国战略情报局的分析家们，竭力将情报分析作为一种科学来看待。他们认为，情报搜集不能解决情报工作中的不确实性问题，情报分析是情报工作的中心环节，情报研究同社会科学研究没有什么区别，具备了科学世界观、掌握了科学方法的情报分析人员，可以对事态发展进行科学预测。这种新的情报观成为战后美国情报工作的主流思维。

舒尔斯基认为，情报分析与社会科学研究虽然在某种程度上相似，但两者之间存在着重大区别：社会科学研究的目标是追求客观知识，有些社会现象虽然难以理解，却不会故意欺骗人类的认识。这与情报工作全然不同。情报涉及的是人类社会之间的斗争。对手不仅阻挠别人了解自己，还故施误导和欺骗之事。因此，情报研究与科学研究还是存在质的差别，情报事务远比社会科学研究复杂。

由此可见，舒尔斯基的观点是对第二次世界大战以来在美国情报界占主导地位的谢尔曼·肯特的情报观念的一种匡正，它反映了二战以来美国情报工作的新特点，更能反映美国情报工作的真实情况。

十一、《犯罪分析绘图入门指南》

作者：Rachel Boba, Ph.D

下载地址：https://ric-zai-inc.com/Publications/cops-w0273-pub.pdf

该指南是根据警察基金会犯罪测绘实验室成员于2001年开展的“社区导向警务服务办公室”（COPS）资助的“犯罪分析图绘制和解决问题简介”培训课程制定的。本文档的目的是将培训中提供的信息转换为简洁易读的报告，使其可供更多的受众使用，而不是通过培训课程。它不是一份关于犯罪分析，犯罪绘图和解决问题的综合文件，而是一本刚刚进入该领域的“入门”指南或当前犯罪分析师或其他执法分析师的参考手册。

十二、《制做犯罪图表原则和方法》

美国司法部

下载地址：https://www.ncjrs.gov/pdffiles1/nij/178919.pdf

1997年，国家司法研究所（NIJ）计划建立其犯罪测绘研究中心（CMRC）时，召开了为期两天的战略规划会议，就中心的目标，方向和使命寻求建议。Keith Harries为使用地理信息系统（GIS）的早期阶段的机构准备了这份综合指南。他收集了110多张地图，以说明如何使用GIS。这些图片表达了“一张图片胜过千言万语”这一短语的真实性。该指南使用对象是那些对GIS有一点了解并希望更多地了解其优势和局限性的执法专业人士。目前大约13％的执法机构正在定期使用地理信息系统来分析他们的犯罪问题，随着越来越多的机构开始使用计算机犯罪测绘来识别和解决他们的犯罪问题。对于已经使用犯罪绘图技术的机构，希望本指南能够激发有关使用它的新方法的想法。