由 dawei 金融大数据分析平台Palantir Metropolis介绍
译者：36大数据编辑 原上草?（36大数据专稿，拒绝转载）
Palantir，提起这家公司就会让人觉得如雷贯耳。之前36大数据之前应该花了非常多的时间去收集和整理了关于这家公司背后的故事，参考揭秘：曾用大数据帮助CIA干掉本·拉登的公司Palantir Technologies?，在2013年美国大数据公司收入排行榜中，Palantir排名第一。
Palantir中国专区>>>
与昨日我们报道的大数据分析平台Palantir Gotham不同，Palantir Gotham主要用于反恐，而Palantir Metropolis主要用于金融服务，为对冲基金、 银行和金融服务公司。
Palantir Metropolis（以前称为 Palantir 财务） 是软件的数据集成、 信息管理和定量的分析。该软件连接到商业、 专有和公共数据集，并发现趋势、 关系和异常，包括预测分析。
Palantir Metropolis有利于整合所有的定量数据、 生成和测试创意和正确与同事进行协作。Palantir Metropolis是有效和定量的分析平台，能够提供适当配套的分析工具，以便满足多学科研究和复杂的研究的需要。定量分析是完全适用于不同类型的间隔从气候资料分析对各种网络通信流，同时对不同的策略，与有关的金融交易评估的评估的问题。
Palantir Metropolis 的棱镜功能可帮助用户来整合不同的数据集，而无需编写任何代码。此功能可以公开特定域语言定义的架构和连接。此外，棱镜可以确保所有数据的帮助下高性能路径包含代码的轻松访问。棱镜包含一个跨供应商的智能解析系统，可以自动将合并数据源的专有和第三方 ；甚至他们有在公约、 标识符和格式的变化。如果这是不够的用户可以设计无需任何代码编译的数据提供程序和无需重新启动服务器的变化。
资本市场(Palantir Capital Markets)的解決方案应用到Palantir Metropolis技术；Palantir Metropolis这项技术乃经由资料分析平台整合所有的量化资料，并提供一套有效的分析工具来满足复杂的研究需求。因此，Palantir Capital Markets可将许多孤立的数据汇集到单一的环境，再经由时间序列以及其他深入的分析推论出有价值的结果。此外，它也具有即时互动的特性，相当便于使用者操作。而在应用面上，金融机构可藉由Palantir Capital Markets，将资产定价和回归分析模型等分析结果分享給所有的同事，提升其分析效率。实际上，花旗銀行也已导入Palantir Capital Markets，在平台上整合自身和供应商的数据，成功的分析和共享相关金融数据。
除了前述的方案外，Palantir也不断藉由其核心能力发展出了更多解決方案。如消弭犯罪活动以及信用卡欺诈的行为、强化组织数据安全、协助军队決策制定、抑制疾病的传播、健康保险与房屋贷款之分析、协助办案及法律分析服务等，多方面提供有价值的服务。
一、Palantir Metropolis产品概览
适用于所有数据
Palantir Metropolis平台适用于大规模的定量调查。Palantir Metropolis平台整合多源数据，将不相干的多个信息置于一个统一的定量分析环境中。
目前，我们发现它在追踪分析保险索赔数据，网络交通流和金融交易模式方面表现出色，但其潜力是无穷的。
构建多重模型
分析人员开始借助丰富的统计学和数学符号库对模型进行计算和构建，以此增强对数据的理解。简单的模型成为构建复杂模型的要素，而更为精巧复杂的分析行为因而变成一个流线型、模块化的过程。分析人员的想法越来越变得更容易和快速地实现。
多角度可视化数据
Palantir Metropolis平台的交互式用户界面用丰富的可视化手段化抽象为神奇。表格，散点图、图表的流畅交互为用户提供了一个所关注数据的全盘审视角度。这些可视化手段都随源数据实时更新，用户在任何时间都能看到最精确最及时的信息。
迭代分析以解决新问题
因为每一个分析结果都带出了更多问题需要回答，Palantir Metropolis平台在创建时便注重了快速迭代和合作的优点。分析人员不断转变分析逻辑，验证新假设，并将新发现交给决策者，决策者重新制定新关注点，并向分析者提出新问题。企业因此变得更加聪明，这个循环就一直进行下去。
二、Palantir Metropolis平台
在Palantir Metropolis平台后台，它集成了一系列功能，包括将不同来源的表格数据整合进一个一致的模型当中，对模型进行复杂计算，分享和迭代分析成果。
数据整合
Palantir Metropolis平台将多源数据整合为一个统一展示的模型。此平台包括预购建适配器库、框架以及为提升整合效率而允许不同源分析系统接入的应用程序接口。
METRICS 是Palantir Metropolis平台计算功能的核心。Metrics 对模型进行复合、汇总、转换、比较及计算。alantir Metropolis 包含有一个内建的被广泛使用的软件度量，包括绝对变化和相对变化，滑动平均值、导数、积分和其他各类基础时间序列、数学操作。
自定义指标的发展
Hedgehog语言或者HHLang语言是一种脚本语言，在句法上与JAVA类似。它是用来推动Palantir Metropolis平台上的复杂分析行为。该平台上的模型，软件度量（metrics）和文档均是以HHLang语言的架构写成。HHLang语言特点为它是一个合适的类型系统（a proper type system），具有表达链（expression chaining）、匿名函数和lambdas表达式，允许分析人员进行简洁和复杂的双重描写，多模块计算。
平台内部的集成开发环境能够支持代码补全、交互调试、模块化代码设计实践，这让复杂的自定义指标能够在平台上完成。HHLang语言自带支持定量分析的库，这个自带库涵盖了时间序列分析、回归分析，统计分析和高级数据/时间处理分析功能。
数据建模
在Palantir Metropolis平台上数据模型是数据分析进行的基础。数据模型是源数据集行与列的转化，其中还包括了对元数据的描述信息。这些统一的观念上的对象代表的是客观世界的实在客体。一个模型可以代表一个机构，一个公司，一个人-任何现实世界中的客体都能用数据来描述。安装Palantir Metropolis平台时都会配置上处理即将面临的问题时需要的模型类型。
迭代与合作
由Palantir Metropolis平台的前端应用程序创建的分析成果以一种被称为文档的形式存储着，这种文档可以分享，链接，重组。文档并不是已经成型的不可更改的产品，而是一种灵活的仍旧可以加入工作流程中的材料，它可以被迭代，可以作为材料加入新的分析。
用户可以通过链接简单的文档来构建复杂文档的结构，然后在公司内部的用户间进行分享和合作。
扩展性、可定制性和应用程序接口
Palantir Metropolis平台在设计时便已经在栈堆的每一层从底部构建了其扩展性。从底层数据整合，自定义指标到设计用户界面来实现特定工作流，它都从根本上被设计成一个开放平台。
三、Palantir Metropolis应用
应用
在Palantir Metropolis平台前端提供了一整套数据整合应用程序，以此增强用户利用自身系统中可用数据来创建交互模型的能力，还提供了丰富的软件度量库和一个可用来设计新度量库的编程环境。
自定义指标
自定义指标应用程序包含一个功能强大的编程环境，它允许分析人员以创建新软件度量的方式扩展软件的基本功能，以此来进行全新的、个性化的或专题性的分析。
仪表盘应用
仪表盘应用程序是用户可以在一个屏幕上看到所有分析的集中展现。仪表盘应用程序扮演者双重角色，它既是复杂分析活动的最终展示地，也是新分析路线创造性规划的起点。窗口小部件是文字数据和可使数据的混合，他们的布局均可实现定制。每一个窗口小部件均是可以交互的，用户既可以用特别的方式调整仪表盘视图，也可以直接由此跳转到源文档进行迭代分析。用户也可以他们仪表盘程序的网络只读版（read-only,web-accessible versions）以便于内部分享已经完成的工作。
日期变更应用程序
在定量数据分析时，将时间多为第一等级对象能起到较好作用。日期变更应用程序使分析者能创建时间区域用来输入软件度量和文档。时间区域可选用周期模式，例如“每月的第三个星期二”或者“每十秒”。作用更大的是，时间区域可以专门用于计算软件度量。
一些抽象例子如下：
- 当序列A大于序列B的所有时间
- 在一个容纳90天数据窗口中，序列X超过布林线（bollinger band）两个西格玛单位的所有时间。
- 在T&Q 400集合中总值最高的十个序列比总值最低的十个序列总值高出十倍且整个集合总值仍在不断增长的所有时间。
搜索应用程序
搜索应用程序用于深度挖掘数据信息和保存关注的模型组。它让分析人员可以定义大模型组，并对它们应用一系列过滤规则。这样产生的子模型组可以被作为一个群组被保存，可以应用于其他程序，或者也可以用HHLang语言表示出来。用户也可以对模型的元数据进行过滤规则添加（如模型类型，数据源等），或者将参数过滤器应用于计算机软件度量中。分析人员可以利用直方图、散点图、分位数图表等交互式可视化手段快速精确地完成某些微操作。
回归
回归应用程序可以提供一个交互式环境，在这里分析人员能创建回归模型处理系统中的任何数据。随着输入条件的改变和参数的调整回归分析模型的每一个层面都可以被我们看到。
在回归分析应用程序中产生的文档包含有各种残余误差以及模型测试元素，后者可用于后面的进一步分析。
电子制表程序
电子制表程序可以组合单模型、组模型和Palantir Metropolis平台文档，并以可视化的形式放在它的单元格中。每个单元格原始文档的数据只要一个点击就可获得，这让电子制表程序具有集中收集模型的功能，并且可以比较复杂分析活动中的模型层面这一基础构件层次。
End.