联邦学习的下一代技术趋势:无第三方和组件化_DOWS:Shadows

近日,杨强教授在SDBD2020·算力在线论坛中指出联邦学习不仅仅是技术,更是开源生态的建立。作为打开数据岛的桥梁,联邦学习在满足数据隐私、安全和监管要求的前提下,让人工智能系统能够更加高效、准确的共同使用各自的数据。开门见山,本期算力隐私数据安全专栏特邀郭嘉,抛出3大问,大胆构想无第三方和组件化的联邦学习技术未来。这一年,有幸零距离接触数百家客户,我想以一种更直接的方式来说一说联邦学习是否能落地银行的问题。三个问题

1)联邦学习的第三方协调器难道不是诟病吗?2)进银行这样的机构,如果是敲命令行的产品,怎么可能说服领导?3)机构采购了建模平台甚至建模方案,是不是意味着自己的工程师成为鸡肋?这是我在富数做联邦学习客户解决方案遇到的数十个问题中的,挑选的其中3个比较另类的疑问。无第三方才“中立”

目前市场上的隐私计算产品,大多是有第三方存在,或者由其中某一方兼任第三方的。第三方C在最开始为计算双方A和B分配同一份公钥,第三方C持有对应的私钥;A方和B方分别就自己的数据作相应的计算,将基于己方数据的中间结果用公钥加密,并将密文发送给第三方C;第三方C使用私钥解密来自各方的中间结果密文获得各方的中间结果明文,并汇总得到完整的中间结果。这一过程会反复迭代,直至满足结束条件。从最终结果来看,有第三方C在参与过程之中,获得了自己本不该获得的信息。而这些信息是否暴露其他参与方的隐私数据,与运行的算法本身结构有关:例如在逻辑回归算法中,参与方计算出基于己方数据的内积,并将其加密发送给协调方,协调方得到该内积结果并不能得到原来的数据,这是因为内积数据很好地掩盖了原有数据。但是,并不是所有算法的中间结果都能像逻辑回归问题一样——不暴露参与方的原始数据。

Coinglass:在比特币价格大跌不到一个小时内近6亿美元未平仓比特币期货头寸强平:12月4日消息,Coinglass跟踪数据显示,在比特币价格大跌的不到一个小时内近6亿美元未平仓比特币期货头寸强平。奥术研究公司在本周二公布的一份报告曾指出,一个多月以来,比特币未平仓期货合约一直保持在365000手以上,未平仓合约长期保持高位是不常见的,可能表明市场杠杆程度过高。市场过度杠杆或为此次闪崩主因。(金十)[2021/12/4 12:50:50]

第三方的协调,确实为协议的设计和实现带了很大的便利。但是实际上第三方本身的建立是需要较大成本。而所谓的兼任第三方,虽然整个过程中只有两方参与,但并没有从实际上解决有第三方的方案中存在的问题——其中一方的信息仍存在暴露的危险。相比有第三方参与的方案,基于MPC无第三方参与的方案从协议设计之初就摒弃了协调方。MPC协议在理论上要求参与方除了己方输入和己方计算结果输出之外,并不能获得额外的信息。MPC只有参与方之间的信息交互,并且协议执行期间的交互过程不会泄漏参与方的隐私数据。这是由协议设计的底层来保证的。例如,在混淆电路中,参与方会将各自的输入映射成为随机密钥,同时用混淆真值表来保持参与方输入、输出之间。各方交互的只是关于真值表对应的密文,而不包含任何输入、输出数据。

金色财经合约行情分析 | BTC 昨夜大跌后反弹,恐慌情绪有所释放:据火币BTC永续合约行情显示,截至今日16:00(GMT+8),BTC价格暂报9420美元(-3.87%),20:00(GMT+8)结算资金费率为-0.008648%。

BTC昨夜放量大跌,最低至9009美元,后震荡反弹,目前到9500美元一带。根据火币交割合约数据,BTC季度合约成交额较昨日继续大涨,持仓量持续下降,精英多头占比略减,季度合约溢价率在下跌时转负,现已重新回到正数。昨夜美股大跌,恐慌情绪传递到数字资产市场,在触碰9000美元一带后价格缓慢修复,9500美元将是市场的关键价位。

USDT于火币全球站OTC的报价为7.05元,溢价率为-0.42 %。[2020/6/12]

金色财经行情播报丨BTC大跌后窄幅震荡,空头尚有发力空间:据火币行情显示,截至18:30,今日BTC在上午6点大幅下跌后开始窄幅震荡,4小时图级别头肩顶形态不变,价格徘徊在颈线位。短线中4小时图均线MA5乖离值较大,预计震荡时间因此延长,但就形态而言空头占优,多头承压。周线级别已呈拐头趋势,空头尚有发力空间。[2020/4/13]

总的来说,基于MPC无第三方参与的方案对于参与方的隐私数据的保护更加彻底,而有第三方参与的方案需要依赖于第三方的可信性或者中间结果的结构才能保证数据的隐私性。也就是说,当双方无法建立可信第三方时,基于MPC无第三方参与的方案将会是安全的首要选择。富数即将推出的Avatar2.0大版本,基于MPC的核心思想,从底层的基本算子和简易函数的计算开始,最终完成无第三方的产品升级。

分析 | 比特币大跌主因是VanEck-SolidX比特币ETF延迟审批:据 CCN分析,大多投资者和分析师将今日比特币突然下跌归因于美国证券交易委员会( SEC)推迟批准VanEck-&SolidX的比特币 ETF。尽管,很多分析师都曾表示此次推迟是预料之中的,且并不足以引发加密货币市场的此次暴跌;然而,此前日本和韩国的交易市场的交易人员一直在大肆宣称一旦比特币ETF获得批准,比特币价格将在8月份达到此前的高点,由此带来的虚假期望引发市场对VanEck-SolidX比特币ETF的延迟审批后的激烈反应。[2018/8/8]

此技术能够在保证信息安全前提下,让投研机构利用非公开数据资讯和信息,更好的发掘和预测股票的波动。本文即尝试通过安全多方计算技术和联邦学习技术,将公开数据和非公开数据进行结合,并进行量化交易分析,希望该案例能够给从事量化交易的专业人士拓展分析思路。Dos到Windows的革命:IME

美国联邦政府官员称加密货币是“极其不稳定的”:周二,美联储(Federal Reserve)理事会的一名成员对比特币的极端波动进行了呼吁,称其为“极端不稳定”。由于比特币在2017年突然上升超过1000个百分点,然后在最近几个月急剧下降,美联储正密切关注这一数字货币的极端波动。这番言论来自对拉尔?布雷纳德(Lael Brainard)的一次采访,他也是央行强大的利率制定委员会的成员。州长还补充说,新的资产类别对美国经济没有威胁,不会对其稳定造成损害。[2018/4/6]

一直关注国内的竞品,目前很多厂商被客户纠结的一个很重要的原因是产品交互体验!我相信任何一个银行级别的客户在Dos和Windows之间,一定选择用Windows。。目前能做到的一大批联邦学习平台,还处于“Dos”水平,稍微好一点的,相当于“Windows95”。对于集成环境,我们更喜欢封装的更组件化的IDE,流程即业务。我想重新定义一个联邦学习建模平台的概念,集成建模环境IME。组件化是IME的最大特点,我喜欢用几个词汇来介绍给客户:过程透明化、上下低耦合、算法可扩展。联邦学习平台有非常重要的组件,比如加密组件、解密组件、通信组件、算法组件等等。让联邦学习平台客户专注于算法,可扩展、可编译。

独立:我们的项目、应用、产品,其实可以拆分成多个组件,每个组件负责一项功能,每个组件都以独立的形式存在。完整:每个组件具备完整的局部功能,组件间互相独立。自由组合:通过将组件自由组合,可以构成完整的产品、应用、项目。在面对内部人员的变更、业务的拓展、用户需求的变化时,组件化既满足庞大的开发需求,同时能实现开发人员、用户、应用组件、信息资源互通,也许,组件化是生产流水线的必经之路。组件化在一定程度上降低了不具备编程能力的业务建模工程师的门槛。在组件化地基础上,用户可在工作台简单地拖拽各种组件,实现灵活组合和连接,让个性化建模流程成为可能。

在面对多种多样地用户需求时,单一组件化或局部组件化架构往往杯水车薪、无法真正解决问题的核心,那么如何通过标准规范组合方式来构建整个产品,最终呈现给用户大量基础模块且每个模块独立、完整、可自由组合的产品,是组件化发展的关键核心。你的答案写在结尾,回答一下文章开头的三个问题:1)联邦学习的第三方协调器难道不是诟病吗?答:银行这样的客户,如果意识到第三方,他一定会说能不能不要第三方。所以,富数Avatar经历数月攻克,实现了无第三方的联邦学习。2)进银行这样的机构,如果是敲命令行的产品,怎么可能说服领导?答:很难说服,联邦学习本来就很难说清楚。有图形,一定是容易说事情。3)机构采购了建模平台甚至建模方案,是不是意味着自己的工程师成为鸡肋?答:让合作伙伴真正参与联邦学习平台建设,更合适的是把和业务更近的算法组件开放出去,你的工程师可以根据协议标准,写适合自己业务的算法。你能体会其中的道理吗?自诩从技术走向业务的小学生。近十年互联网大数据行业经验,先后就职于上海大智慧、平安、挖财,任职大数据架构师、资深分析师等职位,对金融科技有深入研究。目前任职富数科技高级总监,负责隐私计算的解决方案与业务落地。郭嘉

如果您对数据隐私、数据安全共享技术等领域有独到观点分享,欢迎投稿!投稿邮箱:hehaohua3h@163.com

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

金智博客

[0:15ms0-4:121ms