加密数据的复杂性为数据带来了全新机遇,即企业进军数据3.0,通过系统化智能和自动化成规模地创造价值。
数据是一家企业的金矿,如果管理得当,除了可以作为让每个人负责任的重要工具之外,还提供了清晰的信息和洞察,可以让企业大规模改善决策。
然而多数企业滞留在数据1.0时代,即只是将数据业务作为人工和被动服务。部分企业已开始走向数据2.0格局,即采用简单的自动化来改善团队生产率。而加密数据的复杂性为数据带来了全新的机遇,即企业进军数据3.0格局,可以通过系统化智能和自动化成规模地创造价值。这就是数字3.0之旅。
开源矿池合伙人Andy Guo:Filecoin和传统挖矿的区别有三点:由开源矿池和火币主办,金色算力云、链上ChainUP、Filecoin Beijing联合主办的“分布式存储中国行暨开源矿池IPFS私享会”2020年11月25日在深圳举行。开源矿池合伙人Andy Guo在会上表示,Filecoin和传统挖矿的区别有三点:第一,Filecoin挖矿的算力是累计值,而比特币是恒定值;第二,Filecoin通用矿机普遍剩余残值较高,早期矿机很难被淘汰;第三,Filecoin挖矿比BTC挖矿难度要高2个级别,比如运维,开发,硬件,机房,抵押,数据等等方面的难度。此外,分布式存储是顺应国家政策潮流的方向,也很有可能成为下一代互联网的基础设施,处于良好向上的趋势。[2020/11/26 22:10:45]
Coinbase既不是金融企业也不是技术企业,而是一家加密企业。这种差别为我们如何处理数据的方式带来了重大影响。作为加密企业,我们处理三种重要类型数据,每种数据都非常复杂且各不相同:
动态 | KuCoin交易所成为niTROn SUMMIT 2020特别赞助商:据官方最新信息,加密货币交易所KuCoin成为niTROn SUMMIT 2020特别赞助商。由波场TRON官方举办的世界区块链行业年度综合性峰会niTROn SUMMIT 2020将在2020年2月29日至3月1日两日于韩国首尔举行,峰会汇聚全球开发者、交易所、项目方、矿池、投资方,共同交流区块链未来发展方向。详情可查看原文链接。[2020/1/13]
我们的工作重心一直是如何让这些各不相同的数据协同工作,消除数据孤岛,在问题出现前消除问题,为Coinbase创造之前可能不存在的机遇,以此实现规模化创造价值。
公告 | CoinMarketCap:数据收录仅能通过官网申请并无需任何费用:CoinMarketCap发布官方声明称,近期市面出现了号称以收费方式从CoinMarketCap内部渠道登陆官网、增补其收录数据的等不实行为,为CoinMarketCap名誉带来困扰。作为全球受信任的加密数字货币信息来源网站,CoinMarketCap一直对收录数据保持公正客观的态度,所有收录只能通过官网Coinmarketcap.com提交申请,无需任何费用。所有打着收费旗号走内部渠道的均为子,请从业者注意甄别。[2019/4/25]
我个人曾就职于LinkedIn和eBay等高科技企业,以及包括CapitalOne在内的金融机构工作过,我亲眼观察到从数据1.0到数据3.0的演进。在数据1.0中,数据被视为一种反应性功能,可提供临时性的人工服务或在紧急情况下就救险。
动态 | SharkPool大量开采Altcoin 只为换取比特币现金:SharkPool一直在大量开采Altcoin,只是为了换取比特币现金。这一奇怪的举动一直是加密货币界热烈讨论的话题。根据SharkPool的说法,Altcoin没有价值,因此,他们应该被抛弃。SharkPool开采Altcoin,然后所有收益都将用于购买比特币现金。批评人士认为,这种做法可能会损害比特币现金的声誉。[2018/11/14]
在数据2.0中,采用简单的工具和第三方解决方案将部分人工和重复性工作实现自动化,以提高团队生产率。然而,多数情况下数据团队依然依赖增加人手来创作更多价值。终于来到数据3.0时代,开源和内部技术协同创建数据系统,从根本上实现价值创造的规模化。
数据3.0涅槃之路
数据3.0带来的最大收益是效率和所有数据流中的一致性。它使企业能够构建全面的数据基础,服务于企业的长期成功,同时以有限的资源满足眼前的需求。当企业规模较小且变化迅速时,这种情况可能并不明显,但是随着企业规模的扩大、经历快速增长,各数据流之间缺乏一致性的问题可能会成为一个巨大的痛点,如果没有早早未雨绸缪,往往很难纠正。
即使是世界上最好的技术企业,也可能存在由不同的工程团队创建量身定制的数据产品和服务来解决特定的痛点,结果养成不良的习惯。这可能会在端到端数据系统的标准化工作流中留下巨坑,导致大规模构建和运营数据变得困难。更糟糕的是,这些一次性的工作可能会变得足够大,以致成为独立系统,需要花费相当多的时间来进行整合和迁移。这些通常成为遗留系统,随着时间的流逝,这些遗留系统会给公司带来沉重的技术负债。
鉴于区块链技术和数据用例不断发展,我们的数据3.0工作远未完成。我要说为我们取得的进展感到非常自豪。下图概述了迄今为止我们的工作和系统。
数据存储和处理
无论采用特定技术的选择是什么,都需要针对三个主要组成部分制定明确的策略:存储的分离、计算的分离,和「单一事实来源」的语义。将这些组件实现脱钩,并制定清晰的技术策略,可以避免随着企业发展而出现性能和扩容瓶颈。
数据平台和应用
虽然我们使用内部技术、开放源代码工具和供应商解决方案相结合的方案来满足各种需求,但我们在每个类别确定特定解决方案时进行了明确的权衡,因此不会在将来造成重复或歧义。我们管理事件系统、数据编排工作流、商业智能层和实验平台都实行这一原则。它还带来高度脱钩和可扩容的架构。
机器学习和平台
尽管在近年来围绕人工智能的炒作中,机器学习是「最吸引眼球的」,但它也是数据团队中最具跨职能作用的组成部分。我们真正的端到端机器学习平台Nostradamus支持Coinbase的所有机器学习模型,包括数据管道、训练、部署、服务和实验。因为机器学习平台是在综合考虑数据生态系统所有其他部分的基础上构建的,所以它不仅旨在使机器学习能够解决眼前的问题,而且还能随着业务一同增长和扩容。
数据科学和数据产品
这两个领域可能是数据团队中对最终用户最友好的部分,因为它们基本上是提炼的数据洞察的表示层,旨在使我们的客户满意并为其创造价值。它们还是上述所有工作的最直接受益者。
数据团队最重要的职责是,数据科学家应该使自己脱离机器,专注于使机器能够以可扩容的方式提供数据,并为消费者创造价值。
撰文:李玥,Coinbase数据副总裁
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。