发布于: Android转发:0回复:0喜欢:0
我略懂一点 仅供参考 说错勿怪
大数据并发技术其实包含很多技术 有SQL到NoSQL到NewSQL等分布式存储 chrubby(parox)和zookeeper(zab或raft)分布式锁 karfa rocketmq等分布式队列 以及离线大数据数据处理的hadoop spark等各种技术 最根本的其实是CAP原理认为CAP三者不可同时获得 C表示数据一致性 A表示可用性 P表示可容忍网络分区 基本上P是必须的 因为硬件或软件肯定会出问题 所以大数据一般都是CP或AP 这里演变为BASE理论 强调高可用性和最终数据一致性 阿里的所谓大数据并发技术 只是上面理论的一种实现 开源社区在各个层面也有都有自己的一套实现 阿和开源社区技术实际上都有验证 从技术上来说 阿里不占太多优势的 但大数据技术关键在用 阿里有海量数据可以好好用 不断改进
引用:
2021-07-11 22:19
还有问题,以前阿里吹的大数据并发处理,什么数据库啊之类,一度还说支援12306。这些所谓高难度的问题,后来美团,抖音,拼多多应该也遇到了,他们是怎么解决的,显然不会是采用阿里or企鹅的技术吧?