物化视图主要用于预先计算并保存表连接或聚合等耗时较多的操作的结果，这样，在执行查询时，就可以避免进行这些耗时的操作，从而快速的得到结果。物化视图使用查询重写（query rewrite）机制，不需要修改原有的查询 ...

 评论 0    阅读 2375   Spark>>

6 月初，IBM 发布了适用于 macOS 和 iOS 的完全同态加密（Fully Homomorphic Encryption，FHE）工具包，并表示 Linux 版本将在数周内推出。现在 Linux 版本发布了，其将 FHE 带到 IBM Z 和 x86 架构的多个 Linux 发 ...

• ·Zuul：为了改进CI/CD而生，顺便淘汰了Jenki ...
• ·携程Hadoop跨机房架构实践

 评论 0    阅读 3543   安全>>

知名软件行业分析公司 RedMonk 发布了 2020 年 6 月（Q3 季度）编程语言排行榜。RedMonk 编程语言排行榜通过追踪编程语言在 GitHub 和 Stack Overflow 上的代码使用情况与讨论数量，统计分析后进行排序，其旨在深入 ...

 评论 0    阅读 3663   编程开发>>

虽然 GNU Make 和其他构建系统可以很好地进行扩展以并发编译大量文件，不过 GCC 自身也一直在让 GCC 的更多工作在编译大型源代码文件时能够并行执行。早在2019年夏天，其团队就已开始尝试解决并行化遇到的瓶颈，让更 ...

• ·发布 TensorFlow Quantum：用于量子机器学 ...
• ·Tomcat 爆出高危漏洞！

 评论 0    阅读 4444   开源软件>>

以前，我们一直认为传统相机将3D世界转换为2D图像，已可以满足我们对于图像的应用，而2D图像中丢失的三维似乎并不重要。但随着计算机视觉（CV）的飞速发展以及与深度学习的结合，许多雄心勃勃的研究人员试图使机器通 ...

 评论 0    阅读 6354   物联网>>

当我们架构微服务应用时首先遇到的一个问题是，作为消费者如何访问并调用服务提供者所提供的服务，作为服务提供者如何能让服务消费者知道并进行消费。在传统应用开发时，通常是在开发语言层面上解决这个问题，可能我 ...

• ·毛骨悚然！拥有超30亿人脸数据的美国AI公司 ...
• ·10个节省时间和改善工作流的Git技巧

 评论 0    阅读 6567   架构>>

关于 node 的使用已经很久了，使用范围也很广，似乎有前端的地方就有 node，那么来思考一个问题，node 到底是用来干嘛的呢？本文从五个大的方面对该问题进行了解释。本文不仅仅可以应用场景的分析，完全可以把它当做 ...

 评论 0    阅读 6382   JavaScript>>

今天是计算机科学之父、人工智能之父 艾伦·麦席森·图灵 诞辰 108 周年。作为“图灵意志”的传承者，依照惯例，在今日纪念这位伟人。从“图灵机”到“图灵测试”，从破译德军的 Enigma 到自杀之谜，图灵一生都是传 ...

• ·用随机阐释确定 | 2020年阿贝尔奖
• ·80%的英国学校接受理工科跨转商科专业，文 ...

 评论 0    阅读 7487   学术>>

7 月 21 日，佛罗里达大学宣布，与英伟达建立公私合作伙伴关系，为学生、教职员工和研究人员提供最强大的 AI 训练和工具，打造全球高校最快 AI 超级计算机。 为此事提供大力支持及资金捐赠的，正是英伟达联合创始人 ...

 评论 0    阅读 7649   超级计算>>

Spark 哪个地方需要用到 K8S 呢？K8S 是 Spark 上全新的集群管理和调度系统，其他三个资源管理和调度为 Standalone、YARN 以及 Apache Mesos。YARN 集群中的 Spark 版本、Python 版本以及依赖都是全局配置的，缺乏隔 ...

• ·RabbitMQ和Kafka的比较
• ·重磅！三大运营商网间结算重大调整：移动迎 ...

 评论 0    阅读 7367   架构>>

Shell- 毋庸置疑，在终端中，Shell 是使用最频繁也最重要的工具。过去，我曾经使用过 Bash 和 Z Shell，而如今，我正在使用的是 Fish Shell。这是一个非常优秀的终端 Shell 工具，拥有许多开箱即用的功能，例如语法 ...

 评论 0    阅读 7064   架构>>

数年来，Netflix 一直是全球体验最好的在线订阅制视频流媒体服务，其流量占全球互联网带宽容量的 15％以上。 在过去的2019 年，Netflix 已经有 1.67 亿名订阅用户，平均每个季度新增 500 万订户，服务覆盖全球 200 ...

• ·影响超10亿设备，博通和Cypress芯片曝惊天 ...
• ·金融级数据库分布式改造的架构设计要点

 评论 0    阅读 7037   架构>>

2018年，谷歌在其年度 I/O 开发者大会上宣布了第三代产品，在今天上午刚刚揭开了第四代TPU产品的神秘面纱，该产品目前尚处于研发阶段。MLPerf 最新发布的一套人工智能性能基准指标显示，第四代 TPU集群大幅超越了第 ...

 评论 0    阅读 7590   超级计算>>

人类从学会计数开始就一直和自然数打交道了，后来由于实践的需要，数的概念进一步扩充，自然数被叫做正整数，而把它们的相反数叫做负整数，介于正整数和负整数中间的中性数叫做0。它们和起来叫做整数。对于整数可以 ...

• ·MIT科技评论发布：2020年全球突破性技术Top ...
• ·当输入的知识数量足够多质量足够高时,你的 ...

 评论 0    阅读 7298   数学>>

“大数据技术与应用”专业是我国高职高专院校新增专业，专业代码610215，修业年限分别是3年、2年或5年。2017年全国64所高职高专院校登记备案“大数据技术与应用”专业；2018年212所高职高专院校登记备案“大数据技术 ...

 评论 0    阅读 9234   求学>>

数据库的这个三范式的概念，相信大多数人都不会陌生，从懵懵懂懂的大学时代就已经普及到教材了（没记错的话应该在数据库系统概论这本教材里）。还记得那会刚开始找实习的时候，由于自己本事太小，连简历都不知道怎么 ...

• ·盘点100个最受欢迎的Java库，看看用过那几 ...
• ·Kafka为什么这么快？

 评论 0    阅读 9267   数据库>>

Spark 诞生于加州大学伯克利分校的 AMPLab 实验室，该实验室致力于数据密集型计算的研究。AMPLab 研究人员与大型互联网公司合作，研究如何解决数据和 AI 问题，然后发现那些拥有海量数据的公司也面临同样的问题。于 ...

 评论 0    阅读 9059   Spark>>

Filebeat：轻量级数据收集引擎。基于原先 Logstash-fowarder 的源码改造出来。换句话说：Filebeat就是新版的 Logstash-fowarder，也会是 ELK Stack 在 Agent 的第一选择。Kafka: 数据缓冲队列。作为消息队列解耦了处 ...

• ·消息队列和 RocketMQ 入门总结
• ·core-js 作者入狱 18 个月，2600 万次周下 ...

 评论 0    阅读 8330   架构>>

陆金所从 2018 年启动全站去 O 项目以来，在不做任何服务降级的情况下，历时 2 年通过上百次变更，把全站 98% 的 Oracle 数据库无缝切换到 MySQL 上。其中，这 98% 的数据库覆盖了陆金所的账务、资金、资产中心、支 ...

 评论 0    阅读 9089   架构>>

React 是一个专注的组件库。因此，它对如何请求远程数据没有什么建议。如果要通过 HTTP 请求数据并将其发送到 Web API，可以考虑下面四种方法。对于一个简单的应用程序，只要发起几个请求，就可以正常工作。但是上面 ...

• ·谷歌 Fuchsia OS 进入开发者测试阶段，它真 ...
• ·David Harold：云技术将开启Netflix般的云 ...

 评论 0    阅读 9306   网络技术>>

让分布式系统的操作变得简单，在某种程度上是一种艺术，通常这种实现都是从大量的实践中总结得到的。Apache Kafka 的受欢迎程度在很大程度上归功于其设计和操作简单性。随着社区添加更多功能，开发者们会回过头来重 ...

 评论 0    阅读 9418   分布式系统>>

作为一名研究者，你要取得成功，最重要的一点，是在研究生入学时要选择好的导师。不能只道听途说，而是要把导师写的论文找来读，看看自己想要做的研究是否与之相符。你要把自己的一生当做赌注押下去，就要选择认真做 ...

• ·2020年最火本科生专业来了！180所高校新增 ...
• ·一群麻省数学天才组成赌博社团赢遍天下，最 ...

 评论 0    阅读 9428   学术>>

这里仅列出教育部和中央部委所属高校新增的“人工智能”/“大数据”专业，地方政府所属的高校专业暂不列出。各高校在考生报名地是否开设“人工智能”/“大数据”专业的招生，请查询相关资料或咨询招生办，这里不作为 ...

 评论 0    阅读 9552   求学>>

2010 到 2011 年，Mike Jumper 启动了 Guacamole 项目。这是一个多协议网关，它可以让管理员安全地提供远程桌面。因为客户端界面是在浏览器中运行的，因此，它非常轻量化且易于使用，可以替代一些旧的远程访问解决方 ...

• ·谷歌、甲骨文史诗级版权诉讼案，10 年 API ...
• ·LogDevice：一种用于日志的分布式数据存储 ...

 评论 0    阅读 11959   开源软件>>

最传统的安装方法就是去gradle官网下载二进制包，解压，然后将路径添加到环境变量中。如果你没什么其他需求，可以使用这种安装方式。但是，gradle是一个非常新潮的项目，每隔几个月就会发布一个新版本，这种方式可能 ...

 评论 0    阅读 11225   编程开发>>

《2020年中国大学生就业报告》显示，2019届本科毕业生月入5440元，本科计算机类、高职铁道运输类专业领跑薪酬榜。剔除通货膨胀因素的影响外，与2015届相比，五年来本科生起薪涨幅为23.6%；高职毕业生平均月收入为429 ...

• ·应用数学：群体免疫与SEIR模型
• ·教育部发布全国高等学校名单（普通高校2688 ...

 评论 1    阅读 10749   求学>>

2020年6月23日9点43分，我国在西昌卫星发射中心成功发射了北斗系统第五十五颗导航卫星，也是北斗三号的最后一颗全球组网卫星。至此，北斗三号全球卫星导航系统星座部署全面完成。新闻出来之后，国人为之振奋，纷纷点 ...

 评论 0    阅读 11644   物联网>>

基于内存的Redis应该是目前各种web开发业务中最为常用的key-value数据库了，我们经常在业务中用其存储用户登陆态（Session存储），加速一些热数据的查询（相比较mysql而言，速度有数量级的提升），做简单的消息队列 ...

• ·什么？搞不定Kafka重复消费？
• ·如何在Gihub上面精准搜索开源项目？

 评论 0    阅读 11655   Nosql>>

Kafka 是当下热门的消息队列中间件，它可以实时地处理海量数据，具备高吞吐、低延时等特性及可靠的消息异步传递机制，可以很好地解决不同系统间数据的交流和传递问题。Kafka 在马蜂窝也有非常广泛的应用，为很多核心 ...

 评论 0    阅读 12219   大数据>>

提升Web应用的性能从未像今天这样刻不容缓。在线经济活动的比例日益提高，就连发展中国家和地区的经济活动都已经有5%以上在线进行了（相关数据请参考本文后面的资源）。在这个超级链接、随时在线的现代世界，用户的 ...

• ·马蜂窝 IM 移动端架构的从 0 到 1
• ·不要做中台！不要做！不要……要

 评论 0    阅读 12526   架构>>

TIOBE 2020 年 7 月份的编程语言排行榜已经公布，官方的标题是：R 语言的排名达到了历史最高位。R 语言一种自由软件编程语言与操作环境，主要用于统计分析、绘图、数据挖掘。也有人把 R 语言用作矩阵计算，其分析速 ...

 评论 0    阅读 12806   编程开发>>

他是 C 语言之父、1983 年图灵奖得主，还是 Unix 的关键开发者。然而，他却因为“任性”没有拿到博士学位，而且当年写的博士论文一丢就是半个世纪。如今，这一神秘的博士论文终于重见天日。对于计算机专业人士来说， ...

• ·物理学家如何开启量子信息学？
• ·清华发布新版计算机学科推荐学术会议和期刊 ...

 评论 0    阅读 13211   学术>>

越来越多的组织开始放弃单体应用，逐步转向微服务的架构模式–将业务流程分为多个独立的服务。例如，在一个机票预订中，就可能涉及许多个单独的过程：在航空公司预订机票，付款，并在机票成功预订后向客户发送确认信 ...

 评论 0    阅读 14842   架构>>

人类文明的进步，只要出现难以逾越的障碍，必然给人类的发展带来迷茫和灾难。而解决的路径只有一个：科技探索和创新。只有鼎力进行中的科技探索，能促使人类放弃相互之间的成见，携手团结，共创光明的未来。

• ·因疫情导致的这波向虚拟学习的转型，对高等 ...
• ·常用数学软件简介

 评论 0    阅读 14158   科学探索>>

2019年10月，谷歌的一项关于量子计算的研究登上了Nature封面。谷歌声称用53个量子比特的量子计算机Sycamore实现了quantum supremacy，引起了学界的广泛关注。论文中指出，他们的量子计算机用3分20秒完成了一项任务， ...

 评论 0    阅读 14676   超级计算>>

关于变量的命名，这又是一个容易引发程序员论战的话题。如何命名才能更具有可读性、易写性与明义性呢？众说纷纭。本期“Python为什么”栏目，我们将聚焦于变量命名中的连接方式，来切入这块是非之地，想要回答的问题 ...

• ·中台崛起的本质是“去ERP化”
• ·理解Apache Pulsar工作原理

 评论 0    阅读 17177   Python>>

当tracking开启时， Redis会"记住"每个客户端请求的key，当key的值发现变化时会发送失效信息给客户端(invalidation message)。失效信息可以通过RESP3协议发送给请求的客户端，或者转发给一个不同的连接(支持RESP ...

 评论 0    阅读 16905   Nosql>>

图数据库的应用场景非常广：搜索、推荐、关系图谱、知识图谱等等。目前贝壳也有各种场景需要使用到图数据库，但选型各不相同，有的部门使用JanusGraph，有的使用Neo4j，每个有需要的部门都得从头搭建一套。所以我们 ...

• ·2020年你应该选择哪个Java微服务框架？
• ·中国北斗与美国GPS差距有多大？核心数据曝 ...

 评论 0    阅读 17753   数据库>>

在日常使用 Linux/Unix 系统时，我们会使用许多命令行工具来完成我们的工作，并理解和管理我们的系统，像 du 用于监视磁盘利用率，top 用于显示系统资源。其中一些工具已经存在很长时间了。例如，top 于 1984 年首次 ...

 评论 0    阅读 17764   Linux>>

7 月 6 日，Apache Flink 1.11 正式发布。从 3 月初进行功能规划到 7 月初正式发版，1.11 用将近 4 个月的时间重点优化了 Flink 的易用性问题，提升用户的生产使用体验。 SQL 作为 Flink 中公认的核心模块之一，对 ...

• ·RabbitMQ与Kafka的技术差异以及使用注意点
• ·技术专家：为什么我们最终选择Apache Pulsa ...

 评论 0    阅读 17512   大数据>>

Gossip协议是基于六度分隔理论（Six Degrees of Separation）哲学的体现，简单的来说，一个人通过6个中间人可以认识世界任何人。数学公式是： n表示复杂度，N表示人的总数，W表示每个人的联系宽度。依据邓巴数，即 ...

 评论 0    阅读 16670   分布式系统>>

开源技术会被美国管制吗？这应该是一年来中国技术从业者最关心的问题。随着中美关系日益紧张，技术圈也受到波及，前两周，国商务部将哈工大、北航等33家机构纳入实体清单，也就是说，凡是在实体清单以内的公司以及机 ...

• ·10W+ K8s容器数量下，携程如何打造统一弹性 ...
• ·Hadoop迎来3.x时代，昔日大数据霸主如何应 ...

 评论 0    阅读 17787   开源软件>>

1998 年的谷歌和今天的谷歌相差甚远，他们也是利用了一定技巧和捷径才走到今天的位置。谷歌也曾从小鱼慢慢发展为庞然大物。如果没有强大的开发军团，就做不了在全球部署的产品。公司规模的不同，决定了技术决策的不 ...

 评论 0    阅读 18762   架构>>

常见的分支模式有 TBD（即主干开发模式）、Git-Flow 模式、Github-Flow 模式及 Gitlab-Flow 模式。TBD（主干开发模式），即所有开发者，仅在一个开发分支（即主干）上进行协作开发的模式，在这种模式下，不允许新建 ...

• ·比拼Kafka，大数据分析新秀Pulsar到底好在 ...
• ·2020年，5种将死的编程语言

 评论 0    阅读 18840   开源软件>>

程序员和木匠听起来隔行如隔山，但工作的方式其实还是有不少相似的地方：都有固定的workflow，都需要极致的耐心和一点创造力。这不，一位来自美国的北卡罗来纳州的程序员Tyler Capps，就为了完成一个“复古手提街机 ...

 评论 0    阅读 19942   树莓派>>

当数据量达到上亿的量，上cache是必经的阶段，由于点赞这种动作很随意，很多人看到大拇指就想点，所以数据量增长很快，数据规模上来后，对mysql读写都有很大的压力，这时就要考虑memcache、redis进行存储或cache。为 ...

• ·中台翻车纪实：一年叫停，员工转岗被裁，资 ...
• ·一文看懂JVM内存布局及GC原理

 评论 0    阅读 19510   Mysql>>

kubernetes 已经成为容器编排领域的王者，它是基于容器的集群编排引擎，具备扩展集群、滚动升级回滚、弹性伸缩、自动治愈、服务发现等多种特性能力。从宏观上来看 kubernetes 的整体架构，包括 Master、Node 以及 Et ...

 评论 0    阅读 18896   虚拟化>>

近日，TIOBE 公布了 6 月编程指数信息。本月前三的编程语言依旧是 C、Java 和 Python，C++ 和 C# 分列第四和第五。R 语言在本月创造它的排名新纪录，从第 9 位升至第 8。（PHP 从第 8 掉到了第 9）。 R 语言主要用于 ...

• ·Exadata性能加速相关软件特性的演进历史（ ...
• ·图解Gossip-可能是最有趣的一致性协议

 评论 0    阅读 19287   编程开发>>

软件架构模式是经过验证的，具有良好设计结构的方法。更具体地说，架构模式是在实践中归纳总结的一组设计决策，具有明确定义的属性，并可以重复使用。软件开发有时可以看作是选择，定制和组合架构模式的过程。软件架 ...

 评论 0    阅读 22018   架构>>

SUSE 创办于 1992 年，是全球开源 Linux 操作系统供应商。1994 年，他们首次推出了 SLS/Slackware 的安装光碟，命名为 S.u.S.E. Linux 1.0 。其后综合了 Florian La Roche 的 Jurix distribution (也是一个基于 Slac ...

• ·任正非：​不为假动作付酬
• ·亚马逊是如何敏捷起来的！

 评论 0    阅读 19305   投资并购>>

传统的纯原生开发已经不能满足日益增长的业务需求。主要表现在如下两个方面。1)动态化内容需求增大。当需求发生变化时，纯原生应用需要通过版本升级来更新内容，但应用上架、审核是需要周期的，这个周期对高速变化的 ...

 评论 0    阅读 20343   网络技术>>

虽然很多语言都有图表库，但前端相关的项目最多，在 Github 7.6w 的结果中有 3.3w 是前端的，占了 40%，主要原因是基于浏览器的可视化用起来更方便，所以使用更为广泛。不过只需要过滤一下最近上次更新时间在三个月 ...

• ·Linux 下的这些高效指令，是你快速入门运维 ...
• ·Linux桌面进化史

 评论 0    阅读 20358   网络技术>>

国内电子书厂商文石（Onyx）被指拒绝发布其电子书设备源码，违反 GPL v2 开源协议。根据曝光出来的截图显示，有人向上述厂商指明了违规问题，但 Onyx 官方回应“技术团队无法公开源码”，并希望得到谅解，这件事情一 ...

 评论 0    阅读 20922   开源软件>>

我已经开始对现在的 Web 非常反感了，它在各个层面上都是臃肿的。网站的规模正在以惊人的速度翻倍，Web 标准也在以惊人的速度扩张。试图从头开始建立一个能与现代网络兼容的 Web 浏览器，需要的人力相当于雪山工程（ ...

• ·微软谷歌亚马逊IBM....谁家的混合云更胜一 ...
• ·详解数据服务共享发布

 评论 0    阅读 23085   网络技术>>

Kubernetes并不是魔法，但如果被一个懂它的团队使用，那它就是一个非常强大的工具。Traefik作为Ingress控制器，Cert-Manager通过LetsEncrypt生成证书，External-DNS管理边缘DNS记录，这三个组合使得HTTP路由和管理像 ...

 评论 0    阅读 23290   虚拟化>>

不要将数据储存在容器中，这也是 Docker 官方容器使用技巧中的一条。容器随时可以停止、或者删除。当容器被rm掉，容器里的数据将会丢失。为了避免数据丢失，用户可以使用数据卷挂载来存储数据。但是容器的 Volumes ...

• ·PYPL 9 月编程语言排行榜发布，Python 一枝 ...
• ·AIOps对数据中心意味着什么

 评论 0    阅读 21528   虚拟化>>

Python是人工智能的未来。前不久中国经济学会（CEA）发布了顶级编程语言交互排行榜：Python超越Java高居首位。而且随着大数据和人工智能的发展，Python受到了越来越多程序员的欢迎。“人生苦短，我用 Python。”已经 ...

 评论 1    阅读 20860   Python>>