谷歌三大核心技术(一)Google File System中文版 2026年07月07日 daichangya 3 编者注:本文为历史博文归档;涉及 JDK、框架与工具链版本请以当前官方文档为准。引用外链图片可能失效,阅读时请注意时效性。译者:alex摘要我们设计并实现了 Google GFS 文件系统(Google File System),一个面向大规模数据密集型... 阅读全文 0 评论
软件开发中团队首领的好坏之分 2026年07月07日 daichangya 2 软件开发中团队首领的好坏之分引言:人与技术软件开发的成败,关键往往在于人,而非技术。刚大学毕业时,我曾以为只有精通各种技术才能成为一名伟大的程序员,认为人件管理技术(Peopleware)是经理们的专属领地。但现实却给我上了深刻的一课。经常有人声称人员管... 阅读全文 0 评论
Hive官方文档翻译——Hive Tutorial 2026年07月07日 daichangya 3 概念什么是 HiveHive 是基于 Apache Hadoop 的数据仓库基础架构。Hadoop 为商用硬件上的数据存储和处理提供了大规模的水平扩展和容错功能。Hive 旨在简化数据汇总、临时查询和分析大量数据的过程。它提供了 SQL 方言,使用户可以... 阅读全文 0 评论
二度北戴河 2026年07月07日 daichangya 3 二度北戴河这次北戴河之行时间比较充裕,带上了老人和孩子,因此没有安排太多的项目。也许是年龄渐长,体力上有些倦怠,不像第一次来的时候那么“打鸡血”,骑车沿着海岸线一直走,很少回宾馆休息。这次我们依然选择了第一次来北戴河时居住的民宿,环境虽不是太好,但胜在价... 阅读全文 0 评论
如何构建一个通用的垂直爬虫平台? 2026年07月07日 daichangya 2 之前做爬虫时,在公司设计开发了一个通用的垂直爬虫平台,后来在公司做了内部的技术分享。这篇文章把整个爬虫平台的设计思路整理了一下,分享给大家。写一个爬虫很简单,写一个可持续稳定运行的爬虫也不难,但如何构建一个通用化的垂直爬虫平台?这篇文章,我就来和你分享一... 阅读全文 0 评论