和光科技
技术文档 业界动态 关于
English 中文
亮主题 暗主题
代码高亮
在 Gitee 上编辑此页 报告网站上的 Bug
  • eBay 基于 Istio 的统一流量管理实践
  • 图解微服务的性能监控、压测和调优
  • 华为云新一代黑科技核心算法Pixie揭秘
  • 2021 版本 ElasticSearch 学习手册
  • CDN 概述
  • Flink架构、原理与部署测试
  • 一份 Spring Boot 项目搭建模板
  • 推荐系统
    • 图解BERT模型：从零开始构建BERT
    • 最新NLP研究 | Twitter上的情绪如何预测股价走势
  • 美团技术文章
    • 复杂环境下落地Service Mesh的挑战与实践
    • 美团OCTO万亿级数据中心计算引擎技术解析
    • 美团大规模微服务通信框架及治理体系OCTO核心组件开源
    • 美团命名服务的挑战与演进
    • 美团基于Service Mesh的服务治理系统详解
    • 美团弹性伸缩系统的技术演进与落地实践
  • 零信任的技术文章
    • 企业需要关注的零信任 24 问
    • SARIF：DevSecOps工具与平台交互的桥梁
    • 2021云安全趋势：云原生安全兴起，数据安全进入“新”合规时代
  • 华为云的技术文章
    • 详解API Gateway流控实现，揭开ROMA平台高性能秒级流控的技术细节
    • JVM面试高频考点：由浅入深带你了解G1垃圾回收器
    • Karmada | 工商银行多k8s集群管理及容灾实践
    • 数据膨胀了？你的数仓又没有空间了？
    • KubeEdge子项目Sedna 0.3.0版本发布
    • 耗时1年的前端技术框架切换之旅
    • 华为云新一代黑科技核心算法Pixie揭秘
    • 鸿蒙技术文章
      • 编译过程篇
      • 如何初始化物理内存？
    • 618技术特辑
      • 618除了收到快递，你还收到了什么？电商隐私安全不容忽视！
      • 直播带货王，“OMG买它”的背后，为什么是一连串技术挑战？
      • 几百万人同时下单的秒杀，为什么越来越容易抢到了？
      • 不知不觉超预算3倍，你为何买买买停不下来？
  • 字节跳动技术文章
    • 奔跑吧！智能Monkey之Fastbot跨平台
    • 客户端重构场景分析
    • 抖音 iOS 工程架构演进
    • 字节跳动自研万亿级图数据库 & 图计算实践
    • 今日头条 ANR 优化实践系列分享
      • 今日头条 ANR 优化实践系列分享 - 实例剖析集锦
      • 今日头条 ANR 优化实践系列分享 - 监控工具与分析思路
      • 今日头条 ANR 优化实践系列分享 - 设计原理及影响因素
  • 阿里技术文章
    • 淘宝视频内容标签的结构化分析和管理
    • 多媒体前端技术入门指南
    • 深度解读畅捷通云原生架构转型实战历程
    • 全链路压测体系建设方案的思考与实践
    • 互联网后端架构演进及未来猜想
    • 5大经典排序算法在淘宝“有好货”场景的实践
    • 5大经典排序算法在淘宝“有好货”场景的实践
    • 飞猪基于 Serverless 的云+端实践与思考
    • 阿里程序员常用的 15 款开发者工具
  • 安全相关的技术文章
    • Cache 工作原理
    • 拆解 Linux 网络包发送过程
  • 数据库技术
    • mongo DB
      • 为什么 MongoDB 使用 B 树？
    • mysql
      • MySql主从复制
      • MySQL的万字总结
    • redis
      • 5种基本数据结构
      • Redis 的10个技巧
      • 跳跃表
      • 分布式锁
      • 神奇的HyperLoglog解决统计问题
      • 亿级数据过滤和布隆过滤器
      • GeoHash查找附近的人
      • 持久化
      • 发布订阅功能
      • 分布式缓存的选择及问题
    • 分布式ID生成方案总结
  • 云迁移
    • 如何把单体式应用拆解成微服务
    • 和光科技云迁移方案
    • 云迁移常见问题
    • 云迁移技巧
    • 15个非常有趣的云原生趋势
    • 秒拍云迁移
    • SSO的Spring Cloud微服务改造过程
  • java基础
    • 浅谈算法和数据结构
      • 浅谈算法和数据结构-栈和队列
      • 30张图带你彻底理解红黑树
      • 浅谈算法和数据结构二 基本排序算法
      • 浅谈算法和数据结构三 合并排序
      • 浅谈算法和数据结构四 快速排序
      • 浅谈算法和数据结构五 优先级队列与堆排序
      • 浅谈算法和数据结构六 符号表及其基本实现
      • 浅谈算法和数据结构七 二叉查找树
      • 浅谈算法和数据结构八 平衡查找树之2-3树
      • 浅谈算法和数据结构十二 无向图相关算法基础
      • 浅谈算法和数据结构九 平衡查找树之红黑树
      • 浅谈算法和数据结构十 平衡查找树之B树
      • 浅谈算法和数据结构十一 哈希表
    • java锁
      • Java分布式锁解决方案
      • 深入分析 volatile 的实现原理
      • 深入分析 synchronized 的实现原理
      • 深入分析 CAS
      • Java 的几把 JVM 级锁
      • ConcurrentHashMap
      • Redis锁的坑
    • JVM运行时内存区域划分
    • JVM内存布局
    • Spring——AOP原理及源码
    • 学习ConcurrentHashMap并发写机制
  • devops
    • GitOps 初探
    • A beginner's guide to DevOps pipelines
    • ansible
  • 架构师之路
    • 大型架构之科普工具篇
    • 支付系统高可用架构设计实战
    • 后端架构师技术图谱
    • 如何建立架构师的立体化思维？
    • 多研究些架构，少谈些框架
    • 微服务业务开发三个难题－拆分、事务、查询
    • How to Design a Web Application
    • 阿里巴巴技术专家三画：如何画好架构图（文末赠书）
  • 算法专题
    • 浅谈 CAP 和 Paxos 共识算法
    • 一致性 Hash 在负载均衡中的应用
    • 软件工程技术面试个人指南
    • 布隆过滤器
    • 如何设计一个可扩展的限流算法
  • 方案选型
    • 酷家乐服务网格与Serverless落地情况
    • B站高可用用架构实践
    • 10W+ Kubernetes容器数量下，携程如何打造统一弹性调度体系
    • 挖财的 Kubernetes 容器化之路
    • 江苏移动基于Prometheus实现百亿级话单实时全景监控
    • Kubernetes在喜马拉雅的实践：测试环境稳定性
    • 同程艺龙大数据在Kubernetes的实践
    • 滴滴弹性云Kubernetes实践
    • 新东方的Kubernetes实践：从服务化ES到Kafka和Redis
    • Kubernetes在信也科技的落地实战
    • 架构演进史
    • 蔚来汽车的Kubernetes实践
    • Kubernetes 在有赞的实践
    • 美团点评Kubernetes集群管理实践
    • 小公司如何优雅地推进应用上Kubernetes容器云
    • PPmoney基于Kubernetes的DevOps实践
    • 跨境时尚电商SHEIN基于Kubernetes的DevOps实践
    • 基于OVS自研容器网络插件在金融类企业的落地实践
    • Kubernetes在宜信落地实践
    • 京东618的秘密
    • Prometheus监控系统在云搜中的应用与实践
    • 浅谈Kubernetes Ingress控制器的技术选型
    • 酷家乐服务网格与Serverless落地情况
  • 大数据
    • hadoop、hbase、hive、spark分布式系统架构原理
    • spark专题
      • 基于云原生的大数据实时分析方案实践
    • Hadoop
      • Hadoop 十年解读与发展预测
      • Hadoop学习笔记 网站日志分析项目案例
    • elk
      • 使用Kafka部署Elastic Stack
      • 中文搜索
      • 使用Grafana监视 Elasticsearch
      • 使用 Logstash 和 JDBC 确保 Elasticsearch 与关系型数据库保持同步
      • pipeline aggregation 介绍
      • Filebeat深度剖析与实践
      • java 操作 es
      • nodejs 操作 es
      • 使用Python抓取网页内容并保存到es
      • 使用Logstash将电子邮件导入到Elasticsearch
      • Data转换，分析，提取，丰富及核心操作
  • spring cloud
    • 日志排查问题困难？分布式日志链路跟踪来帮你
  • spring boot
    • Spring 的 Bean 生命周期，11 张高清流程图及代码，深度解析
    • Zero Downtime Deployment Database Issues
    • 自定义spring boot starter
  • kubernetes
    • 关于 Kubernetes 规划的灵魂 n 问
    • Kubernetes 集群安全机制详解
    • Kubnernetes 部署 Kiali
    • 10.Kubernetes 网络
    • 使用 Istioctl 在 Kubernetes 中安装 Istio
    • Kubernetes 部署 Ingress 控制器 Traefik v2.
    • Kubernetes部署Jenkins
    • Kubernetes部署ELK
    • 1.Kubernetes 学习路径
    • Kubernetes部署helm
    • Kubnernetes 部署 Zipkin 搭配 Kafka+ElasticSearch 实现链路追踪
    • Kubernetes 部署 Kafka & Zookeeper & Kafka Manage
    • Kubernetes handbook
    • Kubernetes 中部署代码质量检测工具 SonarQube
    • Kubernetes Dashboard的安装与配置
    • Kubernetes部署redis
    • 11.prometheus提供完备监控系统
    • 9.存储：PV and PVC
    • 8.metric-server and HPA
    • 7.Deployment,ReplicaSet and DaemonSet
    • 6.Pod健康检查机制
    • 5.pod调度
    • 4.资源管理和服务质量
    • 3.部署kubernetes集群
    • 2.kubernetes简介
    • 零信任
      • istioSecurity
      • 零信任原生安全：超越云原生安全
      • Kubernetes 下零信任安全架构分析
    • kubernetes 源码学习
      • kube-apiserver 源码学习
        • NewAPIServerCommand
      • kube-scheduler
        • NewSchedulerCommand
        • registerAlgorithmProvider
        • scheduleOne
        • findNodesThatFit
        • PrioritizeNodes
        • preempt
      • kube-controller-manager 源码学习
        • DeploymentController
        • Informer
        • NewControllerManagerCommand
      • kubelet源码分析
        • NewKubeletCommand
        • NewMainKubelet
        • startKubelet
        • syncLoopIteration
        • syncPod
    • 参考文档
      • k8s components
        • kube-scheduler
        • kubectl
        • Kubelet
        • kube-scheduler
        • kube-proxy
        • kube-dns
        • kube-apiserver
        • ETCD
      • k8s concepts
      • kubectl 创建 Pod 背后到底发生了什么？
      • iptables
      • 浅析kube-proxy中的IPVS模式
      • Horizontal Pod Autoscaler
    • Springcloud and kubernetes
      • spring-cloud-kubernetes与SpringCloud Gateway
      • spring-cloud-kubernetes的服务发现和轮询实战(含熔断)
      • spring-cloud-kubernetes自动同步k8s的configmap更新
      • spring-cloud-kubernetes背后的三个关键知识点
      • spring-cloud-kubernetes与k8s的configmap
  • knative
    • KPA
    • 分布式系统设计必备知识图谱
    • zookeeper
      • ZooKeeper机制架构
      • 构建ZooKeeper应用
      • ZooKeeper安装配置
      • ZooKeeper伸缩性
      • ZooKeeper管理数据
      • ZooKeeper一致性原理
      • ZooKeeper命令操作
      • ZooKeeper简单介绍
    • zipkin
      • 初识 Zipkin
      • Brave 源码分析 —— Tracer 和 Span
      • Brave 源码分析 —— Brave 和 SpringBoot 整合
      • Brave 源码分析 —— Zipkin 的源码结构
      • Brave 源码分析 —— HttpTracing
      • Brave 源码分析 —— KafkaCollector
      • Brave 源码分析 —— Tracing
    • sentinel
      • Alibaba Sentinel熔断降级/限流框架不完全解析
    • Kafka
      • 从未如此简单：10分钟带你逆袭Kafka
      • 学习 Kafka 入门知识看这一篇就够了
      • Kafka 的 Lag 计算误区及正确实现
      • Kafka 解析之 topic 创建
      • apache Kafka概要介绍
  • api-gateway
    • Spring Cloud Gateway、Zuul 基准测试
    • 新一代API网关服务
    • 灰度路由策略
    • 自动化测试
    • Do I Need an API Gateway if I Use a Service Mesh?
    • API Gateways Are Going Through an Identity Crisis
    • 使用API Gateway
    • 监控
      • 使用Prometheus和Grafana构建Redis实时监控平台
      • 哆啦A梦：基于Prometheus的企业监控报警平台
      • 打造云原生大型分布式监控系统（三）：Thanos 部署与实践
      • 打造云原生大型分布式监控系统（一）：大规模场景下 Prometheus 的优化手段
      • 基于Prometheus构建MySQL可视化监控平台
      • 打造云原生大型分布式监控系统（二）：Thanos 架构详解
  • 2020年12月的技术文章
    • 用了 3 年 CAT，这次我想选择 SkyWalking
    • Kubnernetes 部署 Zipkin 搭配 Kafka+ElasticSearch 实现链路追踪
    • 超级棒的秒杀系统架构分析与实战
    • Springboot 之基于腾讯云 Serverless 的订单应用
    • 高并发，你真的理解透彻了吗
    • 部署 Spring Boot 应用到 K8S 教程
    • 40 张图看懂分布式追踪系统原理及实践
    • 14天自定义3个注解扩展Swagger的3个功能的经历
    • 最棒 Spring Boot 干货总结
    • 如何编写最佳的 Dockerfile
    • Spring Boot 2 + Spring Security 5 + JWT 的单页应用 Restful 解决方案
    • 10 张图告诉你，Kafka 是怎么做到支持百万级 TPS 的？
    • 图解 Linux 网络包接收过程
  • 安全相关
    • 认证授权基础
  • 微服务
    • istio专题
      • Istio路由管理简介
      • Do I Need an API Gateway if I Use a Service Mesh?
      • 基于Kubernetes和Istio的Serverless框架Knative解析之Autoscaler
      • Kubernetes+Docker+Istio 容器云实践
      • Istio流量管理
  • spring-cloud-kubernetes
  • 2019 年度总结
    • 2019年度前端总结
    • 2019年度容器安全现状分析
  • Docker(一)：Docker入门教程
  • Docker(三)：Dockerfile 命令详解
  • Docker(二)：Dockerfile 使用介绍
  • Docker(五)：Docker 三剑客之 Docker Machine
  • Docker(六)：Docker 三剑客之 Docker Swarm
  • Docker(四)：Docker 三剑客之 Docker Compose
  • Spring Boot (十九)：使用 Spring Boot Actuator 监控应用
  • Spring Boot 2 (七)：Spring Boot 如何解决项目启动时初始化资源
  • Spring Boot 2 (三)：Spring Boot 开源软件都有哪些？
  • Spring Boot 2 (九)：【重磅】Spring Boot 2.1.0 权威发布
  • Spring Boot 2 (二)：Spring Boot 2 尝鲜-动态 Banner
  • Spring Boot 2 (五)：Docker Compose + Spring Boot + Nginx + Mysql 实践
  • Spring Boot 2 (八)：Spring Boot 集成 Memcached
  • Spring Boot 2 (六)：使用 Docker 部署 Spring Boot 开源软件云收藏
  • Spring Boot 2 (四)：使用 Docker 部署 Spring Boot
  • Spring Boot 2 版的开源项目云收藏来了！
  • Spring Boot 2(一)：【重磅】Spring Boot 2.0权威发布
  • Spring Boot(二十)：使用 spring-boot-admin 对 Spring Boot 服务进行监控
  • Spring Boot(十七)：使用 Spring Boot 上传文件
  • Spring Boot(十八)：使用 Spring Boot 集成 FastDFS
  • springcloud(十一)：服务网关Zuul高级篇
  • springcloud(十三)：注册中心 Consul 使用详解
  • springcloud(十二)：使用Spring Cloud Sleuth和Zipkin进行分布式链路跟踪
  • springcloud(十五)：服务网关 Spring Cloud GateWay 入门
  • springcloud(十四)：Spring Cloud 开源软件都有哪些？
  • 一文读懂 Spring Boot、微服务架构和大数据治理三者之间的故事
  • 为什么说 Java 程序员到了必须掌握 Spring Boot 的时候？
  • 分布式文件系统FastDFS详解
  • 源代码分析
    • Spring 声明式事务源码分析
    • Hystrix源码分析
    • Ribbon源码分析
    • Eureka源码分析
    • Feign源码分析
    • Guava RateLimiter源码分析
  • Spring Cloud在国内中小型公司能用起来吗？
  • springcloud(一)：大话Spring Cloud
  • springcloud(七)：配置中心svn示例和refresh
  • springcloud(九)：配置中心和消息总线（配置中心终结版）
  • springcloud(二)：注册中心Eureka
  • springcloud(八)：配置中心服务化和高可用
  • springcloud(六)：配置中心git示例
  • springcloud(四)：熔断器Hystrix
  • 从架构演进的角度聊聊Spring Cloud都做了些什么？
  • 如何构建云收藏项目
订阅
  1. 和光科技
  2. 技术文档
  3. 2020 年的技术文章
  4. 大数据
  5. Hadoop

Hadoop

Hadoop博客文章。

Hadoop 十年解读与发展预测
2016年3月22日

Hadoop 十年解读与发展预测。

Hadoop学习笔记 网站日志分析项目案例

Hadoop学习笔记 网站日志分析项目案例.

链接

    粤ICP备19161989号
    和光科技
    © 2020 Authors, 隐私政策
    本页最后更新于：2020年2月14日