技术栈您现在的位置是:首页 > 风向标 > 技术栈

后端架构师技术图谱

<a href='mailto:'>微wx笑</a>的头像微wx笑2019-07-15 17:43:50技术栈人已围观关键字:后端,架构师,技术图谱

简介今天无意间看到github上一篇超炫的博文,是阿里工程师总结的《后端架构师技术图谱》,分享给大家。

今天无意间看到github上一篇超炫的博文,是阿里工程师总结的《后端架构师技术图谱》,分享给大家。0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 数据结构0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 二叉树0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 完全二叉树0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 平衡二叉树0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 二叉查找树(BST)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 红黑树0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • B,B+,B*树0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • LSM 树0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 队列0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 集合0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 链表、数组0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 字典、关联数组0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • BitSet0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 常用算法0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 并发0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 操作系统0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 多级缓存0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 计算机原理0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • CPU0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 进程0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 线程0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 协程0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Linux0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 设计模式0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 康威定律0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 设计模式的六大原则0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 23种常见设计模式0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 应用场景0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 单例模式0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 责任链模式0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • MVC0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • IOC0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • AOP0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • UML0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 微服务思想0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 运维 & 统计 & 技术支持0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • OpenStack0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Docker0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • KVM0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Xen0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • OpenVZ0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • TDD 理论0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 单元测试0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 压力测试0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 全链路压测0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • A/B 、灰度、蓝绿测试0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Ansible0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • puppet0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • chef0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Jenkins0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 环境分离0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 常规监控0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • APM0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 统计分析0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 持续集成(CI/CD)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 自动化运维0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 测试0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 虚拟化0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 容器技术0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 云技术0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • DevOps0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 文档管理0a5编程技术_踩坑日志_进阶指南 - 无知人生

  • 中间件0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 日志搜集0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Sharding Jdbc0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Dubbo0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Thrift0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • gRPC0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 单机定时调度0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 分布式定时调度0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 消息总线0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 消息的顺序0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • RabbitMQ0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • RocketMQ0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • ActiveMQ0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Kafka0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Redis 消息推送0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • ZeroMQ0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Web缓存0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Memcached0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Redis0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Tair0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 架构0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 回收策略0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 本地缓存0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Nginx0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • OpenResty0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Tengine0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Apache Httpd0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Tomcat0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Jetty0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 架构原理0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 调优方案0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Web Server0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 缓存0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 客户端缓存0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 服务端缓存0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 消息队列0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 定时调度0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • RPC0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 数据库中间件0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 日志系统0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 配置中心0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • API 网关0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 网络0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Hessian0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Protobuf0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Epoll0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Java NIO0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • kqueue0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • OSI 七层协议0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • TCP/IP0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HTTP0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HTTP2.00a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HTTPS0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 协议0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 网络模型0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 连接和短连接0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 框架0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 零拷贝(Zero-copy)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 序列化(二进制协议)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 数据库0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • MongoDB0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Hbase0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 原理0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • InnoDB0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 优化0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 索引0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • explain0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 聚集索引, 非聚集索引0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 复合索引0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 自适应哈希索引(AHI)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 数据库设计的三大范式0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基础理论0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • MySQL0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • NoSQL0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 搜索引擎0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 搜索引擎原理0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Lucene0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Elasticsearch0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Solr0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • sphinx0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 性能0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 性能优化方法论0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 容量评估0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CDN 网络0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 连接池0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 性能调优0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 大数据0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HDFS0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • MapReduce0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Yarn0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Storm0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Flink0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Kafka Stream0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 应用场景0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 流式计算0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Hadoop0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Spark0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 安全0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • RBAC0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • OAuth2.00a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 双因素认证(2FA)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 单点登录(SSO)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 内外网分离0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 登录跳板机0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 数据备份0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 对称加密0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 哈希算法0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 非对称加密0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • XSS0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CSRF0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • SQL 注入0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Hash Dos0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 脚本注入0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 漏洞扫描工具0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 验证码0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • web 安全0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • DDoS 防范0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 用户隐私信息保护0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 序列化漏洞0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 加密解密0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 服务器安全0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 数据安全0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 网络隔离0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 授权、认证0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 常用开源框架0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Spring 家族0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Log4j、Log4j20a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Logback0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 开源协议0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 日志框架0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • ORM0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 网络框架0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Web 框架0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 工具框架0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 分布式设计0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 设计思想 & 开发模式0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 项目管理0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 架构评审0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 重构0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 代码规范0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 代码 Review0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • RUP0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 看板管理0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • SCRUM0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 敏捷开发0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 极限编程(XP)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 结对编程0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • PDCA 循环质量管理0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • FMEA管理模式0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 通用业务术语0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 技术趋势0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 政策、法规0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 架构师素质0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 团队管理0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 招聘0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 资讯0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 在线电子书0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 纸质书0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 开发方面0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 架构方面0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 技术管理方面0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基础理论0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 工具方面0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 大数据方面0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 团队博客0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 个人博客0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 行业资讯0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 公众号列表0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 博客0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 综合门户、社区0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 问答、讨论类社区0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 行业数据分析0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 专项网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 其他类0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 推荐参考书0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 技术资源0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • VPS0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 开源资源0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 手册、文档、教程0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 在线课堂0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 会议、活动0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 常用APP0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 找工作0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 工具0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 代码托管0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 文件服务0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 综合云服务商0a5编程技术_踩坑日志_进阶指南 - 无知人生

    (Toc generated by simple-php-github-toc0a5编程技术_踩坑日志_进阶指南 - 无知人生

    数据结构

    队列

    • 《java队列——queue详细分析》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 非阻塞队列:ConcurrentLinkedQueue(无界线程安全),采用CAS机制(compareAndSwapObject原子操作)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 阻塞队列:ArrayBlockingQueue(有界)、LinkedBlockingQueue(无界)、DelayQueue、PriorityBlockingQueue,采用锁机制;使用 ReentrantLock 锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《LinkedList、ConcurrentLinkedQueue、LinkedBlockingQueue对比分析》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    集合

    链表、数组

    字典、关联数组

    二叉树

    每个节点最多有两个叶子节点。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    完全二叉树

    • 《完全二叉树》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 叶节点只能出现在最下层和次下层,并且最下面一层的结点都集中在该层最左边的若干位置的二叉树。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    平衡二叉树

    左右两个子树的高度差的绝对值不超过1,并且左右两个子树都是一棵平衡二叉树。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    二叉查找树(BST)

    二叉查找树(Binary Search Tree),也称有序二叉树(ordered binary tree),排序二叉树(sorted binary tree)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    红黑树

    B,B+,B*树

    MySQL是基于B+树聚集索引组织表0a5编程技术_踩坑日志_进阶指南 - 无知人生

    LSM 树

    LSM(Log-Structured Merge-Trees)和 B+ 树相比,是牺牲了部分读的性能来换取写的性能(通过批量写入),实现读写之间的。
    Hbase、LevelDB、Tair(Long DB)、nessDB 采用 LSM 树的结构。LSM可以快速建立索引。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《LSM树 VS B+树》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • B+ 树读性能好,但由于需要有序结构,当key比较分散时,磁盘寻道频繁,造成写性能。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • LSM 是将一个大树拆分成N棵小树,先写到内存(无寻道问题,性能高),在内存中构建一颗有序小树(有序树),随着小树越来越大,内存的小树会flush到磁盘上。当读时,由于不知道数据在哪棵小树上,因此必须遍历(二分查找)所有的小树,但在每颗小树内部数据是有序的。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《LSM树(Log-Structured Merge Tree)存储引擎》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 极端的说,基于LSM树实现的HBase的写性能比MySQL高了一个数量级,读性能低了一个数量级。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 优化方式:Bloom filter 替代二分查找;compact 小数位大树,提高查询性能。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Hbase 中,内存中达到一定阈值后,整体flush到磁盘上、形成一个文件(B+数),HDFS不支持update操作,所以Hbase做整体flush而不是merge update。flush到磁盘上的小树,定期会合并成一个大树。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    BitSet

    经常用于大规模数据的排重检查。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    常用算法

    排序、查找算法

    选择排序

    冒泡排序

    • 《冒泡排序的2种写法》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 相邻元素前后交换、把最大的排到最后。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 时间复杂度 O(n²)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    插入排序

    快速排序

    归并排序

    • 《图解排序算法(四)之归并排序》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 分而治之,分成小份排序,在合并(重建一个新空间进行复制)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    希尔排序

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    堆排序

    • 《图解排序算法(三)之堆排序》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 排序过程就是构建最大堆的过程,最大堆:每个结点的值都大于或等于其左右孩子结点的值,堆顶元素是最大值。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    计数排序

    • 《计数排序和桶排序》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 和桶排序过程比较像,差别在于桶的数量。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    桶排序

    基数排序

    按照个位、十位、百位、…依次来排。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    二分查找

    • 《二分查找(java实现)》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 要求待查找的序列有序。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 时间复杂度 O(logN)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《java实现二分查找-两种方式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • while + 递归。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Java 中的排序工具

    • 《Arrays.sort和Collections.sort实现原理解析》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Collections.sort算法调用的是合并排序。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Arrays.sort() 采用了2种排序算法 – 基本类型数据使用快速排序法,对象数组使用归并排序。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    布隆过滤器

    常用于大数据的排重,比如email,url 等。
    核心原理:将每条数据通过计算产生一个指纹(一个字节或多个字节,但一定比原始数据要少很多),其中每一位都是通过随机计算获得,在将指纹映射到一个大的按位存储的空间中。注意:会有一定的错误率。
    优点:空间和时间效率都很高。
    缺点:随着存入的元素数量增加,误算率随之增加。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    字符串比较

    KMP 算法

    KMP:Knuth-Morris-Pratt算法(简称KMP)
    核心原理是利用一个“部分匹配表”,跳过已经匹配过的元素。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    深度优先、广度优先

    贪心算法

    回溯算法

    剪枝算法

    动态规划

    朴素贝叶斯

    推荐算法

    最小生成树算法

    最短路径算法

    并发

    Java 并发

    多线程

    线程安全

    一致性、事务

    事务 ACID 特性

    事务的隔离级别

    • 未提交读:一个事务可以读取另一个未提交的数据,容易出现脏读的情况。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 读提交:一个事务等另外一个事务提交之后才可以读取数据,但会出现不可重复读的情况(多次读取的数据不一致),读取过程中出现UPDATE操作,会多。(大多数数据库默认级别是RC,比如SQL Server,Oracle),读取的时候不可以修改。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 可重复读: 同一个事务里确保每次读取的时候,获得的是同样的数据,但不保障原始数据被其他事务更新(幻读),Mysql InnoDB 就是这个级别。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 序列化:所有事物串行处理(牺牲了效率)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《理解事务的4种隔离级别》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 数据库事务的四大特性及事务隔离级别0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《MySQL的InnoDB的幻读问题 》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 幻读的例子非常清楚。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 通过 SELECT … FOR UPDATE 解决。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《一篇文章带你读懂MySQL和InnoDB》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 图解脏读、不可重复读、幻读问题。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    MVCC

    • 《【mysql】关于innodb中MVCC的一些理解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • innodb 中 MVCC 用在 Repeatable-Read 隔离级别。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • MVCC 会产生幻读问题(更新时异常。)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《轻松理解MYSQL MVCC 实现机制》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 通过隐藏版本列来实现 MVCC 控制,一列记录创建时间、一列记录删除时间,这里的时间0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 每次只操作比当前版本小(或等于)的 行。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Java中的锁和同步类

    • 《Java中的锁分类》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 主要包括 synchronized、ReentrantLock、和 ReadWriteLock。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Java并发之AQS详解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Java中信号量 Semaphore》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 有数量控制0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 申请用 acquire,申请不要则阻塞;释放用 release。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《java开发中的Mutex vs Semaphore》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 简单的说 就是Mutex是排它的,只有一个可以获取到资源, Semaphore也具有排它性,但可以定义多个可以获取的资源的对象。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    公平锁 & 非公平锁

    公平锁的作用就是严格按照线程启动的顺序来执行的,不允许其他线程插队执行的;而非公平锁是允许插队的。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《公平锁与非公平锁》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 默认情况下 ReentrantLock 和 synchronized 都是非公平锁。ReentrantLock 可以设置成公平锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    悲观锁

    悲观锁如果使用不当(锁的条数过多),会引起服务大面积等待。推荐优先使用乐观锁+重试。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    乐观锁 & CAS

    • 《乐观锁的一种实现方式——CAS》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 和MySQL乐观锁方式相似,只不过是通过和原值进行比较。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    ABA 问题

    由于高并发,在CAS下,更新后可能此A非彼A。通过版本号可以解决,类似于上文Mysql 中提到的的乐观锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    CopyOnWrite容器

    可以对CopyOnWrite容器进行并发的读,而不需要加锁。CopyOnWrite并发容器用于读多写少的并发场景。比如白名单,黑名单,商品类目的访问和更新场景,不适合需要数据强一致性的场景。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    RingBuffer

    可重入锁 & 不可重入锁

    • 《可重入锁和不可重入锁》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 通过简单代码举例说明可重入锁和不可重入锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 可重入锁指同一个线程可以再次获得之前已经获得的锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 可重入锁可以用户避免死锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Java中的可重入锁:synchronized 和 java.util.concurrent.locks.ReentrantLock0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《ReenTrantLock可重入锁(和synchronized的区别)总结》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • synchronized 使用方便,编译器来加锁,是非公平锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • ReenTrantLock 使用灵活,锁的公平性可以定制。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 相同加锁场景下,推荐使用 synchronized。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    互斥锁 & 共享锁

    互斥锁:同时只能有一个线程获得锁。比如,ReentrantLock 是互斥锁,ReadWriteLock 中的写锁是互斥锁。
    共享锁:可以有多个线程同时或的锁。比如,Semaphore、CountDownLatch 是共享锁,ReadWriteLock 中的读锁是共享锁。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    死锁

    操作系统

    计算机原理

    CPU

    多级缓存

    典型的 CPU 有三级缓存,距离核心越近,速度越快,空间越小。L1 一般 32k,L2 一般 256k,L3 一般12M。内存速度需要200个 CPU 周期,CPU 缓存需要1个CPU周期。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    进程

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    线程

    协程

    • 《终结python协程----从yield到actor模型的实现》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 线程的调度是由操作系统负责,协程调度是程序自行负责0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 与线程相比,协程减少了无谓的操作系统切换.0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 实际上当遇到IO操作时做切换才更有意义,(因为IO操作不用占用CPU),如果没遇到IO操作,按照时间片切换.0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Linux

    设计模式

    设计模式的六大原则

    • 《设计模式的六大原则》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 开闭原则:对扩展开放,对修改关闭,多使用抽象类和接口。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 里氏替换原则:基类可以被子类替换,使用抽象类继承,不使用具体类继承。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 依赖倒转原则:要依赖于抽象,不要依赖于具体,针对接口编程,不针对实现编程。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 接口隔离原则:使用多个隔离的接口,比使用单个接口好,建立最小的接口。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 迪米特法则:一个软件实体应当尽可能少地与其他实体发生相互作用,通过中间类建立联系。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 合成复用原则:尽量使用合成/聚合,而不是使用继承。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    23种常见设计模式

    应用场景

    • 《细数JDK里的设计模式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 责任链模式:通过把请求从一个对象传递到链条中下一个对象的方式,直到请求被处理完毕,以实现对象间的解耦。如 javax.servlet.Filter#doFilter()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 命令模式:将操作封装到对象内,以便存储,传递和返回,如:java.lang.Runnable。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 解释器模式:定义了一个语言的语法,然后解析相应语法的语句,如,java.text.Format,java.text.Normalizer。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 迭代器模式:提供一个一致的方法来顺序访问集合中的对象,如 java.util.Iterator。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 中介者模式:通过使用一个中间对象来进行消息分发以及减少类之间的直接依赖,java.lang.reflect.Method#invoke()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 空对象模式:如 java.util.Collections#emptyList()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 观察者模式:它使得一个对象可以灵活的将消息发送给感兴趣的对象,如 java.util.EventListener。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 模板方法模式:让子类可以重写方法的一部分,而不是整个重写,如 java.util.Collections#sort()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 抽象工厂模式:抽象工厂模式提供了一个协议来生成一系列的相关或者独立的对象,而不用指定具体对象的类型,如 java.util.Calendar#getInstance()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 建造模式(Builder):定义了一个新的类来构建另一个类的实例,以简化复杂对象的创建,如:java.lang.StringBuilder#append()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 工厂方法:就是 一个返* 回具体对象的方法,而不是多个,如 java.lang.Object#toString()、java.lang.Class#newInstance()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 原型模式:使得类的实例能够生成自身的拷贝、如:java.lang.Object#clone()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 单例模式:全局只有一个实例,如 java.lang.Runtime#getRuntime()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 适配器:用来把一个接口转化成另一个接口,如 java.util.Arrays#asList()。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 桥接模式:这个模式将抽象和抽象操作的实现进行了解耦,这样使得抽象和实现可以独立地变化,如JDBC;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 组合模式:使得客户端看来单个对象和对象的组合是同等的。换句话说,某个类型的方法同时也接受自身类型作为参数,如 Map.putAll,List.addAll、Set.addAll。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 装饰者模式:动态的给一个对象附加额外的功能,这也是子类的一种替代方式,如 java.util.Collections#checkedList|Map|Set|SortedSet|SortedMap。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 享元模式:使用缓存来加速大量小对象的访问时间,如 valueOf(int)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 代理模式:代理模式是用一个简单的对象来代替一个复杂的或者创建耗时的对象,如 java.lang.reflect.Proxy0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 结构型模式:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 创建模式:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 行为模式:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Spring-涉及到的设计模式汇总》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Mybatis使用的设计模式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    单例模式

    责任链模式

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    MVC

    • 《MVC 模式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 模型(model)-视图(view)-控制器(controller)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    IOC

    • 《理解 IOC》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《IOC 的理解与解释》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 正向控制:传统通过new的方式。反向控制,通过容器注入对象。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 作用:用于模块解耦。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • DI:Dependency Injection,即依赖注入,只关心资源使用,不关心资源来源。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    AOP

    • 《轻松理解AOP(面向切面编程)》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Spring AOP详解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Spring AOP的实现原理》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Spring AOP使用的动态代理,主要有两种方式:JDK动态代理和CGLIB动态代理。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Spring AOP 实现原理与 CGLIB 应用》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Spring AOP 框架对 AOP 代理类的处理原则是:如果目标对象的实现类实现了接口,Spring AOP 将会采用 JDK 动态代理来生成 AOP 代理类;如果目标对象的实现类没有实现接口,Spring AOP 将会采用 CGLIB 来生成 AOP 代理类0a5编程技术_踩坑日志_进阶指南 - 无知人生

    UML

    微服务思想

    康威定律

    • 《微服务架构的理论基础 - 康威定律》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 定律一:组织沟通方式会通过系统设计表达出来,就是说架构的布局和组织结构会有相似。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 定律二:时间再多一件事情也不可能做的完美,但总有时间做完一件事情。一口气吃不成胖子,先搞定能搞定的。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 定律三:线型系统和线型组织架构间有潜在的异质同态特性。种瓜得瓜,做独立自治的子系统减少沟通成本。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 定律四:大的系统组织总是比小系统更倾向于分解。合久必分,分而治之。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《微服务架构核⼼20讲》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    运维 & 统计 & 技术支持

    常规监控

    • 《腾讯业务系统监控的修炼之路》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 监控的方式:主动、被动、旁路(比如舆情监控)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 监控类型: 基础监控、服务端监控、客户端监控、
        监控、用户端监控0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 监控的目标:全、块、准0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 核心指标:请求量、成功率、耗时0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《开源还是商用?十大云运维监控工具横评》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Zabbix、Nagios、Ganglia、Zenoss、Open-falcon、监控宝、 360网站服务监控、阿里云监控、百度云观测、小蜜蜂网站监测等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《监控报警系统搭建及二次开发经验》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    命令行监控工具0a5编程技术_踩坑日志_进阶指南 - 无知人生

    APM

    APM —  Application Performance Management0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Dapper,大规模分布式系统的跟踪系统》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • CNCF OpenTracing中文版0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 主要开源软件,按字母排序0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Apache SkyWalking0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CAT0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CNCF jaeger0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Pinpoint0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Zipkin0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《开源APM技术选型与实战》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 主要基于 Google的Dapper(大规模分布式系统的跟踪系统) 思想。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    统计分析

    • 《流量统计的基础:埋点》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 常用指标:访问与访客、停留时长、跳出率、退出率、转化率、参与度0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《APP埋点常用的统计工具、埋点目标和埋点内容》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第三方统计:友盟、百度移动、魔方、App Annie、talking data、神策数据等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《美团点评前端无痕埋点实践》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 所谓无痕、即通过可视化工具配置采集节点,在前端自动解析配置并上报埋点数据,而非硬编码。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    持续集成(CI/CD)

    Jenkins

    环境分离

    开发、测试、生成环境分离。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    自动化运维

    Ansible

    puppet

    chef

    测试

    TDD 理论

    • 《深度解读 - TDD(测试驱动开发)》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基于测试用例编码功能代码,XP(Extreme Programming)的核心实践.0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 好处:一次关注一个点,降低思维负担;迎接需求变化或改善代码的设计;提前澄清需求;快速反馈;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    单元测试

    • 《Java单元测试之JUnit篇》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《JUnit 4 与 TestNG 对比》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • TestNG 覆盖 JUnit 功能,适用于更复杂的场景。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《单元测试主要的测试功能点》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 模块接口测试、局部数据结构测试、路径测试 、错误处理测试、边界条件测试 。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    压力测试

    全链路压测

    A/B 、灰度、蓝绿测试

    虚拟化

    KVM

    Xen

    OpenVZ

    容器技术

    Docker

    云技术

    OpenStack

    DevOps

    文档管理

    • Confluence-收费文档管理系统0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • GitLab?0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Wiki0a5编程技术_踩坑日志_进阶指南 - 无知人生

    中间件

    Web Server

    Nginx

    • 《Ngnix的基本学习-多进程和Apache的比较》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Nginx 通过异步非阻塞的事件处理机制实现高并发。Apache 每个请求独占一个线程,非常消耗系统资源。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 事件驱动适合于IO密集型服务(Nginx),多进程或线程适合于CPU密集型服务(Apache),所以Nginx适合做反向代理,而非web服务器使用。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《nginx与Apache的对比以及优缺点》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • nginx只适合静态和反向代理,不适合处理动态请求。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    OpenResty

    • 官方网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《浅谈 OpenResty》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 通过 Lua 模块可以在Nginx上进行开发。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • agentzh 的 Nginx 教程0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Tengine

    • 官方网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Apache Httpd

    • 官方网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Tomcat

    架构原理

    调优方案

    • 《Tomcat 调优方案》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 启动NIO模式(或者APR);调整线程池;禁用AJP连接器(Nginx+tomcat的架构,不需要AJP);0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《tomcat http协议与ajp协议》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《AJP与HTTP比较和分析》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • AJP 协议(8009端口)用于降低和前端Server(如Apache,而且需要支持AJP协议)的连接数(前端),通过长连接提高性能。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 并发高时,AJP协议优于HTTP协议。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Jetty

    • 《Jetty 的工作原理以及与 Tomcat 的比较》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《jetty和tomcat优势比较》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 架构比较:Jetty的架构比Tomcat的更为简单。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 性能比较:Jetty和Tomcat性能方面差异不大,Jetty默认采用NIO结束在处理I/O请求上更占优势,Tomcat默认采用BIO处理I/O请求,Tomcat适合处理少数非常繁忙的链接,处理静态资源时性能较差。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 其他方面:Jetty的应用更加快速,修改简单,对新的Servlet规范的支持较好;Tomcat 对JEE和Servlet 支持更加全面。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    缓存

    本地缓存

    • 《HashMap本地缓存》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《EhCache本地缓存》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 堆内、堆外、磁盘三级缓存。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 可按照缓存空间容量进行设置。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 按照时间、次数等过期策略。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Guava Cache》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 简单轻量、无堆外、磁盘缓存。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Nginx本地缓存》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Pagespeed—懒人工具,服务器端加速》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    客户端缓存

    服务端缓存

    Web缓存

    • nuster - nuster cache0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • varnish - varnish cache0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • squid - squid cache0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Memcached

    Redis

    • 《Redis 教程》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《redis底层原理》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 使用 ziplist 存储链表,ziplist是一种压缩链表,它的好处是更能节省内存空间,因为它所存储的内容都是在连续的内存区域当中的。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 使用 skiplist(跳跃表)来存储有序集合对象、查找上先从高Level查起、时间复杂度和红黑树相当,实现容易,无锁、并发性好。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Redis持久化方式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • RDB方式:定期备份快照,常用于灾难恢复。优点:通过fork出的进程进行备份,不影响主进程、RDB 在恢复大数据集时的速度比 AOF 的恢复速度要快。缺点:会丢数据。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • AOF方式:保存操作日志方式。优点:恢复时数据丢失少,缺点:文件大,回复慢。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 也可以两者结合使用。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《分布式缓存–序列3–原子操作与CAS乐观锁》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    架构

    回收策略

    Tair

    • 官方网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Tair和Redis的对比》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 特点:可以配置备份节点数目,通过异步同步到备份节点0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 一致性Hash算法。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 架构:和Hadoop 的设计思想类似,有Configserver,DataServer,Configserver 通过心跳来检测,Configserver也有主备关系。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    几种存储引擎:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • MDB,完全内存性,可以用来存储Session等数据。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Rdb(类似于Redis),轻量化,去除了aof之类的操作,支持Restfull操作0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • LDB(LevelDB存储引擎),持久化存储,LDB 作为rdb的持久化,google实现,比较高效,理论基础是LSM(Log-Structured-Merge Tree)算法,现在内存中修改数据,达到一定量时(和内存汇总的旧数据一同写入磁盘)再写入磁盘,存储更加高效,县比喻Hash算法。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Tair采用共享内存来存储数据,如果服务挂掉(非服务器),重启服务之后,数据亦然还在。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    消息队列

    • 《消息队列-推/拉模式学习 & ActiveMQ及JMS学习》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • RabbitMQ 消费者默认是推模式(也支持拉模式)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Kafka 默认是拉模式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Push方式:优点是可以尽可能快地将消息发送给消费者,缺点是如果消费者处理能力跟不上,消费者的缓冲区可能会溢出。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Pull方式:优点是消费端可以按处理能力进行拉去,缺点是会增加消息延迟。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Kafka、RabbitMQ、RocketMQ等消息中间件的对比 —— 消息发送性能和区别》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    消息总线

    消息总线相当于在消息队列之上做了一层封装,统一入口,统一管控、简化接入成本。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    消息的顺序

    RabbitMQ

    支持事务,推拉模式都是支持、适合需要可靠性消息传输的场景。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    RocketMQ

    Java实现,推拉模式都是支持,吞吐量逊于Kafka。可以保证消息顺序。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    ActiveMQ

    纯Java实现,兼容JMS,可以内嵌于Java应用中。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Kafka

    高吞吐量、采用拉模式。适合高IO场景,比如日志同步。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Redis 消息推送

    生产者、消费者模式完全是客户端行为,list 和 拉模式实现,阻塞等待采用 blpop 指令。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    ZeroMQ

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    定时调度

    单机定时调度

    分布式定时调度

    RPC

    Dubbo

    ** SPI **
    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Thrift

    • 官方网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Thrift RPC详解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 支持多语言,通过中间语言定义接口。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    gRPC

    服务端可以认证加密,在外网环境下,可以保证数据安全。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    数据库中间件

    Sharding Jdbc

    • 官网0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 源码解析0a5编程技术_踩坑日志_进阶指南 - 无知人生

    日志系统

    日志搜集

    配置中心

    servlet 3.0 异步特性可用于配置中心的客户端0a5编程技术_踩坑日志_进阶指南 - 无知人生

    API 网关

    主要职责:请求转发、安全认证、协议转换、容灾。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    网络

    协议

    OSI 七层协议

    TCP/IP

    HTTP

    HTTP2.0

    HTTPS

    • 《https原理通俗了解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 使用非对称加密协商加密算法0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 使用对称加密方式传输数据0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 使用第三方机构签发的证书,来加密公钥,用于公钥的安全传输、防止被中间人串改。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《八大免费SSL证书-给你的网站免费添加Https安全加密》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    网络模型

    • 《web优化必须了解的原理之I/o的五种模型和web的三种工作模式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 五种I/O模型:阻塞I/O,非阻塞I/O,I/O复用、事件(信号)驱动I/O、异步I/O,前四种I/O属于同步操作,I/O的第一阶段不同、第二阶段相同,最后的一种则属于异步操作。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 三种 Web Server 工作方式:Prefork(多进程)、Worker方式(线程方式)、Event方式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《select、poll、epoll之间的区别总结》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • select,poll,epoll本质上都是同步I/O,因为他们都需要在读写事件就绪后自己负责进行读写,也就是说这个读写过程是阻塞的。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • select 有打开文件描述符数量限制,默认1024(2048 for x64),100万并发,就要用1000个进程、切换开销大;poll采用链表结构,没有数量限制。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • select,poll “醒着”的时候要遍历整个fd集合,而epoll在“醒着”的时候只要判断一下就绪链表是否为空就行了,通过回调机制节省大量CPU时间;select,poll每次调用都要把fd集合从用户态往内核态拷贝一次,而epoll只要一次拷贝。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • poll会随着并发增加,性能逐渐下降,epoll采用红黑树结构,性能稳定,不会随着连接数增加而降低。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《select,poll,epoll比较  》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 在连接数少并且连接都十分活跃的情况下,select和poll的性能可能比epoll好,毕竟epoll的通知机制需要很多函数回调。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《深入理解Java NIO》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • NIO 是一种同步非阻塞的 IO 模型。同步是指线程不断轮询 IO 事件是否就绪,非阻塞是指线程在等待 IO 的时候,可以同时做其他任务0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《BIO与NIO、AIO的区别》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《两种高效的服务器设计模型:Reactor和Proactor模型》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Epoll

    Java NIO

    kqueue

    连接和短连接

    框架

    • 《Netty原理剖析》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Reactor 模式介绍。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Netty 是 Reactor 模式的一种实现。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    零拷贝(Zero-copy)

    序列化(二进制协议)

    Hessian

    Protobuf

    • 《Protobuf协议的Java应用例子》
      Goolge出品、占用空间和效率完胜其他序列化类库,如Hessian;需要编写  .proto 文件。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Protocol Buffers序列化协议及应用》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 关于协议的解释;缺点:可读性差;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《简单的使用 protobuf 和 protostuff》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • protostuff 的好处是不用写 .proto 文件,Java 对象直接就可以序列化。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    数据库

    基础理论

    数据库设计的三大范式

    • 《数据库的三大范式以及五大约束》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第一范式:数据表中的每一列(每个字段)必须是不可拆分的最小单元,也就是确保每一列的原子性;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第二范式(2NF):满足1NF后,要求表中的所有列,都必须依赖于主键,而不能有任何一列与主键没有关系,也就是说一个表只描述一件事情;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第三范式:必须先满足第二范式(2NF),要求:表中的每一列只与主键直接相关而不是间接相关,(表中的每一列只能依赖于主键);0a5编程技术_踩坑日志_进阶指南 - 无知人生

    MySQL

    原理

    InnoDB

    优化

    索引

    聚集索引, 非聚集索引

    MyISAM 是非聚集,InnoDB 是聚集0a5编程技术_踩坑日志_进阶指南 - 无知人生

    复合索引

    • 《复合索引的优点和注意事项》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      对于复合索引,在查询使用时,最好将条件顺序按找索引的顺序,这样效率最高; select * from table1 where col1=A AND col2=B AND col3=D 如果使用 where col2=B AND col1=A 或者 where col2=B 将不会使用索引0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 原文中提到索引是按照“col1,col2,col3”的顺序创建的,而mysql在按照最左前缀的索引匹配原则,且会自动优化 where 条件的顺序,当条件中只有 col2=B AND col1=A 时,会自动转化为 col1=A AND col2=B,所以依然会使用索引。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 文中有一处错误:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《MySQL查询where条件的顺序对查询效率的影响》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    自适应哈希索引(AHI)

    explain

    NoSQL

    MongoDB

    • MongoDB 教程0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Mongodb相对于关系型数据库的优缺点》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 优点:弱一致性(最终一致),更能保证用户的访问速度;内置GridFS,支持大容量的存储;Schema-less 数据库,不用预先定义结构;内置Sharding;相比于其他NoSQL,第三方支持丰富;性能优越;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 缺点:mongodb不支持事务操作;mongodb占用空间过大;MongoDB没有如MySQL那样成熟的维护工具,这对于开发和IT运营都是个值得注意的地方;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Hbase

    搜索引擎

    搜索引擎原理

    Lucene

    Elasticsearch

    Solr

    sphinx

    性能

    性能优化方法论

    容量评估

    CDN 网络

    连接池

    性能调优

    大数据

    流式计算

    Storm

    Flink

    Kafka Stream

    应用场景

    例如:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 广告相关实时统计;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 推荐系统用户画像标签实时更新;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 线上服务健康状况实时监测;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 实时榜单;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 实时数据统计。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Hadoop

    HDFS

    MapReduce

    Yarn

    Spark

    安全

    web 安全

    XSS

    CSRF

    SQL 注入

    Hash Dos

    脚本注入

    漏洞扫描工具

    • 《DVWA》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • W3af0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • OpenVAS详解0a5编程技术_踩坑日志_进阶指南 - 无知人生

    验证码

    DDoS 防范

    用户隐私信息保护

    1. 用户密码非明文保存,加动态salt。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    2. 身份证号,手机号如果要显示,用 “*” 替代部分字符。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    3. 联系方式在的显示与否由用户自己控制。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    4. TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    序列化漏洞

    加密解密

    对称加密

    • 《常见对称加密算法》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • DES、3DES、Blowfish、AES0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • DES 采用 56位秘钥,Blowfish 采用1到448位变长秘钥,AES 128,192和256位长度的秘钥。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • DES 秘钥太短(只有56位)算法目前已经被 AES 取代,并且 AES 有硬件加速,性能很好。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    哈希算法

    非对称加密

    • 《常见非对称加密算法》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • RSA、DSA、ECDSA(螺旋曲线加密算法)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 和 RSA 不同的是 DSA 仅能用于数字签名,不能进行数据加密解密,其安全性和RSA相当,但其性能要比RSA快。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 256位的ECC秘钥的安全性等同于3072位的RSA秘钥。0a5编程技术_踩坑日志_进阶指南 - 无知人生

        《区块链的加密技术》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    服务器安全

    数据安全

    数据备份

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    网络隔离

    内外网分离

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    登录跳板机

    在内外环境中通过跳板机登录到线上主机。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    授权、认证

    RBAC

    OAuth2.0

    双因素认证(2FA)

    2FA - Two-factor authentication,用于加强登录验证0a5编程技术_踩坑日志_进阶指南 - 无知人生

    常用做法是 登录密码 + 手机验证码(或者令牌Key,类似于与网银的 USB key)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    单点登录(SSO)

    常用开源框架

    开源协议

    日志框架

    Log4j、Log4j2

    Logback

    ORM

    • 《ORM框架使用优缺点》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 主要目的是为了提高开发效率。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    MyBatis:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《mybatis缓存机制详解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 一级缓存是SqlSession级别的缓存,缓存的数据只在SqlSession内有效0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 二级缓存是mapper级别的缓存,同一个namespace公用这一个缓存,所以对SqlSession是共享的;使用 LRU 机制清理缓存,通过 cacheEnabled 参数开启。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《MyBatis学习之代码生成器Generator》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    网络框架

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Web 框架

    Spring 家族

    Spring0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Spring Boot0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Spring Cloud0a5编程技术_踩坑日志_进阶指南 - 无知人生

    工具框架

    分布式设计

    扩展性设计

    稳定性 & 高可用

    • 《系统设计:关于高可用系统的一些技术方案》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 可扩展:水平扩展、垂直扩展。 通过冗余部署,避免单点故障。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 隔离:避免单一业务占用全部资源。避免业务之间的相互影响 2. 机房隔离避免单点故障。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 解耦:降低维护成本,降低耦合风险。减少依赖,减少相互间的影响。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 限流:滑动窗口计数法、漏桶算法、令牌桶算法等算法。遇到突发流量时,保证系统稳定。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 降级:紧急情况下释放非核心功能的资源。牺牲非核心业务,保证核心业务的高可用。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 熔断:异常情况超出阈值进入熔断状态,快速失败。减少不稳定的外部依赖对核心服务的影响。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 自动化测试:通过完善的测试,减少发布引起的故障。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 灰度发布:灰度发布是速度与安全性作为妥协,能够有效减少发布故障。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《关于高可用的系统》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 设计原则:数据不丢(持久化);服务高可用(服务副本);绝对的100%高可用很难,目标是做到尽可能多的9,如99.999%(全年累计只有5分钟)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    硬件负载均衡

    软件负载均衡

    限流

    • 《谈谈高并发系统的限流》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 计数器:通过滑动窗口计数器,控制单位时间内的请求次数,简单粗暴。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 漏桶算法:固定容量的漏桶,漏桶满了就丢弃请求,比较常用。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 令牌桶算法:固定容量的令牌桶,按照一定速率添加令牌,处理请求前需要拿到令牌,拿不到令牌则丢弃请求,或进入丢队列,可以通过控制添加令牌的速率,来控制整体速度。Guava 中的 RateLimiter 是令牌桶的实现。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Nginx 限流:通过 limit_req 等模块限制并发连接数。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    应用层容灾

    • 《防雪崩利器:熔断器 Hystrix 的原理与使用》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 资源隔离:Hystrix通过将每个依赖服务分配独立的线程池进行资源隔离, 从而避免服务雪崩。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 熔断开关:服务的健康状况 = 请求失败数 / 请求总数,通过阈值设定和滑动窗口控制开关。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 命令模式:通过继承 HystrixCommand 来包装服务调用逻辑。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 雪崩效应原因:硬件故障、硬件故障、程序Bug、重试加大流量、用户大量请求。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 雪崩的对策:限流、改进缓存模式(缓存预加载、同步调用改异步)、自动扩容、降级。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Hystrix设计原则:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《缓存穿透,缓存击穿,缓存雪崩解决方案分析》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《缓存击穿、失效以及热点key问题》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 主要策略:失效瞬间:单机使用锁;使用分布式锁;不过期;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 热点数据:热点数据单独存储;使用本地缓存;分成多个子key;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    跨机房容灾

    • 《“异地多活”多机房部署经验谈》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 通过自研中间件进行数据同步。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《异地多活(异地双活)实践经验》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 注意延迟问题,多次跨机房调用会将延时放大数倍。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 建房间专线很大概率会出现问题,做好运维和程序层面的容错。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 不能依赖于程序端数据双写,要有自动同步方案。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 数据永不在高延迟和较差网络质量下,考虑同步质量问题。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 核心业务和次要业务分而治之,甚至只考虑核心业务。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 异地多活监控部署、测试也要跟上。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 业务允许的情况下考虑用户分区,尤其是游戏、邮箱业务。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 控制跨机房消息体大小,越小越好。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 考虑使用docker容器虚拟化技术,提高动态调度能力。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 容灾技术及建设经验介绍0a5编程技术_踩坑日志_进阶指南 - 无知人生

    容灾演练流程

    平滑启动

    • 平滑重启应用思路
      1.端流量(如vip层)、2. flush 数据(如果有)、3, 重启应用0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《JVM安全退出(如何优雅的关闭java服务)》
      推荐推出方式:System.exit,Kill SIGTERM;不推荐 kill-9;用 Runtime.addShutdownHook 注册钩子。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《常见Java应用如何优雅关闭》
      Java、Spring、Dubbo 优雅关闭方式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    数据库扩展

    读写分离模式

    分片模式

    • 《分库分表需要考虑的问题及方案》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 中间件: 轻量级:sharding-jdbc、TSharding;重量级:Atlas、MyCAT、Vitess等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 问题:事务、Join、迁移、扩容、ID、分页等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 事务补偿:对数据进行对帐检查;基于日志进行比对;定期同标准数据来源进行同步等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 分库策略:数值范围;取模;日期等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 分库数量:通常 MySQL 单库 5千万条、Oracle 单库一亿条需要分库。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《MySql分表和表分区详解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 分区:是MySQL内部机制,对客户端透明,数据存储在不同文件中,表面上看是同一个表。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 分表:物理上创建不同的表、客户端需要管理分表路由。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    服务治理

    服务注册与发现

    • 《永不失联!如何实现微服务架构中的服务发现?》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 客户端服务发现模式:客户端直接查询注册表,同时自己负责负载均衡。Eureka 采用这种方式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 服务器端服务发现模式:客户端通过负载均衡查询服务实例。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《SpringCloud服务注册中心比较:Consul vs Zookeeper vs Etcd vs Eureka》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CAP支持:Consul(CA)、zookeeper(cp)、etcd(cp) 、euerka(ap)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 作者认为目前 Consul 对 Spring cloud 的支持比较好。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《基于Zookeeper的服务注册与发现》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 优点:API简单、Pinterest,Airbnb 在用、多语言、通过watcher机制来实现配置PUSH,能快速响应配置变化。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    服务路由控制

    • 《分布式服务框架学习笔记4 服务路由》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 原则:透明化路由0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 负载均衡策略:随机、轮询、服务调用延迟、一致性哈希、粘滞连接0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 本地路由有限策略:injvm(优先调用jvm内部的服务),innative(优先使用相同物理机的服务),原则上找距离最近的服务。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 配置方式:统一注册表;本地配置;动态下发。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    分布式一致

    CAP 与 BASE 理论

    • 《从分布式一致性谈到CAP理论、BASE理论》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 一致性分类:强一致(立即一致);弱一致(可在单位时间内实现一致,比如秒级);最终一致(弱一致的一种,一定时间内最终一致)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CAP:一致性、可用性、分区容错性(网络故障引起)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • BASE:Basically Available(基本可用)、Soft state(软状态)和Eventually consistent(最终一致性)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • BASE理论的核心思想是:即使无法做到强一致性,但每个应用都可以根据自身业务特点,采用适当的方式来使系统达到最终一致性。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    分布式锁

    • 《分布式锁的几种实现方式》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基于数据库的分布式锁:优点:操作简单、容易理解。缺点:存在单点问题、数据库性能够开销较大、不可重入;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基于缓存的分布式锁:优点:非阻塞、性能好。缺点:操作不好容易造成锁无法释放的情况。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Zookeeper 分布式锁:通过有序临时节点实现锁机制,自己对应的节点需要最小,则被认为是获得了锁。优点:集群可以透明解决单点问题,避免锁不被释放问题,同时锁可以重入。缺点:性能不如缓存方式,吞吐量会随着zk集群规模变大而下降。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《基于Zookeeper的分布式锁》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 清楚的原理描述 + Java 代码示例。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《jedisLock—redis分布式锁实现》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基于 setnx(set if ont exists),有则返回false,否则返回true。并支持过期时间。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《Memcached 和 Redis 分布式锁方案》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 利用 memcached 的 add(有别于set)操作,当key存在时,返回false。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    分布式一致性算法

    PAXOS

    Zab

    Raft

    • 《Raft 为什么是更易理解的分布式一致性算法》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 三种角色:Leader(领袖)、Follower(群众)、Candidate(候选人)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 通过随机等待的方式发出投票,得票多的获胜。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Gossip

    两阶段提交、多阶段提交

    幂等

    • 《分布式系统—幂等性设计》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 幂等特性的作用:该资源具备幂等性,请求方无需担心重复调用会产生错误。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 常见保证幂等的手段:MVCC(类似于乐观锁)、去重表(唯一索引)、悲观锁、一次性token、序列号方式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    分布式一致方案

    分布式 Leader 节点选举

    TCC(Try/Confirm/Cancel) 柔性事务

    • 《传统事务与柔性事务》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基于BASE理论:基本可用、柔性状态、最终一致。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 解决方案:记录日志+补偿(正向补充或者回滚)、消息重试(要求程序要幂等);“无锁设计”、采用乐观锁机制。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    分布式文件系统

    • 说说分布式文件存储系统-基本架构0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《各种分布式文件系统的比较》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HDFS:大批量数据读写,用于高吞吐量的场景,不适合小文件。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • FastDFS:轻量级、适合小文件。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    唯一ID 生成

    全局唯一ID

    • 《高并发分布式系统中生成全局唯一Id汇总》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Twitter 方案(Snowflake 算法):41位时间戳+10位机器标识(比如IP,服务器名称等)+12位序列号(本地计数器)0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Flicker 方案:MySQL自增ID + “REPLACE INTO XXX:SELECT LAST_INSERT_ID();”0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • UUID:缺点,无序,字符串过长,占用空间,影响检索性能。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • MongoDB 方案:利用 ObjectId。缺点:不能自增。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《TDDL 在分布式下的SEQUENCE原理》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 在数据库中创建 sequence 表,用于记录,当前已被占用的id最大值。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 每台客户端主机取一个id区间(比如 1000~2000)缓存在本地,并更新 sequence 表中的id最大值记录。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 客户端主机之间取不同的id区间,用完再取,使用乐观锁机制控制并发。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    一致性Hash算法

    设计思想 & 开发模式

    DDD(Domain-driven Design - 领域驱动设计)

    • 《浅谈我对DDD领域驱动设计的理解》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 概念:DDD 主要对传统软件开发流程(分析-设计-编码)中各阶段的割裂问题而提出,避免由于一开始分析不明或在软件开发过程中的信息流转不一致而造成软件无法交付(和需求方设想不一致)的问题。DDD 强调一切以领域(Domain)为中心,强调领域专家(Domain Expert)的作用,强调先定义好领域模型之后在进行开发,并且领域模型可以指导开发(所谓的驱动)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 过程:理解领域、拆分领域、细化领域,模型的准确性取决于模型的理解深度。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 设计:DDD 中提出了建模工具,比如聚合、实体、值对象、工厂、仓储、领域服务、领域事件来帮助领域建模。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《领域驱动设计的基础知识总结》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 关联尽量少,尽量单项,尽量降低整体复杂度。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 实体(Entity):领域中的唯一标示,一个实体的属性尽量少,少则清晰。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 值对象(Value Object):没有唯一标识,且属性值不可变,小二简单的对象,比如Date。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 领域服务(Domain Service): 协调多个领域对象,只有方法没有状态(不存数据);可以分为应用层服务,领域层服务、基础层服务。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 聚合及聚合根(Aggregate,Aggregate Root):聚合定义了一组具有内聚关系的相关对象的集合;聚合根是对聚合引用的唯一元素;当修改一个聚合时,必须在事务级别;大部分领域模型中,有70%的聚合通常只有一个实体,30%只有2~3个实体;如果一个聚合只有一个实体,那么这个实体就是聚合根;如果有多个实体,那么我们可以思考聚合内哪个对象有独立存在的意义并且可以和外部直接进行交互;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 工厂(Factory):类似于设计模式中的工厂模式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 仓储(Repository):持久化到DB,管理对象,且只对聚合设计仓储。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 领域(Doamin)本质上就是问题域,比如一个电商系统,一个论坛系统等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 界限上下文(Bounded Context):阐述子域之间的关系,可以简单理解成一个子系统或组件模块。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 领域模型(Domain Model):DDD的核心是建立(用通用描述语言、工具—领域通用语言)正确的领域模型;反应业务需求的本质,包括实体和过程;其贯穿软件分析、设计、开发 的整个过程;常用表达领域模型的方式:图、代码或文字;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 领域通用语言:领域专家、开发设计人员都能立即的语言或工具。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 经典分层架构:用户界面/展示层、应用层、领域层、基础设施层,是四层架构模式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 使用的模式:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《领域驱动设计(DDD)实现之路》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 聚合:比如一辆汽车(Car)包含了引擎(Engine)、车轮(Wheel)和油箱(Tank)等组件,缺一不可。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《领域驱动设计系列(2)浅析VO、DTO、DO、PO的概念、区别和用处》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    命令查询职责分离(CQRS)

    CQRS — Command Query Responsibility Seperation0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《领域驱动设计系列 (六):CQRS》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 核心思想:读写分离(查询和更新在不同的方法中),不同的流程只是不同的设计方式,CQ代码分离,分布式环境中会有明显体现(有冗余数据的情况下),目的是为了高性能。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《DDD CQRS架构和传统架构的优缺点比较》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 最终一致的设计理念;依赖于高可用消息中间件。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《CQRS架构简介》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 一个实现 CQRS 的抽象案例。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《深度长文:我对CQRS/EventSourcing架构的思考》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • CQRS 模式分析 + 12306 抢票案例0a5编程技术_踩坑日志_进阶指南 - 无知人生

    贫血,充血模型

    • 《贫血,充血模型的解释以及一些经验》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 失血模型:老子和儿子分别定义,相互不知道,二者实体定义中完全没有业务逻辑,通过外部Service进行关联。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 贫血模型:老子知道儿子,儿子也知道老子;部分业务逻辑放到实体中;优点:各层单项依赖,结构清楚,易于维护;缺点:不符合OO思想,相比于充血模式,Service层较为厚重;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 充血模型:和贫血模型类似,区别在于如何划分业务逻辑。优点:Service层比较薄,只充当Facade的角色,不和DAO打交道、复合OO思想;缺点:非单项依赖,DO和DAO之间双向依赖、和Service层的逻辑划分容易造成混乱。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 肿胀模式:是一种极端情况,取消Service层、全部业务逻辑放在DO中;优点:符合OO思想、简化了分层;缺点:暴露信息过多、很多非DO逻辑也会强行并入DO。这种模式应该避免。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 作者主张使用贫血模式。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Actor 模式

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    响应式编程

    Reactor

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    RxJava

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Vert.x

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    DODAF2.0

    Serverless

    无需过多关系服务器的服务架构理念。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《什么是Serverless无服务器架构?》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Serverless 不代表出去服务器,而是去除对服务器运行状态的关心。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Serverless 代表一思维方式的转变,从“构建一套服务在一台服务器上,对对个事件进行响应转变为构建一个为服务器,来响应一个事件”。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Serverless 不代表某个具体的框架。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《如何理解Serverless?》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 依赖于 Baas ((Mobile) Backend as a Service) 和 Faas (Functions as a service)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    Service Mesh

    项目管理

    架构评审

    重构

    代码规范

    代码 Review

    制度还是制度!
    另外,每个公司需要根据自己的需求和目标制定自己的 check list0a5编程技术_踩坑日志_进阶指南 - 无知人生

    RUP

    看板管理

    SCRUM

    SCRUM - 争球0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 3个角色:Product Owner(PO) 产品负责人;Scrum Master(SM),推动Scrum执行;Team 开发团队。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 3个工件:Product Backlog 产品TODOLIST,含优先级;Sprint Backlog 功能开发 TODO LIST;燃尽图;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 五个价值观:专注、勇气、公开、承诺、尊重。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《敏捷项目管理流程-Scrum框架最全总结!》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《敏捷其实很简单3—敏捷方法之scrum》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    敏捷开发

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    极限编程(XP)

    XP - eXtreme Programming0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《主流敏捷开发方法:极限编程XP》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 沟通:鼓励口头沟通,提高效率。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 简单:够用就好。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 反馈:及时反馈、通知相关人。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 勇气:提倡拥抱变化,敢于重构。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 是一种指导开发人员的方法论。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 4大价值:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 5个原则:快速反馈、简单性假设、逐步修改、提倡更改(小步快跑)、优质工作(保证质量的前提下保证小步快跑)。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 5个工作:阶段性冲刺;冲刺计划会议;每日站立会议;冲刺后review;回顾会议。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    结对编程

    边写码,边review。能够增强代码质量、减少bug。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    PDCA 循环质量管理

    P——PLAN 策划,D——DO 实施,C——CHECK 检查,A——ACT 改进0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《PDCA》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    FMEA管理模式

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    通用业务术语

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    技术趋势

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    政策、法规

    法律

    严格遵守刑法253法条

    我国刑法第253条之一规定:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 国家机关或者金融、电信、交通、教育、医疗等单位的工作人员,违反国家规定,将本单位在履行职责或者提供服务过程中获得的公民个人信息,出售或者非法提供给他人,情节严重的,处3年以下有期徒刑或者拘役,并处或者单处罚金。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 窃取或者以其他方法非法获取上述信息,情节严重的,依照前款的规定处罚。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 单位犯前两款罪的,对单位判处罚金,并对其直接负责的主管人员和其他直接责任人员,依照各该款的规定处罚。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    最高人民法院、最高人民检察院关于执行《中华人民共和国刑法》确定罪名的补充规定(四)规定:触犯刑法第253条之一第1款之规定,构成“出售、非法提供公民个人信息罪”;触犯刑法第253条之一第2款之规定,构成“非法获取公民个人信息罪”0a5编程技术_踩坑日志_进阶指南 - 无知人生

    架构师素质

    • 《架构师画像》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 业务理解和抽象能力0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • NB的代码能力0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 全面:1. 在面对业务问题上,架构师脑海里是否会浮现出多种技术方案;2. 在做系统设计时是否考虑到了足够多的方方面面;3. 在做系统设计时是否考虑到了足够多的方方面面;0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 全局:是否考虑到了对上下游的系统的影响。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 权衡:权衡投入产出比;优先级和节奏控制;0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《关于架构优化和设计,架构师必须知道的事情》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 要去考虑的细节:模块化、轻耦合、无共享架构;减少各个组件之前的依赖、注意服务之间依赖所有造成的链式失败及影响等。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 基础设施、配置、测试、开发、运维综合考虑。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 考虑人、团队、和组织的影响。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《如何才能真正的提高自己,成为一名出色的架构师?》0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《架构师的必备素质和成长途径》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 素质:业务理解、技术广度、技术深度、丰富经验、沟通能力、动手能力、美学素养。0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 成长路径:2年积累知识、4年积累技能和组内影响力、7年积累部门内影响力、7年以上积累跨部门影响力。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《架构设计师—你在哪层楼?》0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第一层的架构师看到的只是产品本身0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第二层的架构师不仅看到自己的产品,还看到了整体的方案0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 第三层的架构师看到的是商业价值0a5编程技术_踩坑日志_进阶指南 - 无知人生

    团队管理

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    招聘

    资讯

    行业资讯

    • 36kr0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Techweb0a5编程技术_踩坑日志_进阶指南 - 无知人生

    公众号列表

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    博客

    团队博客

    个人博客

    综合门户、社区

    国内:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • CSDN
      老牌技术社区、不必解释。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 51cto.com0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • ITeye0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 偏 Java 方向0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 博客园0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • ChinaUnix0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 偏 Linux 方向0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 开源中国社区0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 深度开源0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 伯乐在线0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 涵盖 IT职场、Web前端、后端、移动端、数据库等方面内容,偏技术端。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • ITPUB0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 腾讯云— 云+社区0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 阿里云— 云栖社区0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • IBM DeveloperWorks0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 开发者头条0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • LinkedKeeper0a5编程技术_踩坑日志_进阶指南 - 无知人生

    国外:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • DZone0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Reddit0a5编程技术_踩坑日志_进阶指南 - 无知人生

    问答、讨论类社区

    • segmentfault0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 问答+专栏0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 知乎0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • stackoverflow0a5编程技术_踩坑日志_进阶指南 - 无知人生

    行业数据分析

    • 艾瑞网0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • QUEST MOBILE0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 国家数据0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • TalkingData0a5编程技术_踩坑日志_进阶指南 - 无知人生

    专项网站

    • 测试:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 领测国际0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 测试窝0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • TesterHome0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 运维:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 运维派0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Abcdocker0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Java:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 英文博客0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 专注于 Java 技术分享0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • ImportNew0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HowToDoInJava0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 安全0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 红黑联盟0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • FreeBuf0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 大数据0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 其他专题网站:0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Linux 主题社区0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 专注于 Docker 应用及咨询、教程的网站0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 偏重于基础架构、运维方向0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • InfoQ0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • DockerInfo0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Linux公社0a5编程技术_踩坑日志_进阶指南 - 无知人生

    其他类

    推荐参考书

    在线电子书

    纸质书

    开发方面

    • 《阿里巴巴Java开发手册》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    架构方面

    • 《软件架构师的12项修炼:技术技能篇》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《架构之美》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《分布式服务架构》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《聊聊架构》 详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《云原生应用架构实践》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《亿级流量网站架构核心技术》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《淘宝技术这十年》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《企业IT架构转型之道-中台战略思想与架构实战》 详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《高可用架构(第1卷)》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    技术管理方面

    • 《CTO说》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《技术管理之巅》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《网易一千零一夜:互联网产品项目管理实战》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    基础理论

    • 《数学之美》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 《编程珠玑》详情0a5编程技术_踩坑日志_进阶指南 - 无知人生

    工具方面

    TODO0a5编程技术_踩坑日志_进阶指南 - 无知人生

    大数据方面

    技术资源

    开源资源

    • github0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Apache 软件基金会0a5编程技术_踩坑日志_进阶指南 - 无知人生

    手册、文档、教程

    国内:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • W3Cschool0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Runoob.com0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • HTML 、 CSS、XML、Java、Python、PHP、设计模式等入门手册。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Love2.io0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 很多很多中文在线电子书,是一个全新的开源技术文档分享平台。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • gitbook.cn0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 付费电子书。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • ApacheCN0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • AI、大数据方面系列中文文档。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    国外:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Quick Code0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 免费在线技术教程。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • gitbook.com0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 有部分中文电子书。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Cheatography0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • Cheat Sheets 大全,单页文档网站。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Tutorialspoint0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 知名教程网站,提供Java、Python、JS、SQL、大数据等高质量入门教程。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    在线课堂

    • 学徒无忧0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 极客时间0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • segmentfault0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 斯达克学院0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 牛客网0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 极客学院0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 51CTO学院0a5编程技术_踩坑日志_进阶指南 - 无知人生

    会议、活动

    活动发布平台:0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 活动行0a5编程技术_踩坑日志_进阶指南 - 无知人生

    常用APP

    • 极客时间0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 得到0a5编程技术_踩坑日志_进阶指南 - 无知人生

    找工作

    • Boss直聘0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 拉勾网0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 猎聘0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 100Offer0a5编程技术_踩坑日志_进阶指南 - 无知人生

    工具

    • 极客搜索0a5编程技术_踩坑日志_进阶指南 - 无知人生

      • 技术文章搜索引擎。0a5编程技术_踩坑日志_进阶指南 - 无知人生

    代码托管

    • Coding0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 码云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    文件服务

    • 七牛0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 又拍云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    综合云服务商

    • 阿里云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 腾讯云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 百度云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 新浪云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 金山云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 亚马逊云(AWS)0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 谷歌云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • 微软云0a5编程技术_踩坑日志_进阶指南 - 无知人生

    VPS

    • Linode0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • DigitalOcean0a5编程技术_踩坑日志_进阶指南 - 无知人生

    • Vultr0a5编程技术_踩坑日志_进阶指南 - 无知人生

    很赞哦! () 有话说 ()

    上一篇:返回列表

    下一篇:返回列表

    相关文章

    站点信息

    • 建站时间:2018-10-24
    • 服务期限阿里云ECS 2027年到期
    • 主题模板:基于《今夕何夕》修改
    • 文章统计:210篇
    • 文章评论:15条
    • 文章阅读:2818次
    • 文章点赞:1026次
    • 微信公众号:扫描二维码,关注我们
    • 二维码-微信公众号-微wx笑