开发技巧

请允许在我们的网站上展示广告

您似乎使用了广告拦截器，请关闭广告拦截器。我们的网站依靠广告获取资金。

文章发布订阅~

通过邮箱订阅文章更新，您将在文章发布时收到及时的邮件提醒~

邮箱

昵称

橙序员

累计撰写 212 篇文章
累计创建 69 个标签
累计收到 4 条评论

标签搜索

目录CONTENT

以下是开发技巧相关的文章

2023-08-09
NIO如何解决阻塞问题？ NIO通过使用Selector和多路复用器的概念，有效地解决了BIO中线程开销过大的问题。在BIO中，每个客户端连接对应一个线程，导致服务端需要开启大量线程处理连接请求，造成巨大的资源消耗。而NIO中，引入了Selector来负责检查所有连接的就绪状态，通过轮询注册在其上的通道，获取就绪状态的通道进行处理。这样一来，一个Selector可以轮询多个通道，大大减少了线程的数量，提高了资源利用率。同时，NIO中使用了缓冲区来存储请求数据，可以在任务完成后发送通知，避免了连接超时的问题。总之，NIO通过Selector和缓冲区的方式，有效地解决了BIO中的线程开销问题，提高了系统的并发性能。
- 2023-08-09
- 587
- 0
- 0
- 开发技巧
2023-08-09
BIO阻塞在了哪里？客户端与服务端之间的交互流程如下：
1. 创建服务端socket，绑定系统端口并监听此端口的客户端连接。
2. 创建客户端连接，指定ip和端口地址。
3. 客户端发起连接请求，服务端接收并受理连接。
4. 连接建立成功，客户端与服务端开始数据交互。
5. 服务端处理客户端请求的流程如下：
- 通过走读源码可以了解到交互的具体流程。
- 关键类的定位：ServerSocket、Socket、SocketImpl等。
- SocketImpl是所有socket实现类（如PlainSocketImpl）的父类，提供了socket相关的方法定义。
- PlainSocketImpl是默认的socket实现类，实现了具体的服务端和客户端操作逻辑。
- DualStackPlainSocketImpl是PlainSocketImpl的拓展类，实现了具体的服务端和客户端操作的相关系统交互。

BIO的C/S架构中，每个客户端连接对应一个线程，服务端与客户端并发访问数呈1：1的关系。这种架构缺乏弹性伸缩能力，当并发访问量过大时，系统可能会产生线程堆栈溢出、创建新线程失败的问题，导致宕机或僵死，无法对外提供服务。
- 2023-08-09
- 605
- 0
- 0
- 开发技巧
2023-07-30
zookeeper是如何工作的? Zookeeper维护持久节点和临时节点组成的空间，通过监听节点数据实现节点及其子节点的数据一致性。Zookeeper的数据存储结构与Unix文件系统相似，使用znode作为最小的数据单元，并可以保存数据和挂载子节点。节点类型包括持久节点、持久顺序节点、临时节点和临时顺序节点，它们具有不同的生命周期。会话是Zookeeper中重要的概念，客户端与服务端之间的交互操作都与会话相关。常见的会话状态有连接中、已连接和已关闭。
- 2023-07-30
- 612
- 0
- 0
- 开发技巧
2023-07-29
Zookeeper如何保证一致性？ CAP定理指出，在一个分布式系统中，一致性、可用性和分区容错性这三个特性无法同时满足。分布式系统的一致性表示多个主机之间的数据是否保持一致；可用性表示系统能够在有限时间内对用户请求做出响应；分区容错性表示系统在网络分区故障时依然能够保证一致性和可用性。CAP原则指出，分布式系统只能满足一致性和可用性中的两项，即CP或者AP。BASE理论是CAP定理的权衡结果，它通过允许系统在出现故障时损失部分可用性，以及允许数据存在中间状态来实现最终一致性。Zookeeper遵循CP原则，实现了一致性但牺牲了可用性。Zookeeper内部使用的一致性协议是ZAB协议，它是对PAXOS算法的一种实现，用于达成分布式系统中的决议一致。PAXOS算法通过分配唯一编号和记录已接受提案来保证一致性。
- 2023-07-29
- 716
- 0
- 0
- 开发技巧
2023-07-25
为什么不建议写大SQL？这篇文章主要讨论了在老项目技术优化过程中，数据层常见的几个难题：阅读难、拆表难等。作者提出，应该避免过多的关联查询，而是赋予各个领域对象查询能力。同时，需要注意聚合函数的使用，应该将统计能力赋予给领域对象而非数据库。文章还介绍了两种方案来解决大数据量的统计问题：一是建立统计表进行定时落地，二是利用nosql技术进行实时统计。最后，作者指出在面对大数据时，即使对分组条件加索引也难以实现满意的优化效果，建议使用统计表和nosql技术来优化数据处理性能。文章强调了保持面向对象的编程思维对于应对数据层技术优化的重要性。
- 2023-07-25
- 620
- 0
- 0
- 开发技巧
2023-07-23
中间件是如何进行集群管理的？常用中间件集群管理方式有两种：一种是通过注册中心，如redissentinelrocket MQname serverkafkazookeeperdubbozookeeperspring boot（微服务）eureka，consul，Nacos；另一种是通过分布式节点，如ES节点主、数据、协调节点，节点增加重新路由数据分片，通过ping进行故障检测并选举新节点，Redis主从节点通过路由表分配数据实现主从切换；数据库Mysql主从复制、redis主从复制以及Sentinel+Replication等方式保证集群高可用；redis集群通过互联和二进制协议优化传输，节点下线需超过半数节点检测失效；消息中间件rocketMQ支持多master模式、多master多slave异步复制模式和多master多slave同步复制模式；Kafka通过ISR管理副本和HW机制完成数据同步，zookeeper管理broker和partition节点。
- 2023-07-23
- 668
- 0
- 0
- 开发技巧
2023-07-22
Kafka内部构成解析 Kafka通过Zookeeper存储集群的元数据信息，Zookeeper负责维护和协调broker，以及Broker Controller的选举。每个broker在启动时会在ZooKeeper中创建一个节点来注册自己，并监听节点的变化。Controller负责管理分区和主题元数据信息的同步和更新，以及故障转移。Topic在Kafka中用于划分消息的类别，而Partition用于物理存储消息。副本分为领导者副本和追随者副本，追随者副本不对外提供服务，只负责与领导者副本的消息同步。Kafka将Partition进一步细分为多个segment，每个segment包含消息存储文件和索引文件。日志清理策略有delete和compact两种，offset用于定位下一条要读取的消息。整个系统的保证集群每一台broker都缓存最新的元数据信息，保证数据一致性和高可用性。
- 2023-07-22
- 529
- 0
- 0
- 开发技巧
2023-07-16
深入理解RocketMQ RocketMQ是一种消息中间件，与ActiveMQ、RabbitMQ和Kafka相比，它使用Java、Erlang、JavaScript和Scala等开发语言，具有万级到十万级的单机吞吐量。RocketMQ的一大优势是可以支持大量的Topic，即使在同等数量的机器下也能支持大量的Topic。然而，当Topic数量从几十个增加到几百个时，吞吐量会显著下降。Kafka是另一种消息中间件，具有高毫秒级的时效性、高可用性和可靠性，适用于大规模Topic和复杂业务场景。它是分布式的，可以保证消息不会丢失。RocketMQ和Kafka都有各自的优势和劣势，例如RocketMQ功能较为完备，而Kafka在分布式扩展性和可靠性方面表现较好。总体而言，RocketMQ和Kafka都在大数据领域有广泛应用，具有不同的特点和适用场景。
- 2023-07-16
- 589
- 0
- 0
- 开发技巧
2023-07-02
ES存储原理和集群介绍全文检索是指对非结构化数据进行搜索的方法，包括顺序扫描和反向索引两种方式。全文检索的过程包括索引创建和搜索索引两个步骤。在实际应用中，Elasticsearch（ES）和Solr是常用的两种全文检索工具，它们在安装、功能和性能等方面有所区别。ES集群是一个P2P类型的分布式系统，包含多个节点，其中master节点负责管理集群变更，data节点负责存储数据，而协调节点负责查询负载均衡。ES可以将索引划分为多份，并创建副本分片以提高高可用性。集群状态是指集群中的各种状态和元数据信息，包括索引的mappings、settings配置等。元数据对于集群的稳定运行非常重要。
- 2023-07-02
- 588
- 0
- 0
- 开发技巧
2023-06-25
Mysql集群的使用场景本文总结了主从复制的基本原理，包括主库的binlog和从库的relaylog，以及三种日志模式(statement level、row level和mixed)的优缺点。同时还介绍了主从延迟的原因和解决方法，以及读写分离的场景和中间件特征。此外还介绍了分库分表的概念，包括垂直和水平切分的优缺点，以及不同的数据分片和路由类型。总体来说，文章详细介绍了数据库复制、延迟、读写分离和分库分表等方面的内容，对于数据库管理和优化有一定的参考意义。
- 2023-06-25
- 759
- 0
- 0
- 开发技巧
2023-06-23
SQL语句如何优化通过使用慢查询日志功能，可以获取执行时间较长的SQL语句并查看执行计划，然后通过show profile来查看SQL的性能使用情况，进而进行优化。开启慢查询日志需要在配置文件中添加相关参数，并使用mysqldumpslow工具分析慢查询日志。同时，通过explain查看SQL执行计划进行优化，包括合理创建索引、避免全表扫描、优化order by、group by语句以及避免使用count( * )等。此外，在关联表时建立索引、避免使用not in语句等也是优化的关键。通过以上方法，可以提高SQL查询的性能，减少查询时间，提升数据库性能。
- 2023-06-23
- 619
- 0
- 0
- 开发技巧
2023-06-23
Mysql锁机制详解：全局、表级和行级 Mysql中的锁可以按照粒度和功能进行区分，包括全局锁、表级锁和行级锁，以及共享锁和排他锁。全局锁用于数据库备份，表级锁和行级锁用于数据操作。innodb引擎支持事务，可以通过不同的参数来实现备份和锁定数据。行级锁包括记录锁、间隙锁和临键锁，用于保证数据的一致性和避免幻读。不同事务的加锁规则和避免死锁的方法也需要注意。通过优化索引、避免不必要的行扫描和快速提交事务等方式可以提高运行速度和减少死锁的发生。详细内容可参考官方文档。
- 2023-06-23
- 609
- 0
- 0
- 开发技巧
2023-06-19
索引之争：B+树vs.组合索引vs.覆盖索引，你选择哪个？索引在数据库中起到了提高数据检索效率和降低IO成本的作用。不同的数据结构实现索引有各自的优缺点，如Hash表适用于等值查询但不支持范围查询，而B+树在等值查询和范围查询方面效果均较好。在MySQL中，不同引擎的索引实现也有所区别，如InnoDB引擎使用B+树构建聚簇索引，而MyISAM引擎的主键索引和辅助索引结构相同。为了避免回表查询，可以创建覆盖索引，提高命中率。建立索引的原则包括频繁出现在where条件、order by、group by语句中的字段以及需要频繁查询的列等。需要注意的是，索引的建立要考虑字段的区分度和长度，避免过多的索引导致更新和插入变慢。综上所述，合理使用不同数据结构和引擎的索引实现，并按照建立索引的原则进行优化，可以有效提升数据库的查询效率。
- 2023-06-19
- 601
- 0
- 0
- 开发技巧
2023-06-18
InnoDB内存结构与事务管理 InnoDB是一种常用的数据库引擎，其内存结构包括缓冲池、额外内存池、双写和重做日志。通过配置参数可以设置缓冲池的大小，其中存储了数据页、索引页、undo页等信息以提升数据库性能。另外，插入缓冲、自适应哈希索引等功能也有助于提高插入和查询性能。重做日志缓冲则确保数据写入磁盘时的持久性。检查点机制用于管理缓冲池和重做日志的大小，避免数据丢失。在事务管理方面，InnoDB采用MVCC实现数据一致性，通过undo log和read view来实现多版本并发控制。不同隔离级别下的事务访问不同方式的数据版本，以确保数据的完整性和可靠性。通过对数据的变更记录加上版本记录，可以避免锁的性能影响和死锁问题。总之，InnoDB引擎通过优秀的内存管理和事务控制机制，提供高性能和数据一致性的支持。
- 2023-06-18
- 766
- 0
- 0
- 开发技巧
2023-06-04
深入解析MySQL架构：核心要点揭秘本文介绍了MySQL存储目录的文件结构，包括日志、表空间、数据文件、重做日志和缓冲池。其中，日志文件记录了数据库的操作信息和错误信息；表空间包含系统表空间和用户表空间；重做日志文件用于恢复数据的正确状态；缓冲池用于提高数据库整体性能。此外，还介绍了MySQL的逻辑结构，包括Server层和存储引擎层，以及连接器的作用。在连接数据库时，建议定期断开长连接以释放内存，并合理设置查询缓存以提高性能。
- 2023-06-04
- 590
- 0
- 0
- 开发技巧
2023-05-20
Redis高级使用场景：消息队列、发布订阅和事务管理本文介绍了REDIS在消息模式和队列模式中的应用场景，使用list类型的lpush和rpop实现消息队列时可能存在的问题和解决方法。同时还介绍了REDIS中使用brpop命令、SortedSet发布订阅、Redis Stream等新数据类型的应用。此外，文章还涵盖了Redis事务、命令输入、多个客户端等方面的内容。最后还介绍了REDIS的可编程性，可以使用Lua脚本和Redis函数拓展功能。文章通过详细介绍各种命令和场景，为读者提供了丰富的REDIS应用知识和操作方法。REDIS在消息模式和队列模式中具有广泛的应用，可以满足不同业务场景的需求。
- 2023-05-20
- 641
- 0
- 0
- 开发技巧
2023-05-14
Redis持久化与集群演变 REDIS持久化有三种方式：RDB持久化、AOF持久化和混合持久化。RDB持久化是Redis 5.0之前默认的持久化方式，通过配置快照规则来触发持久化操作。其优点是可以最大化Redis性能，但缺点是一旦Redis异常退出会丢失最后一次快照以后更改的数据。AOF持久化是通过将每条更改数据的命令写入AOF文件来实现，可以通过配置规则来决定写入时机，但会降低Redis性能。AOF重写是对AOF文件进行压缩，去除重复操作，减小文件体积。如何选择RDB和AOF取决于业务需求，如果数据不能丢失则需要使用RDB+AOF方式持久化，如果只是缓存服务器则只需要配置RDB混合持久化。Redis 5.0之后默认采用混合持久化方式。
- 2023-05-14
- 581
- 0
- 0
- 开发技巧
2023-05-13
REDIS内存模型和使用优化 Redis内存模型使用hash表来管理存放在Redis中的键值对。数据的扩容和缩容是通过多次渐进式的rehash过程完成的。具体步骤如下：首先为ht[1]分配空间，字典同时持有ht[0]和ht[1]两个哈希表，然后通过维持一个索引计数器变量rehashidx来表示rehash工作开始。在rehash进行期间，每次对字典执行操作时，程序会将ht[0]哈希表在rehashidx索引上的所有键值对rehash到ht[1]，完成后将rehashidx的值增一。随着字典操作的执行，最终ht[0]的所有键值对都会被rehash至ht[1]，此时将rehashidx设为-1，表示rehash操作完成。整个Redis的存储模型包括dictEntry结构存放数据、redisObject对象维护键值对的值和指向具有不同数据结构的数据对象的数据指针。常用的数据类型和编码方式包括整型字符串、小于等于44字节的简单动态字符、大于44字节的简单动态字符串、压缩列表实现的列表对象等。
- 2023-05-13
- 793
- 0
- 0
- 开发技巧
2023-05-06
Spring boot如何简化项目搭建本文介绍了Spring Boot如何通过对容器的定制化升级来简化项目搭建。在Spring Boot应用中，容器启动时会根据应用类型创建不同的应用容器，如Java应用、Web应用和云原生应用。判断应用类型的逻辑在SpringApplication的构建函数中实现。Spring Boot实现了'All in one'的简便，让我们无需重复搭建项目。
- 2023-05-06
- 1066
- 1
- 2
- 开发技巧
2023-05-05
设计模式怎么记？本文介绍了创建型、结构型和行为型设计模式在对象构建、功能迭代和业务场景设计中的应用。其中，创建型设计模式包括建造者模式、工厂模式、单例模式和享元模式；结构型设计模式包括装饰器模式、桥接模式、适配器模式、代理模式和组合模式；行为型设计模式包括责任链模式、命令模式、备忘录模式、观察者模式、解释器模式、迭代器模式、中介者模式、访问者模式、策略模式、状态模式和模板模式。每种设计模式都有相应的使用口诀和实际场景应用。总体来说，本文为读者提供了对设计模式在软件开发中的全面了解和应用指导。
- 2023-05-05
- 509
- 0
- 0
- 开发技巧
2023-05-05
MVC如何简化请求处理？本文介绍了在使用servlet开发web项目时web.xml文件的配置以及如何简化配置内容。传统方式下每个servlet需在web.xml中配置，导致文件内容过多。为此，引入了MVC框架的核心组件DispatcherServlet，通过该组件完成所有请求的映射处理。文章列举了spring mvc的配置示例，并详细介绍了DispatcherServlet的操作流程，包括初始化监听器和过滤器、注册请求映射、调用处理方法、渲染视图并返回结果给客户端。最后，文章解析了DispatcherServlet的继承关系和功能，包括HttpServletBean、FrameworkServlet和DispatcherServlet。DispatcherServlet的工作可以分为环境初始化、请求映射注册和请求调用处理三个阶段。
- 2023-05-05
- 640
- 0
- 2
- 开发技巧
2023-04-28
AOP如何进行功能增强该文介绍了动态代理的实现方式，包括使用JDK动态代理和Cglib动态代理的示例代码以及实践。在使用JDK动态代理时，代理的目标是接口，而在使用Cglib动态代理时，代理的目标是对象。此外，还介绍了代理模式的实践，AOP的概念和实现原理。Spring AOP通过动态代理扩展代理对象的功能，通过代理链方式叠加增强器完成对代理对象的拓展。在Spring IOC获取Bean时，通过实现BeanPostProcessor返回对应的代理对象。文章还详细介绍了代理对象的创建流程，包括初始化前置处理和初始化后置处理，通过获取切面和增强器创建代理对象。最后，总结了代理对象创建的两个步骤和增强器获取主要流程，包括获取所有切面、过滤出可用增强器、排序切面等步骤。
- 2023-04-28
- 649
- 0
- 0
- 开发技巧
2023-04-22
bean工厂的功能拓展 Spring 中的应用容器 ApplicationContext 在管理 Bean 的过程中提供了更多的功能和灵活性，与传统的 Bean 工厂相比，它实现了资源加载器、环境变量、国际化消息、事件发布器、生命周期等功能接口。通过创建应用容器，我们可以实现环境变量验证、SPEL 属性编辑器、容器级后置处理器、国际化消息、事件发布和监听、生命周期监控等功能。应用容器启动时会调用 refresh 方法，依次进行容器初始化、环境变量验证、Bean 工厂初始化、自定义容器操作等流程。在关闭时，需要发布关闭事件、销毁单例、关闭 Bean 工厂等操作。通过监听容器事件可以实现对容器状态的监听，也可以创建自定义容器并重写相应方法。通过应用容器的功能，我们可以实现更多定制化的操作和管理方式。
- 2023-04-22
- 610
- 0
- 2
- 开发技巧
2023-04-16
bean获取&bean工厂职责梳理本文介绍了如何通过内部类实现流程测试用例，以及Spring配置文件中如何定义嵌套的bean。在调试过程中，发现属性为内部bean时会执行特定处理逻辑，再次调用getBean()方法处理内部bean的依赖对象。内部bean处理代码示例中演示了如何解析BeanDefinitionHolder和BeanDefinition，并获取内部bean的bean定义。通过注册内部bean和保证其依赖对象的初始化，实现了内部bean的处理过程。整体流程清晰，对内部类的处理方式进行了详细讲解，有助于深入理解内部类在Spring框架中的应用。
- 2023-04-16
- 570
- 0
- 0
- 开发技巧
2023-04-16
spring如何解决循环依赖在日常开发中，我们经常会遇到A、B类之间互相依赖的情况。如果需要手动创建这样的对象，就需要按照一定的顺序实例化和赋值，否则会导致循环依赖和内存溢出。为了解决这个问题，可以利用Spring容器的特性，通过配置文件将相互依赖的A、B对象交由Spring容器创建。在Spring中，当创建bean时会将其放入缓存，以便在其他对象创建时获取。通过对bean的初始化过程进行改造，可以实现循环依赖的解决方案。Spring的实现思路与手动创建对象的过程类似，主要是在创建bean时进行缓存处理。通过对bean的单例性和循环依赖进行判断，可以有效解决循环依赖导致的内存溢出问题。
- 2023-04-16
- 528
- 0
- 2
- 开发技巧

1
2
3
4
5