数据去重（data deduplication）是大数据领域司空见惯的问题了。除了统计UV等传统用法之外，去重的意义更在于消除不可靠数据源产生的脏数据——即重复上报数据或重复投递数据的影响，使计算产生……继续阅读 » 阿凡卢 4年前 (2021-03-31) 1463浏览 0评论1984个赞
简介 《Asp.Net Core3 + Vue3入坑教程》 此教程适合新手入门或者前后端分离尝试者。可以根据图文一步一步进操作编码也可以选择直接查看源码。每一篇文章都有对应的源码 本文将 .Net C……继续阅读 » Iannnnnnnnnnnnn 4年前 (2021-03-31) 1668浏览 0评论2492个赞
品牌专区是园子去年推出的新楼盘，为优秀的科技企业在园子里提供一个地方，展示自己的品牌，分享自己的技术内容。最近我们和国外领先的 NoSQL 数据库厂商 Aerospike 达成了合作，入驻了园子的品牌……继续阅读 » 博客园团队 4年前 (2021-03-31) 1456浏览 0评论462个赞
在上一篇文章中,针对服务器单点、单例、单机存在的问题: 单点故障 容量有限 可支持的连接有限(性能不足) 提出了解决的办法:根据AKF原则搭建集群,大意是先X轴拆分,创建单机的镜像,组成主主、主备、主……继续阅读 » 等不到的口琴 4年前 (2021-03-31) 1166浏览 0评论2489个赞
前言 在一个大数据量的系统中，这些数据的存储、处理、搜索是一个非常棘手的问题。 比如存储问题：单台服务器的存储能力及数据处理能力都是有限的, 因此需要增加服务器, 搭建集群来存储海量数据。 读写性能问……继续阅读 » 有梦想的老王 4年前 (2021-03-31) 2455浏览 0评论1668个赞
淘宝的某位大佬曾经做过测试，在一台24G内存的机器上，Nginx的最大并发连接数达到了200万。同学们听到这个结论后，是不是被Nginx的超高性能深深折服了，它内部的架构设计究竟是怎么样的呢？……继续阅读 » 开心洋葱 4年前 (2021-03-31) 1261浏览 0评论1394个赞
写在前面 又到了年底跳槽高峰季，很多小伙伴出去面试时，不少面试官都会问到消息队列的问题，不少小伙伴回答的不是很完美，有些小伙伴是心里知道答案，嘴上却没有很好的表达出来，究其根本原因，还是对相关的知识点……继续阅读 » 冰河团队 4年前 (2021-03-31) 2504浏览 0评论2729个赞
限流器相关算法 一般限流器有五种算法，分别是：令牌桶，漏斗桶，固定窗口，滑动日志（指的其实是广义上的滑动窗口），滑动窗口（这里指的是滑动日志+固定窗口结合的一种算法）。 1. 令牌桶（Token bu……继续阅读 » 干货满满张哈希 4年前 (2021-03-31) 2086浏览 0评论2801个赞
继承上一次讨论了Azure Redis的可用性，可靠性，稳定性，安全性，监控方面的九大功能点。详情可回顾文章：【Azure Redis 缓存】Azure Redis功能性讨论 这次我们继续讨论Azur……继续阅读 » 路边两盏灯 4年前 (2021-03-31) 2260浏览 0评论1314个赞
问题描述 通过Azure的Resource Graph Explorer（https://portal.azure.cn/#blade/HubsExtension/ArgQueryBlade），可以查……继续阅读 » 路边两盏灯 4年前 (2021-03-31) 1280浏览 0评论2011个赞
前言 Redis 当中提供了许多重要的高级特性，比如发布与订阅，Lua 脚本等。Redis 当中也提供了自增的原子命令，但是假如我们需要同时执行好几个命令的同时又想让这些命令保持原子性，该怎么办呢？这……继续阅读 » 双子孤狼 4年前 (2021-03-31) 2925浏览 0评论2326个赞
前言 公司有一个发券的接口有并发安全问题，下面列出这个问题和解决这个问题的方式。 业务描述 这个接口的作用是给会员发多张券码。涉及到4张主体，分别是：用户，券，券码，用户领取记录。 下面是改造前的伪代……继续阅读 » gistmap 4年前 (2021-03-31) 2303浏览 0评论732个赞
随着技术的不断拓展更新，我们所使用的技术也在不断地升级优化，项目的框架也在不断地升级，本次讲解 .net core 2.1 升级到3.1所需要注意的事项； 当项目框架升级后，所有的Nuget引用也会对……继续阅读 » MaNongWorld 4年前 (2021-03-31) 1282浏览 0评论841个赞
一、创建Redis服务 运行环境是Window，安装Redis请看：安装教程。 直接开始创建Redis服务，演示就创建两个一主一从，先把安装路径下的 redis.windows.conf 文件复制一份……继续阅读 » 以往清泉 4年前 (2021-03-31) 1984浏览 0评论1362个赞
【大话设计模式】– 策略者模式(Strategy):它定义了算法家族,分别封装起来，让他们之间可以互相替换，此模式让算法的变法，不会影响到使用算法的客户。 策略模式的核心就是屏蔽内部策略算法，内部的……继续阅读 » 小菜鸡Lee 4年前 (2021-03-31) 1689浏览 0评论588个赞
起因： 近期项目中，提供了一些调用频率较高的api接口，需要保障服务器的稳定运行；需要对提供的接口进行限流控制。避免因客户端频繁的请求导致服务器的压力。 一、AspNetCoreRateLimit 介……继续阅读 » chaney1992 4年前 (2021-03-31) 2056浏览 0评论1490个赞
在云环境中实现成功的现代数据分析平台 译自：Architecting a Successful Modern Data Analytics Platform in the Cloud 前面讨论了如何在……继续阅读 » charlieroro 4年前 (2021-03-31) 2907浏览 0评论1541个赞
为了保证服务的可用性，现代数据库都提供了复制功能，同时在多个进程中维护一致的数据状态。 Redis 支持一主多从的复制架构，该功能被简化成了一条 SLAVEOF 命令，下面通过条命令来解析 Redis……继续阅读 » buttercup 4年前 (2021-03-31) 2806浏览 0评论2977个赞
一、限流的关键作用 对于大型互联网架构中，限流的设计是必不可少的一个环节。在给定的时间内, 客户端请求次数过多, 服务器就会拦截掉部分请求，避免请求流量过大造成数据库负载高的问题。 二、常见限流算法利……继续阅读 » HarvardFly 4年前 (2021-03-31) 1345浏览 0评论1403个赞
赵化冰，腾讯云高级工程师，Istio Member，ServiceMesher管理委员，Istio 项目贡献者， Aerika 项目创建者 ，热衷于开源、网络和云计算。目前主要从事服务网格的开源和研发……继续阅读 » 腾讯云原生 4年前 (2021-03-31) 1554浏览 0评论1701个赞
Net Core 缓存系列： 1、NetCore IMemoryCache 内存缓存 2、Distributed Cache（分布式缓存）-SqlServer 3、Dis……继续阅读 » 云霄宇霁 4年前 (2021-03-31) 1513浏览 0评论1166个赞
问你一句：「你知道 HTTP/1.1 该如何优化吗？」 我想你第一时间想到的是，使用 KeepAlive 将 HTTP/1.1 从短连接改成长链接。 这个确实是一个优化的手段，它是从底层的传输层这一方……继续阅读 » 小林coding 4年前 (2021-03-31) 2303浏览 0评论885个赞
随着项目架构的不断扩大，单台 MySQL 已经不能满足需要了，所以需要搭建集群将前来的请求进行分流处理。博客主要根据丁奇老师的专栏学习的总……继续阅读 » 开心洋葱 4年前 (2021-03-31) 1757浏览 0评论290个赞
简介 Redis 从 2.6 版本开始引入使用 Lua 编程语言进行的服务器端脚本编程功能，这个功能可以让用户直接在 Redis 内部执行各种操作，从而达到简化代码并提高性能的作用。 P248 在不编……继续阅读 » 满赋诸机 4年前 (2021-03-31) 1256浏览 0评论2619个赞
作为内存数据库，Redis 依然提供了持久化机制，其主要目的有两个： 安全：保证进程崩溃后数据不会丢失 备份：方便数据迁移与快速恢复 Redis 同时提供两种持久化机制： RDB 快照：数据库在某个时……继续阅读 » buttercup 4年前 (2021-03-31) 1231浏览 0评论2130个赞
分布式事务以及分布式锁是分布式中难点,分布式事务一篇文章可能写不完,我的习惯时从基本概念出发,一步一步开始介绍,前面会先梳理事务中一些基本概念,对基本概念十分清楚的话可以直接看”一致性讨论&……继续阅读 » 等不到的口琴 4年前 (2021-03-31) 2249浏览 0评论1323个赞
♥Redis教程 – Redis知识体系详解♥ 本系列主要对Redis知识体系进行详解。@pdai ♥Redis教程 – Redis知识体系详解♥ 知识体系 学习资料 知识体系 知识体系 相关文章 首……继续阅读 » pdai 4年前 (2021-03-31) 2552浏览 0评论591个赞
任务队列 P133 通过将待执行任务的相关信息放入队列里面，并在之后对队列进行处理，可以推迟执行那些耗时对操作，这种将工作交给任务处理器来执行对做法被称为任务队列 (task queue) 。 P13……继续阅读 » 满赋诸机 4年前 (2021-03-31) 2852浏览 0评论1127个赞
今天总结一下负载均衡中LVS与Nginx的区别,好几篇博文一开始就说LVS是单向的,Nginx是双向的,我个人认为这是不准确的,LVS三种模式中,虽然DR模式以及TUN模式只有请求的报文经过Direc……继续阅读 » 等不到的口琴 4年前 (2021-03-31) 2459浏览 0评论399个赞
前言 在 Redis 中，有一种数据类型，当在存储的时候会同时采用两种数据结构来进行分别存储，那么 Redis 为什么要这么做呢？这么做会造成同一份数据占用两倍空间吗？ 五种基本类型之集合对象 Red……继续阅读 » 双子孤狼 4年前 (2021-03-31) 1293浏览 0评论2491个赞
我们在缓存json数据到redis时经常会面临是选择string类型还是选择hash类型去存储。接下来我从占用空间和IO两方面来分析这两种类型的优势。 1、占用空间 根据数据结构的共识我们知道hash……继续阅读 » 种树飞 4年前 (2021-03-31) 2420浏览 0评论2871个赞
有序集合有两种编码方式：压缩列表 ziplist 和跳表 skiplist。……继续阅读 » 小新是也 4年前 (2021-03-31) 2276浏览 0评论1715个赞
kubernetes部署redis数据库(单节点) redis简介 Redis 是我们常用的非关系型数据库，在项目开发、测试、部署到生成环境时，经常需要部署一套 Redis 来对数据进行缓存。这里介绍……继续阅读 » 紫色飞猪 4年前 (2021-03-31) 1804浏览 0评论382个赞
前言 本文GitHub已收录：https://zhouwenxing.github.io/ 正常情况下我们选择使用 Redis 就是为了提升查询速度，然而让人意外的是，Redis 当中却有一种比较有意……继续阅读 » 双子孤狼 4年前 (2021-03-31) 2219浏览 0评论1639个赞
开发环境的搭建，是新人入职后的第一道槛，有时一个小小的问题就能阻塞半天。如果能提供一个工具在短时间内搞定开发环境，势必提高新人对团队的印象分！docker就是这样一个工具。 镜像&容器……继续阅读 » wangmeijian 4年前 (2021-03-31) 1359浏览 0评论2422个赞
Redis被广泛使用的一个很重要的原因是它的高性能。因此我们必要要重视所有可能影响Redis性能的因素、机制以及应对方案。影响Redis性能的五大方面的潜在因素，分别是： Redis内部的阻塞式操作 ……继续阅读 » 大杂草 4年前 (2021-03-31) 2250浏览 0评论407个赞
简介 单体服务如果想要突破到高并发服务就需要升级为集群服务。同时集群化也为高可用打下了坚实的基础。纵观现在比较流行的服务或者中间件，不管是RabbitMQ还是redis都提供了集群的功能。 作为硬核工……继续阅读 » flydean 4年前 (2021-03-31) 2266浏览 0评论2070个赞
Redis被广泛使用的一个很重要的原因是它的高性能。因此我们必要要重视所有可能影响Redis性能的因素、机制以及应对方案。影响Redis性能的五大方面的潜在因素，分别是： Redis内部的阻塞式操作 ……继续阅读 » 大杂草 4年前 (2021-03-31) 2807浏览 0评论1608个赞
数据分布 简述 分布式数据库首先要解决把整个数据集按照分区规则映射到多个节点的问题，即把数据集划分到多个节点上，每个节点负责整体数据的一个子集 分区及限制 分区规则 常见的分区规则 顺序分区 哈希分区……继续阅读 » 双木l之林 4年前 (2021-03-31) 2112浏览 0评论2515个赞
引言 正在午睡，突然收到线上疯狂报警的邮件，查看这个邮件发现这个报警的应用最近半个月都没有发布，应该不至于会有报警，但是还是打开邮件通过监控发现是由于某个接口某个接口流量暴增，CPU暴涨。为了先解决问……继续阅读 » 开心洋葱 4年前 (2021-03-31) 1855浏览 0评论1822个赞
Redis没有直接使用C语言传统的字符串表示(以空字符结尾的字符数组，以下简称C字符串)，而是自己构建了一种名为简单动态字符串(simple dynamic string,SDS)的抽象类型，并将SD……继续阅读 » itbsl 4年前 (2021-03-31) 2651浏览 0评论2573个赞
作者：HelloGitHub-小鱼干 Twitter 有位程序员总结了本周的 GitHub 中文程序员的看点：国内程序员日常——考公务员、996、抢茅台、刷算法、整健康码。在本期热点速览里，小鱼干收录……继续阅读 » 削微寒 4年前 (2021-03-31) 1255浏览 0评论1288个赞
(文章目录) SSRF服务端请求伪造（外网访问内网） SSRF(Server-Side Request Forgery:服务器端请求伪造) 是一种由攻击者构造形成由服务端发起请求的一个安全漏洞。一般情……继续阅读 » Jeromeyoung 4年前 (2021-03-31) 1895浏览 0评论1616个赞
MoChat —— 让企业微信开发更简单 项目地址 Github: https://github.com/mochat-cloud/mochat Gitee: https://gitee.com/mo……继续阅读 » 单恋一支鱼 4年前 (2021-03-31) 1791浏览 0评论406个赞
坑 Java应用程序的奇怪案例 在微服务和容器化方面，工程师倾向于避免使用 Java，这主要是由于 Java 臭名昭著的内存管理。但是，现在情况发生了改变，过去几年来 Java 的容器兼容性得到了……继续阅读 » 常见-youmen 4年前 (2021-03-31) 2046浏览 0评论1356个赞
![[Redis知识体系] 一文全面总结Redis知识体系](https://blog.75271.com/wp-content/themes/com75271/timthumb.php?src=https://images.75271.com/wp-content/uploads/2021/03/6bc0a03cde73e15187fa79e43fdcf5fb.jpg&h=123&w=200&q=90&zc=1&ct=1)
