Kafka 简介 Apache Kafka 是一个分布式发布-订阅消息系统。是大数据领域消息队列中唯一的王者。最初由 linkedin 公司使用 scala 语言开发,在2010年贡献给了Apache……继续阅读 » 五分钟学大数据 4年前 (2021-03-31) 2075浏览 0评论1050个赞
前言 主从复制的实现在上一篇已经分享过,虽然主从复制本身的确让读写分离更加高效,但是对于整体高可用存在很大的劣势:当主节点宕机了之后还需要人为重新进行主从关系配置;这不是开玩笑嘛,这样人为干预,故障恢……继续阅读 » Code综艺圈 4年前 (2021-03-31) 2880浏览 0评论2820个赞
前言 列表对象是 Redis 中 5 种基础数据类型之一,在 Redis 3.2 版本之前,列表对象底层存储结构有两种:linkedlist(双端列表)和 ziplist(压缩列表),而在 Redis……继续阅读 » 双子孤狼 4年前 (2021-03-31) 1250浏览 0评论1734个赞
(一)认识数据库 什么是数据库? 数据库的英文单词:data base,简称DB。 数据库实际上就是一个文件集合,是一个存储数据的仓库,本质就是一个文件系统,数据库是按照特定的格式把数据存储起来,用户……继续阅读 » IT小学生蔡坨坨 4年前 (2021-03-31) 2067浏览 0评论2800个赞
1 为什么需要事务 在网上的很多资料里,其实没有很好的解释为什么我们需要事务。其实我们去学习一个东西之前,还是应该了解清楚这个东西为什么有用,硬生生的去记住事务的ACID特性、各种隔离级别个人认为没有……继续阅读 » luojidong 4年前 (2021-03-31) 1314浏览 0评论1463个赞
针对延迟消息,本文分享五种不同的实现方案,并逐一讨论各种方案的大致实现和优缺点。……继续阅读 » 万猫学社 4年前 (2021-03-31) 1645浏览 0评论2680个赞
推荐系统是根据用户的行为、兴趣等特征,将用户感兴趣的信息、产品等推荐给用户的系统,它的出现主要是为了解决信息过载和用户无明确需求的问题,根据划分标准的不同,又分很多种类别……继续阅读 » 大数据学习与分享 4年前 (2021-03-31) 1361浏览 0评论2692个赞
1 要解决的问题 集群分配给多个用户使用时,需要使用配额以限制用户的资源使用,包括 CPU 核数、内存大小、GPU 卡数等,以防止资源被某些用户耗尽,造成不公平的资源分配。 大多数情况下,集群原生的 ……继续阅读 » 腾讯云原生 4年前 (2021-03-31) 1309浏览 0评论2506个赞
Redis被广泛使用的一个很重要的原因是它的高性能。因此我们必要要重视所有可能影响Redis性能的因素、机制以及应对方案。影响Redis性能的五大方面的潜在因素,分别是: Redis内部的阻塞式操作 ……继续阅读 » 大杂草 4年前 (2021-03-31) 2755浏览 0评论2965个赞
欢迎微信关注「SH的全栈笔记」 0. 主从复制 首先主从复制是什么?简单来说是让一台MySQL服务器去复制另一台MySQL的数据,使两个服务器的数据保持一致。 这种方式与Redis的主从复制的思路没有……继续阅读 » detectiveHLH 4年前 (2021-03-31) 1662浏览 0评论2616个赞
写在前面的话 最近不是一直在学习大数据框架和引用嘛(我是按照B站视频先学习过一遍路线,以后找准方向研究),除了自己手动利用Kafka和HDFS写一个简单的分布式文件传输(分布式课程开放性实验,刚好用上……继续阅读 » CodeDancing 4年前 (2021-03-31) 2287浏览 0评论2970个赞
前提 在很早很早之前,写过一篇文章介绍过Redis中的red lock的实现,但是在生产环境中,笔者所负责的项目使用的分布式锁组件一直是Redisson。Redisson是具备多种内存数据网格特性的基……继续阅读 » throwable 4年前 (2021-03-31) 3116浏览 0评论2115个赞
JWT初识记录……继续阅读 » 小白先生哦 4年前 (2021-03-31) 2096浏览 0评论1735个赞
标题缘起 大家可能都发现了,有时候标题不好起,因为近些年,信息实在是太多了,信息爆炸,让人眼花缭乱,所以很多“无良”博主就可以在起名字上下功夫,当然了,我这里的无良加了引号,因为有的文章那是真的和标题……继续阅读 » 三国梦回 4年前 (2021-03-31) 2413浏览 0评论747个赞
作者:林冠宏 / 指尖下的幽灵。转载者,请: 务必标明出处。 博客:http://www.cnblogs.com/linguanh/ 掘金:https://juejin.im/user/1785262……继续阅读 » 指尖下的幽灵 4年前 (2021-03-31) 1404浏览 0评论1358个赞
本文主要阐述软件性能测试中的一些调优思想和技术,节选自作者新书《软件性能测试分析与调优实践之路》部分章节归纳。 在国内互联网公司中,Web中间件用的最多的就是Apache和Nginx这两款了,包括很多……继续阅读 » 张永清 4年前 (2021-03-31) 2808浏览 0评论2598个赞
记一次缓存服务器迁移史,心塞! 写在前面 下班后本来可以好好休息下,结果刚躺下,此时,叮铃铃电话响了。 “喂,你好!”。 “喂,冰河,睡了吗?我是XXX,我现在遇到个问题,我想把缓存服务器从CentO……继续阅读 » 冰河团队 4年前 (2021-03-31) 2874浏览 0评论2706个赞
老刘是一名即将找工作的研二学生,写博客一方面是复习总结大数据开发的知识点,一方面是希望能够帮助和自己一样自学编程的伙伴。由于老刘是自学大数据开发,博客中肯定会存在一些不足,还希望大家能够批评指正,让我……继续阅读 » 努力的老刘 4年前 (2021-03-31) 1206浏览 0评论1042个赞
Sentry 算是目前开源界集错误监控,日志打点上报,事件数据实时分析最好用的软件了,没有之一。将它部署到 Kubernetes,再搭配它本身自带的利用 Clickhouse (大数据实时分析引擎)构……继续阅读 » 为少 4年前 (2021-03-31) 2127浏览 0评论822个赞
某天前端在调接口的时候,发现登录页面得验证码接口居然没有响应数据,显示的是500响应码。于是我一路排查,首先排查验证码接口所属的微服务是否正常,通过lsof -i:服务端口进行排查,发现该微服务进程存……继续阅读 » 挑战者V 4年前 (2021-03-31) 2928浏览 0评论536个赞
前言 本篇博客已被收录GitHub:https://zhouwenxing.github.io/ 在日常开发中,为了保证数据的一致性,我们一般都选择关系型数据库来存储数据,如 MySQL,Oracle……继续阅读 » 双子孤狼 4年前 (2021-03-31) 3106浏览 0评论837个赞
知道并发,并行,线程,协程概念吗?或者知道大概含义吗?有线程为什么还要有协程?区别是什么?『进程』通信方式知道几种?有没有超过3种?golang『协程』通信方式推荐?使用并发的目的是为什么?是……继续阅读 » 亦一银河 4年前 (2021-03-31) 2736浏览 0评论1028个赞
上一讲介绍了缓存满了,通过内存淘汰机制来淘汰掉数据。如果有的数据一直滞留在缓存中,但又没有应用使用,时间长了,就可能会占据大部分的缓存空间。 今天我们来学习一下缓存污染,以及如何解决缓存污染。 缓存污……继续阅读 » 大杂草 4年前 (2021-03-31) 1334浏览 0评论2239个赞
填坑限流算法!练就计数器,滑动窗口,令牌桶,漏桶,滑动日志五毒神掌。……继续阅读 » Java填坑笔记 4年前 (2021-03-31) 2926浏览 0评论2403个赞
本文整理自腾讯云容器产品,容器解决方案架构团队的陈浪交在 Techo 开发者大会云原生专题的分享内容——一个优秀的云原生架构需要注意哪些地方。本文将会给大家分享云原生架构的特点和以及实践过程中的一些注……继续阅读 » 腾讯云原生 4年前 (2021-03-31) 1786浏览 0评论2957个赞
上一讲提到,缓存的容量总是小于后端数据库的。随着业务系统的使用,缓存数据会撑满内存空间,该怎么处理呢? 本节我们来学习内存淘汰机制。在Redis 4.0之前有6种内存淘汰策略,之后又增加2种,一共8种……继续阅读 » 大杂草 4年前 (2021-03-31) 1468浏览 0评论2482个赞
前文我们了解了k8s上的NetworkPolicy资源的使用和工作逻辑,回顾请参考:https://www.cnblogs.com/qiuhom-1874/p/14227660.html;今天我们来聊……继续阅读 » Linux-1874 4年前 (2021-03-31) 2192浏览 0评论2614个赞
理论可能都懂,但是结合起来并实际应用就有可能踩坑……继续阅读 » 小罗技术笔记 4年前 (2021-03-31) 1991浏览 0评论1288个赞
Redis被广泛使用的一个很重要的原因是它的高性能。因此我们必要要重视所有可能影响Redis性能的因素、机制以及应对方案。影响Redis性能的五大方面的潜在因素,分别是: Redis内部的阻塞式操作 ……继续阅读 » 大杂草 4年前 (2021-03-31) 2858浏览 0评论2331个赞
Hello,大家好,我是楼下小黑哥~ 好久没写支付相关的文章了,今天继续从事老本行~ 上次在文章钱被扣走了,但是订单却未成功!支付掉单异常最全解决方案提到,支付过程会出现掉单、卡单的情况,这种情况对于……继续阅读 » 楼下小黑哥 4年前 (2021-03-31) 1159浏览 0评论2529个赞
前言 在微服务架构中,对于一个系统,会划分出多个微服务,而且都是独立开发、独立部署,最后聚合在一起形成一个系统提供服务。当服务数量增多时,这些小服务怎么管理?调用方又怎么能确定服务的IP和端口?服务挂……继续阅读 » Code综艺圈 4年前 (2021-03-31) 1167浏览 0评论159个赞
Redis 通过 RDB 方式进行数据备份与还原……继续阅读 » WeihanLi 4年前 (2021-03-31) 2007浏览 0评论583个赞
【摘要】:此文主要解决MySQL服务怎么安装的问题(Linux & Windows)以及环境安装经常遇到的一些问题,虽然算是基础中的基础,但是真到自己个儿真刀真枪开干的时候,总会发现这……继续阅读 » 哈希一下这只鱼 4年前 (2021-03-31) 1625浏览 0评论999个赞
短链顾名思义是一种很短的地址,应用广泛,例如页面中有一张二维码图片,包含的是一个原始地址(如下所示),如果二维码中的链接需要修改,那么就得发代码替换掉。 原始地址:https://github.com……继续阅读 » 开心洋葱 4年前 (2021-03-31) 2455浏览 0评论1671个赞
本系列我们介绍消息队列 Kombu。Kombu 的定位是一个兼容 AMQP 协议的消息队列抽象。通过本文,大家可以了解 Kombu 中的 Consumer 概念。……继续阅读 » 罗西的思考 4年前 (2021-03-31) 2099浏览 0评论2514个赞
关于使用Azure Redis服务在以下九大方面的功能性的解说: 高可用 备份可靠性 配置自动化 部署多样性 快速回档功能 数据扩容 SLA稳定性 数据安全性 监控系统 一:高可用 Azure Cac……继续阅读 » 路边两盏灯 4年前 (2021-03-31) 3151浏览 0评论1314个赞
Harbor 一、背景 Docker中要使用镜像,我们一般都会从本地、Docker Hub公共仓库或者其它第三方的公共仓库中下载镜像,但是出于安全和一些内外网的原因考虑,企业级上不会轻易使用。普通的D……继续阅读 » 林奋斗的成长之路 4年前 (2021-03-31) 2830浏览 0评论1217个赞
这一节,我们来学习一下缓存异常。缓存异常有四种类型,分别是缓存和数据库的数据不一致、缓存雪崩、缓存击穿和缓存穿透。 下面通过了解这四种缓存异常的原理和应对方法。 缓存和数据库的数据不一致 缓存和数据库……继续阅读 » 大杂草 4年前 (2021-03-31) 2649浏览 0评论1362个赞
本文主要介绍了缓存的概念,以及如何在服务器内存中存储内容。今天的目标是利用IDistributedCache来做一些分布式缓存,这样我们就可以横向扩展我们的web应用程序。 在本教程中,我将使用Re……继续阅读 » 码农译站 4年前 (2021-03-31) 1319浏览 0评论923个赞
一.核心优化概述 什么是优化:以更小的资源支持更大负载网站的运行,以小博大。 思路:尽量减少用户等待时间,节省系统资源开销,节省带宽使用。 优化什么地方?有三方面:Memcache内存缓存技术、静态化……继续阅读 » 开心洋葱 4年前 (2021-03-31) 1414浏览 0评论980个赞
写这篇文章是因为之前有一次删库操作,需要进行批量删除数据,当时没有控制好删除速度,导致产生了主从延迟,出现了一点小事故。 今天我们就来看看为什么会产生主从延迟以及主从延迟如何处理等相关问题。 坐好了,……继续阅读 » *IT界农民工* 4年前 (2021-03-31) 1554浏览 0评论212个赞
初探Celery,完成一个简单的Celery任务流程……继续阅读 » BaKuai 4年前 (2021-03-31) 1716浏览 0评论360个赞
队列,顾名思义,排着队等着做事情。在生活场景中,凡是排队的人,都是带有目的性的、要完成某件事情,才去排队的,要不没有谁会闲到排队玩儿。而在软件应用层面,队列是什么,队列有什么优点,我们什么时候需要用队……继续阅读 » bananaplan 4年前 (2021-03-31) 2971浏览 0评论1205个赞
前言: 在我们的日常开发中,关系型数据库和非关系型数据库的使用已经是一个成熟的软件产品开发过程中必不可却的存储数据的工具了。那么用了这么久的关系数据库和非关系型数据库你们都知道他们之间的区别了吗?下面……继续阅读 » 追逐时光者 4年前 (2021-03-31) 2519浏览 0评论1292个赞
本篇随笔不是细说Egg.js 的详细内容,毕竟官网介绍还是比较清晰的,我们主要说使用它来做一个后端的API接口系统,后端肯定需要对数据库进行各种操作,用一个JS的方式来访问数据库,利用egg-seq……继续阅读 » 开心洋葱 4年前 (2021-03-31) 1218浏览 0评论1879个赞