- spark处理kafka的用户行为数据写入hive
月光一族吖
sparkkafkahive
在CentOS上部署Hadoop(Hadoop3.4.1)和Hive(Hive3.1.2)的详细步骤说明。这份指南面向单机安装(伪集群模式),如果需要搭建真正的多节点集群,各节点间的网络互访、SSH免密登录以及配置同步需进一步调整。注意:本指南假设你已拥有root权限或者具有sudo权限,并且系统连接Internet(用于下载安装包)。步骤中的版本号可根据实际需要进行更改。一、环境准备更新系统软件
- PostgreSql、Hbase的安装
月光一族吖
postgresqlhbase数据库
在CentOS8中安装PostgreSQL和HBase,以下是详细步骤,包括使用sudo权限的命令:安装PostgreSQL更新系统包在两台CentOS8上运行以下命令,确保系统是最新的:sudodnfupdate-y安装PostgreSQLCentOS8默认仓库提供PostgreSQL。你可以直接安装所需版本的PostgreSQL:sudodnfinstall-ypostgresql-serve
- 基于dropbear实现嵌入式系统ssh服务端与客户端完整交互
小哥山水之间
linux
以下基于Dropbear实现SSH服务端与客户端交互的完整步骤,涵盖服务端部署、客户端连接、认证配置及消息传输,结合了多篇权威资料的核心实践:环境准备与安装服务端安装•Linux系统(以Ubuntu/CentOS为例)Ubuntu/Debiansudoaptupdate&&sudoaptinstalldropbearCentOSsudoyuminstalldropbear•嵌入式系统需交叉编译(示
- CentOS9安装TigerVNC
muyao99
运维数据库
文章目录问题介绍一、安装VNC二、修改vncserver.users文件三、修改vncserver-config-defaults四、修改vncserver-config-mandatory五、修改config六、复制
[email protected]七、设置VNC密码八、启动VNC总结问题介绍问题出现在在CentOS上安装TigerVNC时,启动TigerVNC时会出现如下的错误,这将导致不
- centos9安装docker Dify
CentOS|DockerDocsyum-yinstallgccgcc-c++yum-utilsDocker官方的YUM软件仓库配置文件到系统,设置存储库yum-config-manager--add-repohttps://download.docker.com/linux/centos/docker-ce.repo也可以从阿里云下(我选择上面的)yum-config-manager--add-
- centos9安装界面
咸鱼布衣
服务器运维
centos8和9可能无法使用yum来安装界面,而是使用dnf工具centos9安装界面sudodnfgroupinstall"ServerwithGUI"sudodnfgroupinstallGNOMEstartx
- nano编辑器的详细使用教程
咖啡续命又一天
Linux编辑器
以下是Linux下nano编辑器的详细使用指南,涵盖安装、基础操作、高级功能、快捷键以及常见问题处理。一、安装nano大多数Linux发行版已预装nano。如果没有安装,可以通过以下命令安装:Debian/Ubuntu系:sudoaptupdate&&sudoaptinstallnano-yCentOS/RHEL系:sudoyuminstallnano-y验证安装:nano--version二、启
- Linux安装及常用指令
一、Linux安装简述1.常见Linux发行版发行版特点Ubuntu最流行,用户友好,社区支持强,适合新手CentOS/RockyLinux企业级稳定版本,适合服务器Debian稳定、安全,适合开发或服务器ArchLinux极简、自由度高,适合进阶用户KaliLinux渗透测试专用2.安装方式✅推荐:虚拟机安装(安全、不破坏主系统)工具:VMware/VirtualBox安装流程:下载ISO镜像(
- FFmpeg 超级详细安装与配置教程(Windows 系统)
Stuomasi_xiaoxin
人工智能ffmpegaipython深度学习
FFmpeg是一款功能强大的开源多媒体处理工具集,能够进行音视频的编码、解码、转码、混流、推流、滤镜、格式转换等多种操作。本教程将详细介绍如何在Windows系统上安装和配置FFmpeg,并提供一些常用的使用示例,助你从入门到基本掌握。目录什么是FFmpeg?Windows系统下安装FFmpeg️步骤1:下载FFmpeg步骤2:解压文件步骤3:配置环境变量步骤4:验证安装FFmpeg基本使用入门1
- 【记录】Ubuntu安装Mysql
qq_29750461
ubuntulinux运维
本文记录Ubuntu系统下安装Mysql1查看系统信息lsb_release-a2使用apt下载安装Mysql1打开终端,首先更新你的系统包索引,以确保所有包都是最新的sudoaptupdate2安装mysql服务器sudoaptinstallmysql-server(也可以选择对应的mysql-server版本)3查看mysql状态安装完成后sudosystemctlstartmysql//开启
- Linux
Linux基础Linux基础防火墙命令iptables防火墙firewalld防火墙介绍selinux常用命令集锦文件目录命令查看文件及目录文件浏览文件操作文档编辑管道|grep命令磁盘命令备份压缩文件权限网络配置rpm包管理demoLinux基础防火墙命令注意:在centos6和centos7中,命令上的区别1.防火墙:6是iptables,7是firewalld2.启动服务的命令:6是serv
- Ubuntu android12 编译环境搭建
yun382657988
Ubuntu相关ubuntu
1、安装gitsudoapt-getinstallgitgitconfig--globaluser.name"用户名"gitconfig--globaluser.email"邮箱"2、安装jdk-8安装jdk:18.04默认集成了jdk1.8的源,可直接执行以下安装;sudoapt-getinstallopenjdk-8-jdk//jdk1.8sudoapt-getinstallopenjdk-1
- 【如何判断Linux系统是Ubuntu还是CentOS】
岁月玲珑
linuxlinuxubuntucentos
要确定您的操作系统是Ubuntu还是CentOS,可以通过以下方法快速检查:方法1:通过终端命令(推荐)在终端中执行以下命令之一:查看/etc/os-release文件cat/etc/os-releaseUbuntu特征:显示NAME="Ubuntu"或ID=ubuntuCentOS特征:显示NAME="CentOSLinux"或ID="centos"直接提取系统IDgrep-E'^ID='/et
- ubuntu安装python2_Ubuntu下安装Python2.6.1以及Tkinter | 学步园
我是先装好Python,后来要用到Tkinter才装的1.安装Python2.6.1:dumeifang@dumeifang-desktop:~$suPassword:root@dumeifang-desktop:/home/dumeifang#wgethttp://www.python.org/ftp/python/2.6.1/Python-2.6.1.tgz--14:28:31--http:/
- Nginx轻松上手
oaa114龙仔
Nginxnginx运维服务器
Nginx轻松上手准备环境部署安装源码安装yum安装nginx配置文件简单使用虚拟主机与域名解析反向代理负载均衡动静分离nginx+keepalived高可用准备环境Linux操作系统IP地址功能Centos7192.168.1.20nginx_server+keepalivedCentos7192.168.1.21nginxbackup+keepalivedCentos7192.168.1.22
- 常用指令合集(DOS/Linux/git/Maven等)
文章目录常用指令收集vmware虚拟机联网设置ubuntu常见问题设置apt相关指令:gcc编译相关指令sqlite3VSCode快捷键:收索引擎技巧(google)Intelideashell--LinxvimgitDOS:mavendockerkubectl指令nginx配置redis-clientMySQLlinux下java进程排错MongoDBCentOSJDK安装配置UbuntuJDK
- Docker部署java项目,基于Dockerfile文件构建镜像
一头生产的驴
运维开发dockerjava容器运维开发开源jvm
一、准备Docker环境1、安装依赖sudoyuminstall-yyum-utilsdevice-mapper-persistent-datalvm22、添加软件源头(阿里源)-加速sudoyum-config-manager--add-repohttp://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo3、更新yumsudoyu
- 富文本编辑器插件支持哪些格式导入?Word、Excel、PPT全解析
路过了忘了
前端pdfumeditor粘贴wordueditor粘贴wordueditor复制wordueditor上传word图片ueditor导入word
要求:开源,免费,技术支持编辑器:百度ueditor前端:vue2,vue3,vue-cli,react,html5用户体验:Ctrl+V快捷键操作功能:导入Word,导入Excel,导入PPT(PowerPoint),导入PDF,复制粘贴word,导入微信公众号内容,web截屏平台:Windows,macOS,Linux,RedHat,CentOS,Ubuntu,中标麒麟,银河麒麟,统信UOS,
- 有没有编辑器支持excel、ppt、pdf及word导入?
要求:开源,免费,技术支持编辑器:百度ueditor前端:vue2,vue3,vue-cli,react,html5用户体验:Ctrl+V快捷键操作功能:导入Word,导入Excel,导入PPT(PowerPoint),导入PDF,复制粘贴word,导入微信公众号内容,web截屏平台:Windows,macOS,Linux,RedHat,CentOS,Ubuntu,中标麒麟,银河麒麟,统信UOS,
- Excel、PPT、PDF如何导入百度富文本编辑器?
2501_90699800
excelpowerpointpdfumeditor粘贴wordueditor粘贴wordueditor复制wordueditor上传word图片
要求:开源,免费,技术支持编辑器:百度ueditor前端:vue2,vue3,vue-cli,react,html5用户体验:Ctrl+V快捷键操作功能:导入Word,导入Excel,导入PPT(PowerPoint),导入PDF,复制粘贴word,导入微信公众号内容,web截屏平台:Windows,macOS,Linux,RedHat,CentOS,Ubuntu,中标麒麟,银河麒麟,统信UOS,
- CentOS系统高效部署fastGPT全攻略
挑战者666888
linux常用工具软件centospythonlinux
文章目录一、引言二、环境准备系统要求;基础依赖安装Python环境配置三、fastGPT部署流程源码获取与验证依赖库安装模型文件部署四、系统配置优化服务端口配置;安全加固措施;资源限制调整五、服务启动与管理直接启动方式系统服务化部署;日志监控方案六、验证与测试健康检查端点测试API功能测试用例压力测试方案一、引言fastGPT是一款高效、灵活的大语言模型应用框架,凭借其出色的推理速度和良好的扩展性
- 一、CentOS7通过kubeadm安装K8S 1.20.1版本
你想考研啊
kuberneteskubernetes容器云原生
一、准备机器所有节点执行准备3台虚拟机(2核4G,CentOS7+),配置如下:hostnamectlset-hostnamek8s-master#在Master节点执行hostnamectlset-hostnamek8s-node1#Worker1节点执行hostnamectlset-hostnamek8s-node2#Worker2节点执行IP地址主机名角色192.168.11.101k8s-
- jenkins集成sonarqube(使用token进行远程调用)
被一米六支配的恐惧
jenkins运维
先决条件sonarqube-version10.0.0jenkins-version2.486k8s-version1.23.14OS-versioncentos7.9jenkins上部署sonarqube插件sonarqubescanner部署sonarqube创建存储--前面有创建storageclass的文档.k8s-StoargClass的使用-基于nfs_avolumethatconta
- 使用 Docker Swarm 部署高可用集群指南
思静鱼
虚拟化技术docker和k8sdocker容器运维
DockerSwarm是Docker原生的集群管理工具,可以轻松地将多个Docker主机组成一个集群,实现服务的高可用性和负载均衡。以下是详细的部署步骤:一、环境准备1.服务器要求至少3台Linux服务器(建议CentOS/Ubuntu)每台服务器已安装DockerEngine(版本19.03+)服务器之间网络互通开放的端口:2377(集群管理)、7946(节点通信)、4789(覆盖网络)2.设置
- centos使用wget下载jdk8
任意放逐
centosjavalinux
首先官网找需要的的jdk版本https://www.oracle.com/java/technologies/javase/javase8u211-later-archive-downloads.html我这里选择的是弹出下载提示框:勾选点Downloadjdk…这里需要使用一个账号登录,可以自行在网上搜一个账号,我就不给了。然后退回原来的页面下载,用一个能看到下载链接的软件下载,我使用的是idm
- python tab键自动补全没反应_CentOS下为python命令行添加Tab键自动补全功能
weixin_39741459
pythontab键自动补全没反应
难道python命令就真的没办法使用Tab键的自动补全功能么?当然不是了,我们依然可以使用。只不过需要自己动手配置一下。操作系统环境:CentOSrelease6.4x86_32软件版本:Python2.6.6下面我们具体了解配置方法:1、编写一个Tab键自动补全功能的脚本。新手会说不会写怎么办?搜索引擎可以帮助你,关键字(pythontab键自动补全)1、编写一个Tab键自动补全功能的脚本。新手
- CentOS系统新手指导手册
chanalbert
centoslinux运维
一、CentOS系统概述1.1CentOS的诞生与核心价值起源:CentOS(CommunityENTerpriseOperatingSystem)是基于RedHatEnterpriseLinux(RHEL)的开源发行版,由社区维护,提供与RHEL完全兼容的免费企业级Linux系统。特点:稳定性:通过长期支持(LTS)版本(如CentOS7/8)保证系统稳定性。企业级特性:适配服务器、云计算、虚拟
- 【Kafka】docker 中配置带 Kerberos 认证的 Kafka 环境(全过程)
1.准备docker下载镜像dockerpullcentos/systemd,该镜像是基于centos7增加了systemd的功能,可以更方便启动后台服务启动镜像使用systemd功能需要权限,如果是模拟gitlabservices就不要使用systemd的方式启动如果不使用systemd功能dockerrun-itd--namekafka_kerberos-p9092:9092centos/sy
- Docker-compose搭建(单机/多机)RabbitMQ集群
Ennis.Zhou
dockerdockerrabbitmq容器
一、(单台服务器)docker-compose搭建RabbitMQ集群这里我们提到的是用一台Centos7服务器上用docker搭建的RabbitMQ集群,只能用作测试和练手用。1.环境准备服务器IP容器分配网段容器hostname容器的IP172.17.202.82172.24.0.0/16rabbit1172.24.0.5rabbit2172.24.0.6rabbit3172.24.0.72.
- 使用sshfs+vscode 在windows远程开发centos6代码
胖大和尚
vscodewindowside
明白了,你的核心需求是:在Windows上使用现代开发工具(如VSCode)开发代码,代码运行在远程的CentOS6上面这个需求是“典型的远程开发场景”,但因为CentOS6很旧,不能用VSCodeRemote-SSH(它需要新版本glibc),所以我们要用兼容性强+开发体验好的替代方案。⸻✅目标:在Windows本地写代码+自动同步到CentOS6+远程编译/运行/调试我为你总结了3套成熟方案,
- Linux的Initrd机制
被触发
linux
Linux 的 initrd 技术是一个非常普遍使用的机制,linux2.6 内核的 initrd 的文件格式由原来的文件系统镜像文件转变成了 cpio 格式,变化不仅反映在文件格式上, linux 内核对这两种格式的 initrd 的处理有着截然的不同。本文首先介绍了什么是 initrd 技术,然后分别介绍了 Linux2.4 内核和 2.6 内核的 initrd 的处理流程。最后通过对 Lin
- maven本地仓库路径修改
bitcarter
maven
默认maven本地仓库路径:C:\Users\Administrator\.m2
修改maven本地仓库路径方法:
1.打开E:\maven\apache-maven-2.2.1\conf\settings.xml
2.找到
 
- XSD和XML中的命名空间
darrenzhu
xmlxsdschemanamespace命名空间
http://www.360doc.com/content/12/0418/10/9437165_204585479.shtml
http://blog.csdn.net/wanghuan203/article/details/9203621
http://blog.csdn.net/wanghuan203/article/details/9204337
http://www.cn
- Java 求素数运算
周凡杨
java算法素数
网络上对求素数之解数不胜数,我在此总结归纳一下,同时对一些编码,加以改进,效率有成倍热提高。
第一种:
原理: 6N(+-)1法 任何一个自然数,总可以表示成为如下的形式之一: 6N,6N+1,6N+2,6N+3,6N+4,6N+5 (N=0,1,2,…)
- java 单例模式
g21121
java
想必单例模式大家都不会陌生,有如下两种方式来实现单例模式:
class Singleton {
private static Singleton instance=new Singleton();
private Singleton(){}
static Singleton getInstance() {
return instance;
}
- Linux下Mysql源码安装
510888780
mysql
1.假设已经有mysql-5.6.23-linux-glibc2.5-x86_64.tar.gz
(1)创建mysql的安装目录及数据库存放目录
解压缩下载的源码包,目录结构,特殊指定的目录除外:
- 32位和64位操作系统
墙头上一根草
32位和64位操作系统
32位和64位操作系统是指:CPU一次处理数据的能力是32位还是64位。现在市场上的CPU一般都是64位的,但是这些CPU并不是真正意义上的64 位CPU,里面依然保留了大部分32位的技术,只是进行了部分64位的改进。32位和64位的区别还涉及了内存的寻址方面,32位系统的最大寻址空间是2 的32次方= 4294967296(bit)= 4(GB)左右,而64位系统的最大寻址空间的寻址空间则达到了
- 我的spring学习笔记10-轻量级_Spring框架
aijuans
Spring 3
一、问题提问:
→ 请简单介绍一下什么是轻量级?
轻量级(Leightweight)是相对于一些重量级的容器来说的,比如Spring的核心是一个轻量级的容器,Spring的核心包在文件容量上只有不到1M大小,使用Spring核心包所需要的资源也是很少的,您甚至可以在小型设备中使用Spring。
 
- mongodb 环境搭建及简单CURD
antlove
WebInstallcurdNoSQLmongo
一 搭建mongodb环境
1. 在mongo官网下载mongodb
2. 在本地创建目录 "D:\Program Files\mongodb-win32-i386-2.6.4\data\db"
3. 运行mongodb服务 [mongod.exe --dbpath "D:\Program Files\mongodb-win32-i386-2.6.4\data\
- 数据字典和动态视图
百合不是茶
oracle数据字典动态视图系统和对象权限
数据字典(data dictionary)是 Oracle 数据库的一个重要组成部分,这是一组用于记录数据库信息的只读(read-only)表。随着数据库的启动而启动,数据库关闭时数据字典也关闭 数据字典中包含
数据库中所有方案对象(schema object)的定义(包括表,视图,索引,簇,同义词,序列,过程,函数,包,触发器等等)
数据库为一
- 多线程编程一般规则
bijian1013
javathread多线程java多线程
如果两个工两个以上的线程都修改一个对象,那么把执行修改的方法定义为被同步的,如果对象更新影响到只读方法,那么只读方法也要定义成同步的。
不要滥用同步。如果在一个对象内的不同的方法访问的不是同一个数据,就不要将方法设置为synchronized的。
- 将文件或目录拷贝到另一个Linux系统的命令scp
bijian1013
linuxunixscp
一.功能说明 scp就是security copy,用于将文件或者目录从一个Linux系统拷贝到另一个Linux系统下。scp传输数据用的是SSH协议,保证了数据传输的安全,其格式如下: scp 远程用户名@IP地址:文件的绝对路径
- 【持久化框架MyBatis3五】MyBatis3一对多关联查询
bit1129
Mybatis3
以教员和课程为例介绍一对多关联关系,在这里认为一个教员可以叫多门课程,而一门课程只有1个教员教,这种关系在实际中不太常见,通过教员和课程是多对多的关系。
示例数据:
地址表:
CREATE TABLE ADDRESSES
(
ADDR_ID INT(11) NOT NULL AUTO_INCREMENT,
STREET VAR
- cookie状态判断引发的查找问题
bitcarter
formcgi
先说一下我们的业务背景:
1.前台将图片和文本通过form表单提交到后台,图片我们都做了base64的编码,并且前台图片进行了压缩
2.form中action是一个cgi服务
3.后台cgi服务同时供PC,H5,APP
4.后台cgi中调用公共的cookie状态判断方法(公共的,大家都用,几年了没有问题)
问题:(折腾两天。。。。)
1.PC端cgi服务正常调用,cookie判断没
- 通过Nginx,Tomcat访问日志(access log)记录请求耗时
ronin47
一、Nginx通过$upstream_response_time $request_time统计请求和后台服务响应时间
nginx.conf使用配置方式:
log_format main '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_r
- java-67- n个骰子的点数。 把n个骰子扔在地上,所有骰子朝上一面的点数之和为S。输入n,打印出S的所有可能的值出现的概率。
bylijinnan
java
public class ProbabilityOfDice {
/**
* Q67 n个骰子的点数
* 把n个骰子扔在地上,所有骰子朝上一面的点数之和为S。输入n,打印出S的所有可能的值出现的概率。
* 在以下求解过程中,我们把骰子看作是有序的。
* 例如当n=2时,我们认为(1,2)和(2,1)是两种不同的情况
*/
private stati
- 看别人的博客,觉得心情很好
Cb123456
博客心情
以为写博客,就是总结,就和日记一样吧,同时也在督促自己。今天看了好长时间博客:
职业规划:
http://www.iteye.com/blogs/subjects/zhiyeguihua
android学习:
1.http://byandby.i
- [JWFD开源工作流]尝试用原生代码引擎实现循环反馈拓扑分析
comsci
工作流
我们已经不满足于仅仅跳跃一次,通过对引擎的升级,今天我测试了一下循环反馈模式,大概跑了200圈,引擎报一个溢出错误
在一个流程图的结束节点中嵌入一段方程,每次引擎运行到这个节点的时候,通过实时编译器GM模块,计算这个方程,计算结果与预设值进行比较,符合条件则跳跃到开始节点,继续新一轮拓扑分析,直到遇到
- JS常用的事件及方法
cwqcwqmax9
js
事件 描述
onactivate 当对象设置为活动元素时触发。
onafterupdate 当成功更新数据源对象中的关联对象后在数据绑定对象上触发。
onbeforeactivate 对象要被设置为当前元素前立即触发。
onbeforecut 当选中区从文档中删除之前在源对象触发。
onbeforedeactivate 在 activeElement 从当前对象变为父文档其它对象之前立即
- 正则表达式验证日期格式
dashuaifu
正则表达式IT其它java其它
正则表达式验证日期格式
function isDate(d){
var v = d.match(/^(\d{4})-(\d{1,2})-(\d{1,2})$/i);
if(!v) {
this.focus();
return false;
}
}
<input value="2000-8-8" onblu
- Yii CModel.rules() 方法 、validate预定义完整列表、以及说说验证
dcj3sjt126com
yii
public array rules () {return} array 要调用 validate() 时应用的有效性规则。 返回属性的有效性规则。声明验证规则,应重写此方法。 每个规则是数组具有以下结构:array('attribute list', 'validator name', 'on'=>'scenario name', ...validation
- UITextAttributeTextColor = deprecated in iOS 7.0
dcj3sjt126com
ios
In this lesson we used the key "UITextAttributeTextColor" to change the color of the UINavigationBar appearance to white. This prompts a warning "first deprecated in iOS 7.0."
Ins
- 判断一个数是质数的几种方法
EmmaZhao
Mathpython
质数也叫素数,是只能被1和它本身整除的正整数,最小的质数是2,目前发现的最大的质数是p=2^57885161-1【注1】。
判断一个数是质数的最简单的方法如下:
def isPrime1(n):
for i in range(2, n):
if n % i == 0:
return False
return True
但是在上面的方法中有一些冗余的计算,所以
- SpringSecurity工作原理小解读
坏我一锅粥
SpringSecurity
SecurityContextPersistenceFilter
ConcurrentSessionFilter
WebAsyncManagerIntegrationFilter
HeaderWriterFilter
CsrfFilter
LogoutFilter
Use
- JS实现自适应宽度的Tag切换
ini
JavaScripthtmlWebcsshtml5
效果体验:http://hovertree.com/texiao/js/3.htm
该效果使用纯JavaScript代码,实现TAB页切换效果,TAB标签根据内容自适应宽度,点击TAB标签切换内容页。
HTML文件代码:
<!DOCTYPE html>
<html xmlns="http://www.w3.org/1999/xhtml"
- Hbase Rest API : 数据查询
kane_xie
RESThbase
hbase(hadoop)是用java编写的,有些语言(例如python)能够对它提供良好的支持,但也有很多语言使用起来并不是那么方便,比如c#只能通过thrift访问。Rest就能很好的解决这个问题。Hbase的org.apache.hadoop.hbase.rest包提供了rest接口,它内嵌了jetty作为servlet容器。
启动命令:./bin/hbase rest s
- JQuery实现鼠标拖动元素移动位置(源码+注释)
明子健
jqueryjs源码拖动鼠标
欢迎讨论指正!
print.html代码:
<!DOCTYPE html>
<html>
<head>
<meta http-equiv=Content-Type content="text/html;charset=utf-8">
<title>发票打印</title>
&l
- Postgresql 连表更新字段语法 update
qifeifei
PostgreSQL
下面这段sql本来目的是想更新条件下的数据,可是这段sql却更新了整个表的数据。sql如下:
UPDATE tops_visa.visa_order
SET op_audit_abort_pass_date = now()
FROM
tops_visa.visa_order as t1
INNER JOIN tops_visa.visa_visitor as t2
ON t1.
- 将redis,memcache结合使用的方案?
tcrct
rediscache
公司架构上使用了阿里云的服务,由于阿里的kvstore收费相当高,打算自建,自建后就需要自己维护,所以就有了一个想法,针对kvstore(redis)及ocs(memcache)的特点,想自己开发一个cache层,将需要用到list,set,map等redis方法的继续使用redis来完成,将整条记录放在memcache下,即findbyid,save等时就memcache,其它就对应使用redi
- 开发中遇到的诡异的bug
wudixiaotie
bug
今天我们服务器组遇到个问题:
我们的服务是从Kafka里面取出数据,然后把offset存储到ssdb中,每个topic和partition都对应ssdb中不同的key,服务启动之后,每次kafka数据更新我们这边收到消息,然后存储之后就发现ssdb的值偶尔是-2,这就奇怪了,最开始我们是在代码中打印存储的日志,发现没什么问题,后来去查看ssdb的日志,才发现里面每次set的时候都会对同一个key