高高for 循环
高高for 循环

MySQL调优--07---淘宝数据库，主键如何设计的？

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

文章目录

  • 淘宝数据库，主键如何设计的？
    • 1.自增ID的问题
    • 2. 业务字段做主键
    • 3. 淘宝的主键设计
      • ==订单ID = 时间 + 去重字段 + 用户ID后6位尾号==
    • 4. 推荐的主键设计
        • 主键设计至少应该是==全局唯一且是单调递增==。
      • UUID：
        • UUID = 时间+UUID版本（16字节）- 时钟序列（4字节） - MAC地址（12字节）
      • 改造UUID
        • ==MySQL 8.0==可以更换时间低位和时间高位的存储方式，这样UUID就是==有序的UUID==了。
    • 4、有序UUID性能测试
      • 如果不是MySQL8.0 肿么办？

淘宝数据库，主键如何设计的？

MySQL调优--07---淘宝数据库，主键如何设计的？_第1张图片

1.自增ID的问题

MySQL调优--07---淘宝数据库，主键如何设计的？_第2张图片

2. 业务字段做主键

MySQL调优--07---淘宝数据库，主键如何设计的？_第3张图片

选择卡号（cardno）

MySQL调优--07---淘宝数据库，主键如何设计的？_第4张图片
MySQL调优--07---淘宝数据库，主键如何设计的？_第5张图片
MySQL调优--07---淘宝数据库，主键如何设计的？_第6张图片
MySQL调优--07---淘宝数据库，主键如何设计的？_第7张图片

选择会员电话 或 身份证号

MySQL调优--07---淘宝数据库，主键如何设计的？_第8张图片

3. 淘宝的主键设计

MySQL调优--07---淘宝数据库，主键如何设计的？_第9张图片
MySQL调优--07---淘宝数据库，主键如何设计的？_第10张图片

订单ID = 时间 + 去重字段 + 用户ID后6位尾号

4. 推荐的主键设计

主键设计至少应该是全局唯一且是单调递增。

在这里插入图片描述

UUID：

MySQL调优--07---淘宝数据库，主键如何设计的？_第11张图片
MySQL调优--07---淘宝数据库，主键如何设计的？_第12张图片

UUID = 时间+UUID版本（16字节）- 时钟序列（4字节） - MAC地址（12字节）

MySQL调优--07---淘宝数据库，主键如何设计的？_第13张图片

改造UUID

MySQL 8.0可以更换时间低位和时间高位的存储方式，这样UUID就是有序的UUID了。

MySQL调优--07---淘宝数据库，主键如何设计的？_第14张图片

  • 通过函数uuid_to_bin(@uuid,true)将UUID转化为有序UUID了。全局唯一 + 单调递增，这不就是我们想要的主键！

4、有序UUID性能测试

MySQL调优--07---淘宝数据库，主键如何设计的？_第15张图片

如果不是MySQL8.0 肿么办？

MySQL调优--07---淘宝数据库，主键如何设计的？_第16张图片

你可能感兴趣的:(Mysql高级,mysql,数据库,mariadb)

  • java23种设计模式-单例模式 千里码！ 后端技术设计模式#Java单例模式设计模式
    单例模式（SingletonPattern）学习笔记定义单例模式属于创建型设计模式，确保一个类只有一个实例，并提供全局访问点。是Java中最简单但实现最复杂的设计模式。适用场景需要控制资源访问（如数据库连接池）全局配置对象日志记录器设备管理器（如打印机服务）缓存系统线程池/连接池管理模式结构类图Singleton-staticinstance:Singleton-Singleton()+stati
  • GoFly框架中集成Bolt 和badfer两个Go语言嵌入式键值数据库 GoFly开发者 GoFly快速开发框架数据库golang嵌入式键值数据库
    本插件集成了Bolt和badfer两个纯Go实现的快速的嵌入式K/V数据库，方便开发时本地存储使用。插件集成Bolt和badfer两个，如果确定使用其中一个，也可以把其中不用的一个删除，不删除也不会有任何影响。插件使用说明1.安装插件到busines后台的开发者工具下的代码仓找到“Go语言嵌入式键值数据库”进行安装即可2.代码说明插件安装到utils\plugin目录中，其中在app\busine
  • 数据库操作与数据管理——Rust 与 SQLite 的集成 m0_74824054 面试学习路线阿里巴巴数据库rustsqlite
    第六章：数据库操作与数据管理第一节：Rust与SQLite的集成在本节中，我们将深入探讨如何在Rust中使用SQLite数据库，涵盖从基本的CRUD操作到事务处理、数据模型的构建、性能优化以及安全性考虑等方面。SQLite是一个轻量级的关系型数据库，适合嵌入式应用和小型项目。我们将利用rusqlite库高效地与SQLite进行交互。1.使用rusqlite进行基本CRUD操作1.1rusqlite
  • 体系结构风格——《软件工程:实践者的研究方法》第八版 贰叁！ 读书笔记（软件工程）软件工程
    基于计算机系统构造的软件也展示了众多体系结构风格中的一种。每种风格描述一种系统类别，包括：（1)完成系统需要的某种功能的一组构件(例如，数据库、计算模块);（2）能使构件间实现“通信、合作和协调”的一组连接件；（3）定义构件如何集成为系统的约束；（4）语义模型，能使设计者通过分析系统组成成分的已知属性来理解系统的整体性质。体系结构风格就是施加在整个系统设计上的一种变换，目的是为系统的所有构件建立一
  • 架构的演进 阿里云云原生 Serverless技术公开课
    作者|许晓斌阿里云高级技术专家传统单体应用架构十多年前主流的应用架构都是单体应用，部署形式就是一台服务器加一个数据库，在这种架构下，运维人员会小心翼翼地维护这台服务器，以保证服务的可用性。▲单体架构单体应用架构面临的问题随着业务的增长，这种最简单的单体应用架构很快就面临两个问题。首先，这里只有一台服务器，如果这台服务器出现故障，例如硬件损坏，那么整个服务就会不可用；其次，业务量变大之后，一台服务器
  • MySQL底层是如何实现事物的四大特性的？
    MySQL如何实现事务的四大特性（ACID）MySQL的事务支持主要通过InnoDB存储引擎实现，其底层机制结合日志系统（UndoLog/RedoLog）、锁机制和多版本并发控制（MVCC），具体实现如下：1.原子性（Atomicity）定义：事务的所有操作要么全部成功，要么全部失败回滚。实现：UndoLog（回滚日志）：在事务修改数据前，UndoLog会记录数据修改前的状态（旧版本数据）。若事务
  • 数据库字段类型如何进行设计 红豆和绿豆 互联网系统设计数据库sqldatabase
    （1）针对金额可以使用varchar存储分进行设计（2）针对一个小数保留多位的情况下，可以使用varchar存储。极端兼容情况下使用decimal也可以可以的（3）数据库的的锁要和事务一起使用才会生效，锁的记录一定要使用索引，否则锁也会不生效的。（4）尽量使用数据库连接池，复用数据库的连接（5）索引的创建，可以使用联合索引唯一索引。尽量不要写复杂的sql。可以在业务上进行内存过滤。
  • Go开发框架Sponge+AI助手协同配合重塑企业级开发范式 goai开发代码生成
    在互联网高速发展的今天，企业级应用系统面临着日益复杂的业务逻辑和不断增长的开发需求。如何在保证高质量、高效率的前提下快速交付项目，成为了开发者亟需解决的问题。本文将详细介绍如何利用开源的go开发框架Sponge与AI助手协同配合全过程，需求文档→数据库设计→接口定义→服务生成→业务逻辑补全→部署验证，全面重塑企业级后端服务的开发范式。SpongeGitHub地址：https://github.co
  • 【YashanDB 知识库】单机部署报错：prohibited operation 数据库
    现象部署第1步install成功，在第2步deploy时报错。报错信息：prohibitedoperation,pleasecheckiftheIPandusernamearecorrect。原因主机配置文件（hosts.toml)里的ssh登录IP地址不是本机地址导致，为了安全考虑，崖山数据库部署时不允许远程机器操作本地部署。解决办法ssh登录IP地址换成本地IP地址和端口。
  • MVCC（多版本并发控制）底层原理 mvcc事务
    MVCC（多版本并发控制）底层原理总结：MVCC是通过维护数据的多个版本来控制并发访问的技术，它使得数据库能够支持高并发事务，同时保证事务之间的隔离性和一致性。在MySQL的InnoDB存储引擎中，MVCC是通过隐藏列、ReadView快照和undolog来实现的。1.关键概念：隐藏列（HiddenColumns）：为了支持MVCC机制，InnoDB在每一行数据中隐藏了两个额外的列，分别是DB_T
  • 分表分库 分库分表
    分表分库（Sharding）是一种常用于处理大量数据的技术手段，它的目的是通过将数据水平切分成多个小的部分来提高数据库的性能、可扩展性和可维护性。简单来说，分表分库就是将数据按某种规则分散存储在多个表或者数据库中。分表分库的背景当单一的数据库变得庞大并且承载了大量的数据时，可能会面临以下问题：性能瓶颈：随着数据量的增加，查询、插入、更新、删除等操作的性能可能会下降。扩展困难：单台数据库机器的硬件资
  • 造成内存溢出（OOM）的原因以及如何快速定位 oom
    造成内存溢出（OOM）的原因：一次性申请过多对象在应用程序中，可能会出现一次性申请过多内存的情况，特别是当涉及到大量数据查询时。例如，如果你从数据库一次性加载所有数据（例如，千万级别的数据）并将其全部存入一个列表中，这样就可能导致内存溢出。解决此问题的方式是减少一次性加载的数据量，例如使用分页查询，每次查询10个或100个数据，而不是一次性加载所有数据。内存资源未及时释放在高并发环境下，常见的内存
  • Redis 持久化机制详解 wespten 数据库存储块存储文件存储对象存储分布式网络存储redis缓存数据库
    Redis是内存数据库，数据都是存储在内存中，为了避免进程退出导致数据的永久丢失，需要定期将Redis中的数据以某种形式(数据或命令)从内存保存到硬盘；当下次Redis重启时，利用持久化文件实现数据恢复。除此之外，为了进行灾难备份，可以将持久化文件拷贝到一个远程位置。Redis持久化有2种：AOF（AppendOnlyFile）只追加日志文件；RDB(RedisDataBase)；RDB持久化和A
  • Redis持久化机制分析 码农小何 Redis原理学习与分析redis缓存数据库
    什么是持久化？简单来说持久化就是将数据保存到磁盘，让即使服务宕机、重启、断电等操作后数据仍热存在，并且是完整的。1、为什么要持久化？1、Redis是一个内存数据库，宕机之后存储在内存的数据会消失。2、Redis重启之后需要恢复数据，需要提供持久化机制用于恢复数据。Redis的持久化方式有两种：RDB方式持久化、AOF方式持久化。但值得注意的是：Redis的持久化并不能保证数据的完整性。如果使用Re
  • YashanDB反入侵 数据库
    本文内容来自YashanDB官网，原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E6%A6%82%E5%BF%B5%...在数据库层建立防火墙主要用于检测和防御外部入侵风险，可以采用如下机制：建立IP黑/白名单，白名单里的IP上所发起的登录请求才允许连接，黑名单里的IP上所发起的登录请求不允许连接。启用连接监听后，所有对YashanDB的连接信息
  • 【MySQL】我在广州学Mysql 系列——Mysql 日志管理详解 练小杰 数据库相关mysqlandroid数据库经验分享学习sqlMysql日志
    ℹ️大家好，我是练小杰，今天又是新的一周了，又该摆好心态迎接美好的明天了！！！本文主要对Mysql数据库中的日志种类以及基本命令进行讨论！！前情回顾：【MySQL数据备份与还原】数据库专栏：【数据库专栏】【Mysql练习题】主页：【练小杰的CSDN】Mysql日志主页：【[练小杰的CSDN](https://blog.csdn.net/weixin_55767624?spm=1011.2266.3
  • 我在广州学 Mysql 系列——有关 Mysql 函数的练习 练小杰 数据库相关MYSQL数据库练习题数据库mysqlandroid学习adb运维
    ℹ️大家好，我是LXJ，通过Mysql各种函数的相关学习，本文将通过一些练习来巩固Mysql的函数~~明天就冬至啦，提前大家冬至快乐！！“差不多冬至，一早一晚还是有雨”~复习：《Mysql函数的介绍和使用方式》同时，数据库相关内容查看专栏【数据库专栏】~了解更多内容请点击我的主页“【练小杰的CSDN】”文章目录前言使用数学函数`RAND()`生成3个10以内的随机整数使用`SIN()，COS()，
  • 我在广州学 Mysql 系列之 数据“库“的基本操作 练小杰 数据库相关数据库mysqlandroid
    大家好，我是练小杰，今天主要讲得是Mysql数据库的基本操作内容~~昨天讲了“mysql在window和Linux的安装和配置”~~想要了解更多️MYSQL数据库的命令行总结！！！文章目录Mysql针对库基本操作创建数据库删除数据库数据库存储引擎所有支持的存储引擎当前数据库使用的默认存储引擎特定表的存储引擎表的具体存储引擎InnoDB存储引擎查看InnoDB存储引擎的状态MyISAM存储引擎MEM
  • eclipse ssh mysql数据库_Eclipse搭建SSH环境&&实现Struts2分页显示mysql数据库表中内容... CelioHsu eclipsesshmysql数据库
    摘要因运行后404错误，遂选择集成好SSH框架的MyEclipse开发工具；最终实现了Struts2框架的分页查看学员信息，Spring3和Hibernate3的尝试宣告失败。1、本项目的环境jdk1.7.0_21；eclipse-jee-luna-R-win32-x86_64；apache-tomcat-8.0；2、创建表createtableuser_test(userIdintauto_in
  • k8s集群内的pod连接集群外部的mysql， k8s集群内部服务如何连接集群外部mysql？ 一文搞明白 终端行者 Kuberneteskubernetesmysql容器
    一、为什么不将mysql服务部署到k8s集群中使用呢？1.有状态服务在K8s中的管理比较复杂，特别是持久化存储的问题。虽然K8s有StatefulSet和PV/PVC，但配置和维护起来需要更多工作,同时以下问题仍需解决：-存储可靠性：如果使用本地存储（如hostPath），节点故障可能导致数据丢失；若用网络存储（如云盘），需确保性能和延迟满足数据库需求。-备份与恢复：需额外配置定期备份工具（如my
  • Cline + MCP Server 根据规则大型项目开发思路 红旗不倒QY AI编程
    目标根据自定义的技术栈、项目结构、代码规范等，通过给予需求可以自动（或逐步自动）完成数据库建表、后端实体、后端数据访问层、后端服务层、后端接口、后端Web接口、后端单元测试、前端实体、前端Api接口、前端路由、前端页面等一系列开发工作。工具介绍ClineCline是一个开源的AI助手插件，深度集成在VSCode中，为开发者提供了完整的代码编辑体验。它支持多种API提供商和模型，开发者可以自由选择调
  • Mysql调优---Mysql锁机制（油炸圣女果的学习日记第七期） 油炸圣女果 mysql学习数据库
    本期来介绍一下Mysql中的锁机制。首先，分享一个今天抖音刷到的一个视频，很有意思且对上一期和这期的知识理解很有帮助，非常形象的体现了事务隔离级别在工作中出现的问题案例：6.41复制打开抖音，看看【孟小哥捉虫vlog的作品】想不通为啥有bug，骨干：你投下代码！#程序员...https://v.douyin.com/i5dpJhs6/[email protected]/25aNW:/锁机制详解锁是计算机协调多个进程
  • MySQL 8 公用表表达式（CTE）—— WITH关键字深入用法 gmHappy 大数据学习javawebJavamysql数据库with递归
    一、前言公用表表达式（CTE）是一个命名的临时结果集，它存在于单个语句的范围内，可以在该语句中引用，可能多次。对于逻辑复杂的SQL，可以大大减少临时表的数量，提升代码的可读性、可维护性。更多介绍请查看官网：https://dev.mysql.com/blog-archive/mysql-8-0-labs-recursive-common-table-expressions-in-mysql-cte
  • SQL注入天书 - ASP注入漏洞全接触 HappyQQ 黑客技术aspsqlsqlservervbscript数据库iis
    SQL注入天书-ASP注入漏洞全接触作者:NB联盟－小竹(QQ:48814)引言随着B/S模式应用开发的发展，使用这种模式编写应用程序的程序员也越来越多。但是由于这个行业的入门门槛不高，程序员的水平及经验也参差不齐，相当大一部分程序员在编写代码的时候，没有对用户输入数据的合法性进行判断，使应用程序存在安全隐患。用户可以提交一段数据库查询代码，根据程序返回的结果，获得某些他想得知的数据，这就是所谓的
  • AI助力小微企业技术开发规范化管理 | 杂谈 黎智程 人工智能
    AI助力小微企业技术开发规范化管理在小型技术研发企业中，人员配置紧张，往往一名员工需要承担多项职务和任务。例如，后端程序开发人员可能同时要负责需求调研、数据库设计、后端设计及开发，甚至在某些情况下还需兼任架构师的角色。这种多任务叠加的现象导致开发工作和代码结构变得非常混乱。为了缩减开支，员工在承担繁重开发任务的同时，还需追赶时间进度，形成了一种恶性循环。这种状况使得小微企业的技术开发结构及项目管理
  • 怎么提升自定义知识库的质量（向量知识库） CCSBRIDGE 人工智能人工智能
    上传文档后，CherryStudio或者AnythingLLM会将内容转换为向量数据库（VectorDatabase），然后用于检索增强生成（RAG，Retrieval-AugmentedGeneration）。这样，LLM在回答问题时，可以从这些文档中检索相关内容，从而提高回答的准确性和信息量。1.影响检索效果的关键因素为了让LLM更准确、更高效地使用你的文档，这些因素很重要：✅适合的文档格式虽
  • MySQL常见面试题汇总（建议收藏！！！） geejkse_seff 面试学习路线阿里巴巴android前端后端
    目录一、索引相关（1）什么是索引?（2）索引是个什么样的数据结构呢?（3）为什么使用索引？（4）Innodb为什么要用自增id作为主键？（5）Hash索引和B+树索引有什么区别或者说优劣呢?（6）什么是聚簇索引（7）说一说索引的底层实现？（8）索引有哪些优缺点？（9）聚簇索引和非聚簇索引的区别（10）MyISAM和InnoDB实现B+树索引方式的区别是什么？（11）MySQL中有几种索引类型，可以
  • MySQL 主从集群同步延迟问题分析与解决方案 豪宇刘 mysqlsql
    MySQL主从复制（Replication）是构建高可用架构的核心技术，但在实际应用中，主从同步延迟（ReplicationLag）是常见且棘手的问题。延迟会导致从库数据不一致、读请求返回旧数据，甚至引发业务逻辑错误。本文将深入分析延迟原因并提供系统性解决方案，助你彻底优化主从同步性能。一、主从同步延迟的本质主从同步延迟是指从库（Slave）的数据落后于主库（Master）的时间差，通常由以下环节
  • Python爬虫系列教程之第十五篇：爬取电商网站商品信息与数据分析 放氮气的蜗牛 深度博客python爬虫数据分析
    大家好，欢迎继续关注本系列爬虫教程！在前面的文章中，我们已经学习了如何构建爬虫、如何应对反爬机制以及如何将数据存储到数据库或文件中。随着业务场景的不断扩展，电商网站的数据采集和分析已成为实际项目中非常重要的一环。本篇博客我们将以电商网站中的图书信息为例（使用BookstoScrape这一专门用于爬虫练习的网站），详细介绍如何从网站中爬取商品信息，并利用数据清洗和数据分析技术对采集到的数据进行进一步
  • java实现表的变更记录 sighting_info java数据库开发语言
    1基本思路数据库中某张表新增、修改、删除时，数据发生了变更，我们需要实现通用的变更记录，与业务代码解耦基于注解+SpEL表达式，实现采集变更前后的数据学习后，你将解锁SpEL表达式的使用2具体实现2.1定义注解@Retention(RetentionPolicy.RUNTIME)@Target(ElementType.FIELD)public@interfaceLogField{/***字段展示名
  • [星球大战]阿纳金的背叛 comsci
          本来杰迪圣殿的长老是不同意让阿纳金接受训练的.........     但是由于政治原因,长老会妥协了...这给邪恶的力量带来了机会     所以......现代的地球联邦接受了这个教训...绝对不让某些年轻人进入学院    
  • 看懂它，你就可以任性的玩耍了！ aijuans JavaScript
              javascript作为前端开发的标配技能，如果不掌握好它的三大特点：1.原型 2.作用域 3. 闭包 ,又怎么可以说你学好了这门语言呢？如果标配的技能都没有撑握好，怎么可以任性的玩耍呢？怎么验证自己学好了以上三个基本点呢，我找到一段不错的代码，稍加改动，如果能够读懂它，那么你就可以任性了。 function jClass(b
  • Java常用工具包 Jodd Kai_Ge javajodd
    Jodd 是一个开源的 Java 工具集， 包含一些实用的工具类和小型框架。简单，却很强大！ 写道 Jodd = Tools + IoC + MVC + DB + AOP + TX + JSON + HTML < 1.5 Mb Jodd 被分成众多模块，按需选择，其中 工具类模块有： jodd-core    &nb
  • SpringMvc下载 120153216 springMVC
    @RequestMapping(value = WebUrlConstant.DOWNLOAD) public void download(HttpServletRequest request,HttpServletResponse response,String fileName) { OutputStream os = null; InputStream is = null;
  • Python 标准异常总结 2002wmj python
    Python标准异常总结 AssertionError 断言语句（assert）失败 AttributeError 尝试访问未知的对象属性 EOFError 用户输入文件末尾标志EOF（Ctrl+d） FloatingPointError 浮点计算错误 GeneratorExit generator.close()方法被调用的时候 ImportError 导入模块失
  • SQL函数返回临时表结构的数据用于查询 357029540 SQL Server
    这两天在做一个查询的SQL，这个SQL的一个条件是通过游标实现另外两张表查询出一个多条数据，这些数据都是INT类型，然后用IN条件进行查询，并且查询这两张表需要通过外部传入参数才能查询出所需数据，于是想到了用SQL函数返回值，并且也这样做了，由于是返回多条数据，所以把查询出来的INT类型值都拼接为了字符串，这时就遇到问题了，在查询SQL中因为条件是INT值，SQL函数的CAST和CONVERST都
  • java 时间格式化 | 比较大小| 时区 个人笔记 7454103 javaeclipsetomcatcMyEclipse
    个人总结！ 不当之处多多包含！ 引用 1.0 如何设置 tomcat 的时区：          位置：(catalina.bat---JAVA_OPTS  下面加上)          set JAVA_OPT
  • 时间获取Clander的用法 adminjun Clander时间
    /**    * 得到几天前的时间    * @param d    * @param day    * @return    */   public static Date getDateBefore(Date d,int day){    Calend
  • JVM初探与设置 aijuans java
    JVM是Java Virtual Machine（Java虚拟机）的缩写，JVM是一种用于计算设备的规范，它是一个虚构出来的计算机，是通过在实际的计算机上仿真模拟各种计算机功能来实现的。Java虚拟机包括一套字节码指令集、一组寄存器、一个栈、一个垃圾回收堆和一个存储方法域。 JVM屏蔽了与具体操作系统平台相关的信息，使Java程序只需生成在Java虚拟机上运行的目标代码（字节码）,就可以在多种平台
  • SQL中ON和WHERE的区别 avords
    SQL中ON和WHERE的区别   数据库在通过连接两张或多张表来返回记录时，都会生成一张中间的临时表，然后再将这张临时表返回给用户。   www.2cto.com   在使用left jion时，on和where条件的区别如下：  1、 on条件是在生成临时表时使用的条件，它不管on中的条件是否为真，都会返回左边表中的记录。 
  • 说说自信 houxinyou 工作生活
    自信的来源分为两种,一种是源于实力,一种源于头脑.实力是一个综合的评定,有自身的能力,能利用的资源等.比如我想去月亮上,要身体素质过硬,还要有飞船等等一系列的东西.这些都属于实力的一部分.而头脑不同,只要你头脑够简单就可以了!同样要上月亮上,你想,我一跳,1米,我多跳几下,跳个几年,应该就到了!什么?你说我会往下掉?你笨呀你!找个东西踩一下不就行了吗?     无论工作还
  • WEBLOGIC事务超时设置 bijian1013 weblogicjta事务超时
            系统中统计数据，由于调用统计过程，执行时间超过了weblogic设置的时间，提示如下错误： 统计数据出错! 原因：The transaction is no longer active - status: 'Rolling Back. [Reason=weblogic.transaction.internal
  • 两年已过去，再看该如何快速融入新团队 bingyingao java互联网融入架构新团队
    偶得的空闲，翻到了两年前的帖子 该如何快速融入一个新团队，有所感触，就记下来，为下一个两年后的今天做参考。     时隔两年半之后的今天，再来看当初的这个博客，别有一番滋味。而我已经于今年三月份离开了当初所在的团队，加入另外的一个项目组，2011年的这篇博客之后的时光，我很好的融入了那个团队，而直到现在和同事们关系都特别好。大家在短短一年半的时间离一起经历了一
  • 【Spark七十七】Spark分析Nginx和Apache的access.log bit1129 apache
    Spark分析Nginx和Apache的access.log，第一个问题是要对Nginx和Apache的access.log文件进行按行解析，按行解析就的方法是正则表达式：   Nginx的access.log解析正则表达式   val PATTERN = """([^ ]*) ([^ ]*) ([^ ]*) (\\[.*\\]) (\&q
  • Erlang patch bookjovi erlang
    Totally five patchs committed to erlang otp, just small patchs. IMO, erlang really is a interesting programming language, I really like its concurrency feature. but the functional programming style
  • log4j日志路径中加入日期 bro_feng javalog4j
    要用log4j使用记录日志，日志路径有每日的日期，文件大小5M新增文件。 实现方式 log4j: <appender name="serviceLog" class="org.apache.log4j.RollingFileAppender"> <param name="Encoding" v
  • 读《研磨设计模式》-代码笔记-桥接模式 bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ /** * 个人觉得关于桥接模式的例子，蜡笔和毛笔这个例子是最贴切的：http://www.cnblogs.com/zhenyulu/articles/67016.html * 笔和颜色是可分离的，蜡笔把两者耦合在一起了：一支蜡笔只有一种
  • windows7下SVN和Eclipse插件安装 chenyu19891124 eclipse插件
    今天花了一天时间弄SVN和Eclipse插件的安装，今天弄好了。svn插件和Eclipse整合有两种方式，一种是直接下载插件包，二种是通过Eclipse在线更新。由于之前Eclipse版本和svn插件版本有差别，始终是没装上。最后在网上找到了适合的版本。所用的环境系统：windows7JDK：1.7svn插件包版本：1.8.16Eclipse：3.7.2工具下载地址：Eclipse下在地址：htt
  • [转帖]工作流引擎设计思路 comsci 设计模式工作应用服务器workflow企业应用
    作为国内的同行，我非常希望在流程设计方面和大家交流，刚发现篇好文(那么好的文章，现在才发现，可惜)，关于流程设计的一些原理，个人觉得本文站得高，看得远，比俺的文章有深度，转载如下 ================================================================================= 自开博以来不断有朋友来探讨工作流引擎该如何
  • Linux 查看内存，CPU及硬盘大小的方法 daizj linuxcpu内存硬盘大小
    一、查看CPU信息的命令 [root@R4 ~]# cat /proc/cpuinfo |grep "model name" && cat /proc/cpuinfo |grep "physical id" model name : Intel(R) Xeon(R) CPU X5450 @ 3.00GHz model name :
  • linux 踢出在线用户 dongwei_6688 linux
    两个步骤： 1.用w命令找到要踢出的用户，比如下面：   [root@localhost ~]# w 18:16:55 up 39 days, 8:27, 3 users, load average: 0.03, 0.03, 0.00 USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT
  • 放手吧,就像不曾拥有过一样 dcj3sjt126com
    内容提要： 静悠悠编著的《放手吧就像不曾拥有过一样》集结“全球华语世界最舒缓心灵”的精华故事，触碰生命最深层次的感动，献给全世界亿万读者。《放手吧就像不曾拥有过一样》的作者衷心地祝愿每一位读者都给自己一个重新出发的理由，将那些令你痛苦的、扛起的、背负的，一并都放下吧！把憔悴的面容换做一种清淡的微笑，把沉重的步伐调节成春天五线谱上的音符，让自己踏着轻快的节奏，在人生的海面上悠然漂荡，享受宁静与
  • php二进制安全的含义 dcj3sjt126com PHP
    PHP里，有string的概念。 string里，每个字符的大小为byte（与PHP相比，Java的每个字符为Character，是UTF8字符，C语言的每个字符可以在编译时选择）。 byte里，有ASCII代码的字符，例如ABC，123，abc，也有一些特殊字符，例如回车，退格之类的。 特殊字符很多是不能显示的。或者说，他们的显示方式没有标准，例如编码65到哪儿都是字母A，编码97到哪儿都是字符
  • Linux下禁用T440s，X240的一体化触摸板(touchpad) gashero linuxThinkPad触摸板
    自打1月买了Thinkpad T440s就一直很火大，其中最让人恼火的莫过于触摸板。   Thinkpad的经典就包括用了小红点(TrackPoint)。但是小红点只能定位，还是需要鼠标的左右键的。但是自打T440s等开始启用了一体化触摸板，不再有实体的按键了。问题是要是好用也行。   实际使用中，触摸板一堆问题，比如定位有抖动，以及按键时会有飘逸。这就导致了单击经常就
  • graph_dfs hcx2013 Graph
    package edu.xidian.graph; class MyStack { private final int SIZE = 20; private int[] st; private int top; public MyStack() { st = new int[SIZE]; top = -1; } public void push(i
  • Spring4.1新特性——Spring核心部分及其他 jinnianshilongnian spring 4.1
    目录 Spring4.1新特性——综述 Spring4.1新特性——Spring核心部分及其他 Spring4.1新特性——Spring缓存框架增强 Spring4.1新特性——异步调用和事件机制的异常处理 Spring4.1新特性——数据库集成测试脚本初始化 Spring4.1新特性——Spring MVC增强 Spring4.1新特性——页面自动化测试框架Spring MVC T
  • 配置HiveServer2的安全策略之自定义用户名密码验证 liyonghui160com
        具体从网上看   http://doc.mapr.com/display/MapR/Using+HiveServer2#UsingHiveServer2-ConfiguringCustomAuthentication   LDAP Authentication using OpenLDAP Setting
  • 一位30多的程序员生涯经验总结 pda158 编程工作生活咨询
    1.客户在接触到产品之后，才会真正明白自己的需求。 　　这是我在我的第一份工作上面学来的。只有当我们给客户展示产品的时候，他们才会意识到哪些是必须的。给出一个功能性原型设计远远比一张长长的文字表格要好。 2.只要有充足的时间，所有安全防御系统都将失败。 　　安全防御现如今是全世界都在关注的大课题、大挑战。我们必须时时刻刻积极完善它，因为黑客只要有一次成功，就可以彻底打败你。   3.
  • 分布式web服务架构的演变 自由的奴隶 linuxWeb应用服务器互联网
    最开始，由于某些想法，于是在互联网上搭建了一个网站，这个时候甚至有可能主机都是租借的，但由于这篇文章我们只关注架构的演变历程，因此就假设这个时候已经是托管了一台主机，并且有一定的带宽了，这个时候由于网站具备了一定的特色，吸引了部分人访问，逐渐你发现系统的压力越来越高，响应速度越来越慢，而这个时候比较明显的是数据库和应用互相影响，应用出问题了，数据库也很容易出现问题，而数据库出问题的时候，应用也容易
  • 初探Druid连接池之二——慢SQL日志记录 xingsan_zhang 日志连接池druid慢SQL
    由于工作原因，这里先不说连接数据库部分的配置，后面会补上，直接进入慢SQL日志记录。   1.applicationContext.xml中增加如下配置： <bean abstract="true" id="mysql_database" class="com.alibaba.druid.pool.DruidDataSourc
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他