原子操作是不可分割的,在执行完毕之前不会被任何其它任务或事件中断。 在单处理器系统(UniProcessor)中,能够在单条指令中完成的操作都可以认为是" 原子操作",因为中断只能发生于指令之间。
在JDK 5之前Java语言是靠synchronized关键字保证同步的,这会导致有锁
锁机制存在以下问题:
(1)在多线程竞争下,加锁、释放锁会导致比较多的上下文切换和调度延时,引起性能问题。
(2)一个线程持有锁会导致其它所有需要此锁的线程挂起。
(3)如果一个优先级高的线程等待一个优先级低的线程释放锁会导致优先级倒置,引起性能风险。
volatile是不错的机制,但是volatile不能保证原子性。因此对于同步最终还是要回到锁机制上来。
独占锁是一种悲观锁,synchronized就是一种独占锁,会导致其它所有需要锁的线程挂起,等待持有锁的线程释放锁。而另一个更加有效的锁就是乐观锁。所谓乐观锁就是,每次不加锁而是假设没有冲突而去完成某项操作,如果因为冲突失败就重试,直到成功为止。乐观锁用到的机制就是CAS,Compare and Swap。
CAS,compare and swap的缩写,中文翻译成比较并交换。
我们都知道,在java语言之前,并发就已经广泛存在并在服务器领域得到了大量的应用。所以硬件厂商老早就在芯片中加入了大量直至并发操作的原语,从而在硬件层面提升效率。在intel的CPU中,使用cmpxchg指令。
在Java发展初期,java语言是不能够利用硬件提供的这些便利来提升系统的性能的。而随着java不断的发展,Java本地方法(JNI)的出现,使得java程序越过JVM直接调用本地方法提供了一种便捷的方式,因而java在并发的手段上也多了起来。而在Doug Lea提供的cucurenct包中,CAS理论是它实现整个java包的基石。
CAS 操作包含三个操作数 —— 内存位置(V)、预期原值(A)和新值(B)。 如果内存位置的值与预期原值相匹配,那么处理器会自动将该位置值更新为新值 。否则,处理器不做任何操作。无论哪种情况,它都会在 CAS 指令之前返回该 位置的值。(在 CAS 的一些特殊情况下将仅返回 CAS 是否成功,而不提取当前 值。)CAS 有效地说明了“我认为位置 V 应该包含值 A;如果包含该值,则将 B 放到这个位置;否则,不要更改该位置,只告诉我这个位置现在的值即可。”
通常将 CAS 用于同步的方式是从地址 V 读取值 A,执行多步计算来获得新 值 B,然后使用 CAS 将 V 的值从 A 改为 B。如果 V 处的值尚未同时更改,则 CAS 操作成功。
类似于 CAS 的指令允许算法执行读-修改-写操作,而无需害怕其他线程同时 修改变量,因为如果其他线程修改变量,那么 CAS 会检测它(并失败),算法 可以对该操作重新计算。
利用CPU的CAS指令,同时借助JNI来完成Java的非阻塞算法。其它原子操作都是利用类似的特性完成的。而整个J.U.C都是建立在CAS之上的,因此对于synchronized阻塞算法,J.U.C在性能上有了很大的提升。
CAS虽然很高效的解决原子操作,但是CAS仍然存在三大问题。ABA问题,循环时间长开销大和只能保证一个共享变量的原子操作
从Java1.5开始JDK的atomic包里提供了一个类AtomicStampedReference来解决ABA问题。这个类的compareAndSet方法作用是首先检查当前引用是否等于预期引用,并且当前标志是否等于预期标志,如果全部相等,则以原子方式将该引用和该标志的值设置为给定的更新值。
关于ABA问题参考文档: http://blog.hesey.net/2011/09/resolve-aba-by-atomicstampedreference.html
循环时间长开销大。自旋CAS如果长时间不成功,会给CPU带来非常大的执行开销。如果JVM能支持处理器提供的pause指令那么效率会有一定的提升,pause指令有两个作用,第一它可以延迟流水线执行指令(de-pipeline),使CPU不会消耗过多的执行资源,延迟的时间取决于具体实现的版本,在一些处理器上延迟时间是零。第二它可以避免在退出循环的时候因内存顺序冲突(memory order violation)而引起CPU流水线被清空(CPU pipeline flush),从而提高CPU的执行效率。
只能保证一个共享变量的原子操作。当对一个共享变量执行操作时,我们可以使用循环CAS的方式来保证原子操作,但是对多个共享变量操作时,循环CAS就无法保证操作的原子性,这个时候就可以用锁,或者有一个取巧的办法,就是把多个共享变量合并成一个共享变量来操作。比如有两个共享变量i=2,j=a,合并一下ij=2a,然后用CAS来操作ij。从Java1.5开始JDK提供了AtomicReference类来保证引用对象之间的原子性,你可以把多个变量放在一个对象里来进行CAS操作。
由于java的CAS同时具有 volatile 读和volatile写的内存语义,因此Java线程之间的通信现在有了下面四种方式:
A线程写volatile变量,随后B线程读这个volatile变量。
A线程写volatile变量,随后B线程用CAS更新这个volatile变量。
A线程用CAS更新一个volatile变量,随后B线程用CAS更新这个volatile变量。
A线程用CAS更新一个volatile变量,随后B线程读这个volatile变量。
Java的CAS会使用现代处理器上提供的高效机器级别原子指令,这些原子指令以原子方式对内存执行读-改-写操作,这是在多处理器中实现同步的关键(从本质上来说,能够支持原子性读-改-写指令的计算机器,是顺序计算图灵机的异步等价机器,因此任何现代的多处理器都会去支持某种能对内存执行原子性读-改-写操作的原子指令)。同时,volatile变量的读/写和CAS可以实现线程之间的通信。把这些特性整合在一起,就形成了整个concurrent包得以实现的基石。如果我们仔细分析concurrent包的源代码实现,会发现一个通用化的实现模式:
首先,声明共享变量为volatile;
然后,使用CAS的原子条件更新来实现线程之间的同步;
同时,配合以volatile的读/写和CAS所具有的volatile读和写的内存语义来实现线程之间的通信。
AQS,非阻塞数据结构和原子变量类(java.util.concurrent.atomic包中的类),这些concurrent包中的基础类都是使用这种模式来实现的,而concurrent包中的高层类又是依赖于这些基础类来实现的。从整体来看,concurrent包的实现示意图如下
通过查看AtomicInteger的源码可知,
private volatile int value;
public final boolean compareAndSet(int expect, int update) {
return unsafe.compareAndSwapInt(this, valueOffset, expect, update);
}
通过申明一个volatile (内存锁定,同一时刻只有一个线程可以修改内存值)类型的变量,再加上unsafe.compareAndSwapInt的方法,来保证实现线程同步的。
CAS指令在Intel CPU上称为CMPXCHG指令,它的作用是将指定内存地址的内容与所给的某个值相比,如果相等,则将其内容替换为指令中提供的新值,如果不相等,则更新失败。这一比较并交换的操作是原子的,不可以被中断。初一看,CAS也包含了读取、比较 (这也是种操作)和写入这三个操作,和之前的i++并没有太大区别,是的,的确在操作上没有区别,但CAS是通过硬件命令保证了原子性,而i++没有,且硬件级别的原子性比i++这样高级语言的软件级别的运行速度要快地多。虽然CAS也包含了多个操作,但其的运算是固定的(就是个比较),这样的锁定性能开销很小。
从内存领域来说这是乐观锁,因为它在对共享变量更新之前会先比较当前值是否与更新前的值一致,如果是,则更新,如果不是,则无限循环执行(称为自旋),直到当前值与更新前的值一致为止,才执行更新。
简单的来说,CAS有3个操作数,内存值V,旧的预期值A,要修改的新值B。当且仅当预期值A和内存值V相同时,将内存值V修改为B,否则返回V。这是一种乐观锁的思路,它相信在它修改之前,没有其它线程去修改它;而Synchronized是一种悲观锁,它认为在它修改之前,一定会有其它线程去修改它,悲观锁效率很低。下面来看一下AtomicInteger是如何利用CAS实现原子性操作的。
// volatile变量
private volatile int value;
//首先声明了一个volatile变量value,我们知道volatile保证了变量的内存可见性,
//也就是所有工作线程中同一时刻都可以得到一致的值。
public final int get() {
return value;
}
//Compare And Set
// setup to use Unsafe.compareAndSwapInt for updates
private static final Unsafe unsafe = Unsafe.getUnsafe();
private static final long valueOffset;// 注意是静态的
static {
try {
valueOffset = unsafe.objectFieldOffset
(AtomicInteger.class.getDeclaredField("value"));
// 反射出value属性,获取其在内存中的位置
} catch (Exception ex) { throw new Error(ex); }
}
public final boolean compareAndSet(int expect, int update) {
return unsafe.compareAndSwapInt(this, valueOffset, expect, update);
}
比较并设置,这里利用Unsafe类的JNI方法实现,使用CAS指令,可以保证读-改-写是一个原子操作。compareAndSwapInt有4个参数,this - 当前AtomicInteger对象,Offset - value属性在内存中的位置(需要强调的是不是value值在内存中的位置),expect - 预期值,update - 新值,根据上面的CAS操作过程,当内存中的value值等于expect值时,则将内存中的value值更新为update值,并返回true,否则返回false。在这里我们有必要对Unsafe有一个简单点的认识,从名字上来看,不安全,确实,这个类是用于执行低级别的、不安全操作的方法集合,这个类中的方法大部分是对内存的直接操作,所以不安全,但当我们使用反射、并发包时,都间接的用到了Unsafe。
所谓生产者消费者模式,即N个线程进行生产,同时N个线程进行消费,两种角色通过内存缓冲区进行通信
下面我们通过四种方式,来实现生产者消费者模式。
定义库存类(即图中缓存区)
class Stock {
private String name;
// 标记库存是否有内容
private boolean hasComputer = false;
public synchronized void putOne(String name) {
// 若库存中已有内容,则生产线程阻塞等待
while (hasComputer) {
try {
this.wait();
} catch (InterruptedException e) {
e.printStackTrace();
}
}
this.name = name;
System.out.println("生产者...生产了 " + name);
// 更新标记
this.hasComputer = true;
// 这里用notify的话,假设p0执行完毕,此时c0,c1都在wait, 同时唤醒另一个provider:p1,
// p1判断标记后休眠,造成所有线程都wait的局面,即死锁;
// 因此使用notifyAll解决死锁问题
this.notifyAll();
}
public synchronized void takeOne() {
// 若库存中没有内容,则消费线程阻塞等待生产完毕后继续
while (!hasComputer) {
try {
this.wait();
} catch (InterruptedException e) {
e.printStackTrace();
}
}
System.out.println("消费者...消费了 " + name);
this.hasComputer = false;
this.notifyAll();
}
}
定义生产者和消费者(为了节省空间和方便阅读,这里将生产者和消费者定义成了匿名内部类)
public static void main(String[] args) {
// 用于通信的库存类
Stock computer = new Stock();
// 定义两个生产者和两个消费者
Thread p1 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.putOne("Dell");
}
}
});
Thread p2 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.putOne("Mac");
}
}
});
Thread c1 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.takeOne();
}
}
});
Thread c2 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.takeOne();
}
}
});
p1.start();
p2.start();
c1.start();
c2.start();
}
Jdk1.5之后加入了Lock接口,一个lock对象可以有多个Condition类,Condition类负责对lock对象进行wait,notify,notifyall操作
class LockStock {
final Lock lock = new ReentrantLock();
final Condition notFull = lock.newCondition();
final Condition notEmpty = lock.newCondition();
// 加入库存概念,可批量生产和消费
// 定义最大库存为10
final String[] stock = new String[10];
// 写入标记、读取标记、已有商品数量
int putptr, takeptr, count;
public void put(String computer) {
// lock代替synchronized
lock.lock();
try {
// 若库存已满则生产者线程阻塞
while (count == stock.length)
notFull.await();
// 库存中加入商品
stock[putptr] = computer;
// 库存已满,指针置零,方便下次重新写入
if (++putptr == stock.length) putptr = 0;
++count;
System.out.println(computer + " 正在生产数据: -- 库存剩余:" + count);
notEmpty.signal();
} catch (InterruptedException e) {
e.printStackTrace();
} finally {
lock.unlock();
}
try {
Thread.sleep(1000);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
public String take(String consumerName) {
lock.lock();
try {
while (count == 0)
notEmpty.await();
// 从库存中获取商品
String computer = stock[takeptr];
if (++takeptr == stock.length) takeptr = 0;
--count;
System.out.println(consumerName + " 正在消费数据:" + computer + " -- 库存剩余:" + count);
notFull.signal();
return computer;
} catch (InterruptedException e) {
e.printStackTrace();
} finally {
lock.unlock();
}
// 无逻辑作用,放慢速度
try {
Thread.sleep(1000);
} catch (InterruptedException e) {
e.printStackTrace();
}
return "";
}
}
以上部分代码摘自java7 API中Condition接口的官方示例
接着还是定义生产者和消费者
public static void main(String[] args) {
LockStock computer = new LockStock();
Thread p1 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.put("Dell");
}
}
});
Thread p2 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.put("Mac");
}
}
});
Thread c1 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.take("zhangsan");
}
}
});
Thread c2 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
computer.take("李四");
}
}
});
// 两个生产者两个消费者同时运行
p1.start();
p2.start();
c1.start();
c2.start();
}
首先依旧是库存类:
class Stock {
List<String> stock = new LinkedList();
// 互斥量,控制共享数据的互斥访问
private Semaphore mutex = new Semaphore(1);
// canProduceCount可以生产的总数量。 通过生产者调用acquire,减少permit数目
private Semaphore canProduceCount = new Semaphore(10);
// canConsumerCount可以消费的数量。通过生产者调用release,增加permit数目
private Semaphore canConsumerCount = new Semaphore(0);
public void put(String computer) {
try {
// 可生产数量 -1
canProduceCount.acquire();
mutex.acquire();
// 生产一台电脑
stock.add(computer);
System.out.println(computer + " 正在生产数据" + " -- 库存剩余:" + stock.size());
} catch (InterruptedException e) {
e.printStackTrace();
} finally {
// 释放互斥锁
mutex.release();
// 释放canConsumerCount,增加可以消费的数量
canConsumerCount.release();
}
// 无逻辑作用,放慢速度
try {
Thread.sleep(500);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
public void get(String consumerName) {
try {
// 可消费数量 -1
canConsumerCount.acquire();
mutex.acquire();
// 从库存消费一台电脑
String removedVal = stock.remove(0);
System.out.println(consumerName + " 正在消费数据:" + removedVal + " -- 库存剩余:" + stock.size());
} catch (InterruptedException e) {
e.printStackTrace();
} finally {
mutex.release();
// 消费后释放canProduceCount,增加可以生产的数量
canProduceCount.release();
}
}
}
还是生产消费者:
public class SemaphoreTest {
public static void main(String[] args) {
// 用于多线程操作的库存变量
final Stock stock = new Stock();
// 定义两个生产者和两个消费者
Thread dellProducer = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
stock.put("Del");
}
}
});
Thread macProducer = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
stock.put("Mac");
}
}
});
Thread consumer1 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
stock.get("zhangsan");
}
}
});
Thread consumer2 = new Thread(new Runnable() {
@Override
public void run() {
while (true) {
stock.get("李四");
}
}
});
dellProducer.start();
macProducer.start();
consumer1.start();
consumer2.start();
}
}
BlockingQueue的put和take底层实现其实也是使用了第二种方式中的ReentrantLock+Condition,并且帮我们实现了库存队列,方便简洁
1、定义生产者
class Producer implements Runnable {
// 库存队列
private BlockingQueue<String> stock;
// 生产/消费延迟
private int timeOut;
private String name;
public Producer(BlockingQueue<String> stock, int timeout, String name) {
this.stock = stock;
this.timeOut = timeout;
this.name = name;
}
@Override
public void run() {
while (true) {
try {
stock.put(name);
System.out.println(name + " 正在生产数据" + " -- 库存剩余:" + stock.size());
TimeUnit.MILLISECONDS.sleep(timeOut);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
}
2、定义消费者
class Consumer implements Runnable {
// 库存队列
private BlockingQueue<String> stock;
private String consumerName;
public Consumer(BlockingQueue<String> stock, String name) {
this.stock = stock;
this.consumerName = name;
}
@Override
public void run() {
while (true) {
try {
// 从库存消费一台电脑
String takeName = stock.take();
System.out.println(consumerName + " 正在消费数据:" + takeName + " -- 库存剩余:" + stock.size());
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
}
3、定义库存并运行
public static void main(String[] args) {
// 定义最大库存为10
BlockingQueue<String> stock = new ArrayBlockingQueue<>(10);
Thread p1 = new Thread(new Producer(stock, 500, "Mac"));
Thread p2 = new Thread(new Producer(stock, 500, "Dell"));
Thread c1 = new Thread(new Consumer(stock,"zhangsan"));
Thread c2 = new Thread(new Consumer(stock, "李四"));
p1.start();
p2.start();
c1.start();
c2.start();
}