Spark写入数据到MySQL解析(未完成)

DF.write.mode("append").jdbc(url, tableName, prop)

首先调用Dataset中的write方法,在write方法中创建DataFrameWriter对象;

Spark写入数据到MySQL解析(未完成)_第1张图片

在DataFrameWriter中,调用mode方法,将设置的mode值保存在类成员变量中;

Spark写入数据到MySQL解析(未完成)_第2张图片

调用jdbc方法,在jdbc方法中,调用format;

Spark写入数据到MySQL解析(未完成)_第3张图片

把成员变量source设置为jdbc;

然后调用save方法,在save方法中,调用DataSource中的lookupDataSource方法;

Spark写入数据到MySQL解析(未完成)_第4张图片

根据传进来的source="jdbc",去backwardCompatibilityMap中查找对应的值

Spark写入数据到MySQL解析(未完成)_第5张图片

Spark写入数据到MySQL解析(未完成)_第6张图片

此时从map中未找到对应的值,将原来的值返回,provider1=jdbc,provider2=jdbc.DefaultSource,去加载这个类;

Spark写入数据到MySQL解析(未完成)_第7张图片

你可能感兴趣的:(大数据)