SparkSession写入mysql出现的数据库死锁问题?

最近工作中模型出现的死锁问题 azkaban spark任务报错信息 代码: 代码上看都是正常的DataFrame写入mysql操作,并且是update操作 来看看数据库结构: 这次看到,数据库时由联合主键构成的,查看了源数据,发现hive中数据又很多是相同的数据。 此前:做了一个小测试,将所有的联合主键取消掉,这个表没有的主键,因此写操作是insert操作了,执行spark任务后,没有出现这种操
相关文章
相关标签/搜索