Apache spark 这是什么意思；AssertionError:断言失败：不安全符号不稳定“；？
我正在使用spark-sql-2.4.1版本和Java8 我有Apache spark 这是什么意思；AssertionError:断言失败：不安全符号不稳定“；？,apache-spark,apache-spark-sql,spark-streaming,Apache Spark,Apache Spark Sql,Spark Streaming,我正在使用spark-sql-2.4.1版本和Java8 我有raw_df列“events”，这是长数据类型中的时间戳。 我正在尝试将其转换回时间戳，如下所示： Dataset-modified\u-df=raw\u-df .withColumn（“eventTimeStamp”），（col（“eventTs”）.divide（1000））.cast（DataTypes.timestampe）） 当使用（col（“events”）.divide（1000））.cast（DataTypes.Ti
raw_dfDataset-modified\u-df=raw\u-df
.withColumn（“eventTimeStamp”），（col（“eventTs”）.divide（1000））.cast（DataTypes.timestampe））
（col（“events”）.divide（1000））.cast（DataTypes.TimestampType）（col（“events”）.divide（lit（1000））.cast（DataTypes.TimestampType）java.lang.AssertionError: assertion failed: unsafe symbol Unstable (child of package InterfaceStability) in runtime reflection universe
at scala.reflect.internal.Symbols$Symbol.<init>(Symbols.scala:184)
at scala.reflect.internal.Symbols$TypeSymbol.<init>(Symbols.scala:3009)
at scala.reflect.internal.Symbols$ClassSymbol.<init>(Symbols.scala:3201)
at scala.reflect.internal.Symbols$StubClassSymbol.<init>(Symbols.scala:3496)
at scala.reflect.internal.Symbols$Symbol.newStubSymbol(Symbols.scala:498)
at scala.reflect.internal.pickling.UnPickler$Scan.readExtSymbol$1(UnPickler.scala:258)
at scala.reflect.internal.pickling.UnPickler$Scan.readSymbol(UnPickler.scala:284)
at scala.reflect.internal.pickling.UnPickler$Scan.readSymbolRef(UnPickler.scala:649)
at scala.reflect.internal.pickling.UnPickler$Scan.readType(UnPickler.scala:417)
at scala.reflect.internal.pickling.UnPickler$Scan$$anonfun$readTypeRef$1.apply(UnPickler.scala:658)
at scala.reflect.internal.pickling.UnPickler$Scan$$anonfun$readTypeRef$1.apply(UnPickler.scala:658)
at scala.reflect.internal.pickling.UnPickler$Scan.at(UnPickler.scala:179)
at scala.reflect.internal.pickling.UnPickler$Scan.readTypeRef(UnPickler.scala:658)
at scala.reflect.internal.pickling.UnPickler$Scan.readAnnotationInfo(UnPickler.scala:492)
at scala.reflect.internal.pickling.UnPickler$Scan.readSymbolAnnotation(UnPickler.scala:515)
at scala.reflect.internal.pickling.UnPickler$Scan.run(UnPickler.scala:97)
at scala.reflect.internal.pickling.UnPickler.unpickle(UnPickler.scala:38)
at scala.reflect.runtime.JavaMirrors$JavaMirror.unpickleClass(JavaMirrors.scala:619)
at scala.reflect.runtime.SymbolLoaders$TopClassCompleter$$anonfun$complete$1.apply$mcV$sp(SymbolLoaders.scala:28)
at scala.reflect.runtime.SymbolLoaders$TopClassCompleter$$anonfun$complete$1.apply(SymbolLoaders.scala:25)
at scala.reflect.runtime.SymbolLoaders$TopClassCompleter$$anonfun$complete$1.apply(SymbolLoaders.scala:25)
at scala.reflect.internal.SymbolTable.slowButSafeEnteringPhaseNotLaterThan(SymbolTable.scala:263)
at scala.reflect.runtime.SymbolLoaders$TopClassCompleter.complete(SymbolLoaders.scala:25)
at scala.reflect.internal.Symbols$Symbol.info(Symbols.scala:1514)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$10.scala$reflect$runtime$SynchronizedSymbols$SynchronizedSymbol$$super$info(SynchronizedSymbols.scala:189)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply(SynchronizedSymbols.scala:127)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply(SynchronizedSymbols.scala:127)
at scala.reflect.runtime.Gil$class.gilSynchronized(Gil.scala:19)
at scala.reflect.runtime.JavaUniverse.gilSynchronized(JavaUniverse.scala:16)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.gilSynchronizedIfNotThreadsafe(SynchronizedSymbols.scala:123)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$10.gilSynchronizedIfNotThreadsafe(SynchronizedSymbols.scala:189)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.info(SynchronizedSymbols.scala:127)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$10.info(SynchronizedSymbols.scala:189)
at scala.reflect.internal.SymbolTable.openPackageModule(SymbolTable.scala:286)
at scala.reflect.internal.SymbolTable.openPackageModule(SymbolTable.scala:341)
at scala.reflect.runtime.SymbolLoaders$LazyPackageType$$anonfun$complete$2.apply$mcV$sp(SymbolLoaders.scala:74)
at scala.reflect.runtime.SymbolLoaders$LazyPackageType$$anonfun$complete$2.apply(SymbolLoaders.scala:71)
at scala.reflect.runtime.SymbolLoaders$LazyPackageType$$anonfun$complete$2.apply(SymbolLoaders.scala:71)
at scala.reflect.internal.SymbolTable.slowButSafeEnteringPhaseNotLaterThan(SymbolTable.scala:263)
at scala.reflect.runtime.SymbolLoaders$LazyPackageType.complete(SymbolLoaders.scala:71)
at scala.reflect.internal.Symbols$Symbol.info(Symbols.scala:1514)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$1.scala$reflect$runtime$SynchronizedSymbols$SynchronizedSymbol$$super$info(SynchronizedSymbols.scala:174)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply(SynchronizedSymbols.scala:127)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply(SynchronizedSymbols.scala:127)
at scala.reflect.runtime.Gil$class.gilSynchronized(Gil.scala:19)
at scala.reflect.runtime.JavaUniverse.gilSynchronized(JavaUniverse.scala:16)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.gilSynchronizedIfNotThreadsafe(SynchronizedSymbols.scala:123)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$1.gilSynchronizedIfNotThreadsafe(SynchronizedSymbols.scala:174)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.info(SynchronizedSymbols.scala:127)
at scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$1.info(SynchronizedSymbols.scala:174)
at scala.reflect.internal.Types$TypeRef.thisInfo(Types.scala:2194)
at scala.reflect.internal.Types$TypeRef.baseClasses(Types.scala:2199)
at scala.reflect.internal.tpe.FindMembers$FindMemberBase.<init>(FindMembers.scala:17)
at scala.reflect.internal.tpe.FindMembers$FindMember.<init>(FindMembers.scala:219)
at scala.reflect.internal.Types$Type.scala$reflect$internal$Types$Type$$findMemberInternal$1(Types.scala:1014)
at scala.reflect.internal.Types$Type.findMember(Types.scala:1016)
at scala.reflect.internal.Types$Type.memberBasedOnName(Types.scala:631)
at scala.reflect.internal.Types$Type.member(Types.scala:600)
at scala.reflect.internal.Mirrors$RootsBase.getModuleOrClass(Mirrors.scala:48)
at scala.reflect.internal.Mirrors$RootsBase.getModuleOrClass(Mirrors.scala:45)
at scala.reflect.internal.Mirrors$RootsBase.getModuleOrClass(Mirrors.scala:66)
at scala.reflect.internal.Mirrors$RootsBase.staticModuleOrClass(Mirrors.scala:77)
at scala.reflect.internal.Mirrors$RootsBase.staticModule(Mirrors.scala:161)
at scala.reflect.internal.Mirrors$RootsBase.staticModule(Mirrors.scala:22)
at org.apache.spark.sql.catalyst.ScalaReflection$$anonfun$schemaFor$1$$typecreator48$1.apply(ScalaReflection.scala:735)
at scala.reflect.api.TypeTags$WeakTypeTagImpl.tpe$lzycompute(TypeTags.scala:232)
at scala.reflect.api.TypeTags$WeakTypeTagImpl.tpe(TypeTags.scala:232)
at org.apache.spark.sql.catalyst.ScalaReflection$class.localTypeOf(ScalaReflection.scala:921)
at org.apache.spark.sql.catalyst.ScalaReflection$.localTypeOf(ScalaReflection.scala:46)
at org.apache.spark.sql.catalyst.ScalaReflection$$anonfun$schemaFor$1.apply(ScalaReflection.scala:735)
at org.apache.spark.sql.catalyst.ScalaReflection$$anonfun$schemaFor$1.apply(ScalaReflection.scala:724)
at scala.reflect.internal.tpe.TypeConstraints$UndoLog.undo(TypeConstraints.scala:56)
at org.apache.spark.sql.catalyst.ScalaReflection$class.cleanUpReflectionObjects(ScalaReflection.scala:906)
at org.apache.spark.sql.catalyst.ScalaReflection$.cleanUpReflectionObjects(ScalaReflection.scala:46)
at org.apache.spark.sql.catalyst.ScalaReflection$.schemaFor(ScalaReflection.scala:723)
at org.apache.spark.sql.catalyst.ScalaReflection$.schemaFor(ScalaReflection.scala:720)
at org.apache.spark.sql.catalyst.expressions.Literal$$anonfun$create$1.apply(literals.scala:160)
at org.apache.spark.sql.catalyst.expressions.Literal$$anonfun$create$1.apply(literals.scala:159)
at scala.util.Try$.apply(Try.scala:192)
at org.apache.spark.sql.catalyst.expressions.Literal$.create(literals.scala:159)
at org.apache.spark.sql.functions$.typedLit(functions.scala:127)
at org.apache.spark.sql.functions$.lit(functions.scala:110)
at org.apache.spark.sql.Column.$div(Column.scala:747)
at org.apache.spark.sql.Column.divide(Column.scala:762)
at
java.lang.AssertionError:assertion失败：运行时反射宇宙中不安全的符号不稳定（包InterfaceStatability的子项）
位于scala.reflect.internal.Symbols$Symbol.（Symbols.scala:184）
位于scala.reflect.internal.Symbols$TypeSymbol.（Symbols.scala:3009）
位于scala.reflect.internal.Symbols$ClassSymbol.（Symbols.scala:3201）
位于scala.reflect.internal.Symbols$StubClassSymbol.（Symbols.scala:3496）
位于scala.reflect.internal.Symbols$Symbol.newStubSymbol（Symbols.scala:498）
在scala.reflect.internal.pickling.UnPickler$Scan.readExtSymbol$1处（UnPickler.scala:258）
位于scala.reflect.internal.pickling.UnPickler$Scan.readSymbol（UnPickler.scala:284）
在scala.reflect.internal.pickling.UnPickler$Scan.readSymbolRef处（UnPickler.scala:649）
位于scala.reflect.internal.pickling.UnPickler$Scan.readType（UnPickler.scala:417）
在scala.reflect.internal.pickling.UnPickler$Scan$$anonfun$readTypeRef$1.apply（UnPickler.scala:658）
在scala.reflect.internal.pickling.UnPickler$Scan$$anonfun$readTypeRef$1.apply（UnPickler.scala:658）
at scala.reflect.internal.pickling.UnPickler$Scan.at（UnPickler.scala:179）
位于scala.reflect.internal.pickling.UnPickler$Scan.readTypeRef（UnPickler.scala:658）
位于scala.reflect.internal.pickling.UnPickler$Scan.readAnnotationInfo（UnPickler.scala:492）
在scala.reflect.internal.pickling.UnPickler$Scan.readSymbolAnnotation处（UnPickler.scala:515）
位于scala.reflect.internal.pickling.UnPickler$Scan.run（UnPickler.scala:97）
在scala.reflect.internal.pickling.UnPickler.unpickle（UnPickler.scala:38）处
位于scala.reflect.runtime.JavaMirrors$JavaMirror.unpickleClass（JavaMirrors.scala:619）
在scala.reflect.runtime.symboloaders$TopClassCompleter$$anonfun$complete$1.apply$mcV$sp（symboloaders.scala:28）
在scala.reflect.runtime.symboloaders$TopClassCompleter$$anonfun$complete$1.apply（symboloaders.scala:25）
在scala.reflect.runtime.symboloaders$TopClassCompleter$$anonfun$complete$1.apply（symboloaders.scala:25）
在scala.reflect.internal.SymbolTable.slowbutsafeenteringfasenotlaterthan处（SymbolTable.scala:263）
在scala.reflect.runtime.symboloaders$TopClassCompleter.complete（symboloaders.scala:25）
位于scala.reflect.internal.Symbols$Symbol.info（Symbols.scala:1514）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$10.scala$reflect$runtime$SynchronizedSymbols$SynchronizedSymbol$$super$info（SynchronizedSymbols.scala:189）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply（SynchronizedSymbols.scala:127）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply（SynchronizedSymbols.scala:127）
位于scala.reflect.runtime.Gil$class.gilSynchronized（Gil.scala:19）
位于scala.reflect.runtime.JavaUniverse.gilSynchronized（JavaUniverse.scala:16）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.gilSynchronizedFNotThreadSafe（SynchronizedSymbols.scala:123）中
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$10.gilSynchronizedIfNotThreadsafe（SynchronizedSymbols.scala:189）中
位于scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.info（SynchronizedSymbols.scala:127）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$10.info（SynchronizedSymbols.scala:189）
在scala.reflect.internal.SymbolTable.openPackageModule（SymbolTable.scala:286）中
在scala.reflect.internal.SymbolTable.openPackageModule（SymbolTable.scala:341）中
在scala.reflect.runtime.symboloaders$LazyPackageType$$anonfun$complete$2.apply$mcV$sp（symboloaders.scala:74）
在scala.reflect.runtime.symboloaders$LazyPackageType$$anonfun$complete$2.apply（symboloaders.scala:71）
在scala.reflect.runtime.symboloaders$LazyPackageType$$anonfun$complete$2.apply（symboloaders.scala:71）
在scala.reflect.internal.SymbolTable.slowbutsafeenteringfasenotlaterthan处（SymbolTable.scala:263）
在scala.reflect.runtime.symboloaders$LazyPackageType.complete（symboloaders.scala:71）中
位于scala.reflect.internal.Symbols$Symbol.info（Symbols.scala:1514）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$1.scala$reflect$runtime$SynchronizedSymbols$SynchronizedSymbol$$super$info（SynchronizedSymbols.scala:174）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply（SynchronizedSymbols.scala:127）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anonfun$info$1.apply（SynchronizedSymbols.scala:127）
位于scala.reflect.runtime.Gil$class.gilSynchronized（Gil.scala:19）
位于scala.reflect.runtime.JavaUniverse.gilSynchronized（JavaUniverse.scala:16）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.gilSynchronizedFNotThreadSafe（SynchronizedSymbols.scala:123）中
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$1.gilSynchronizedIfNotThreadsafe（SynchronizedSymbols.scala:174）中
位于scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$class.info（SynchronizedSymbols.scala:127）
在scala.reflect.runtime.SynchronizedSymbols$SynchronizedSymbol$$anon$1.info（SynchronizedSymbols.scala:174）
位于scala.reflect.internal.Types$TypeRef.thisInfo（Types.scala:2194）
在scala.reflect.internal.Types$TypeRef.baseClasses处（Types.scala:2199）
在scala.re