Binary compatibility report for the spark-testing-base_2.10-1.3.1_0.3.0 library  between 1.3.0 and 1.4.0 versions   (relating to the portability of client application spark-testing-base_2.10-1.3.1_0.3.0.jar)

Test Info

Library Namespark-testing-base_2.10-1.3.1_0.3.0
Version #11.3.0
Version #21.4.0
Java Version1.7.0_85

Test Results

Total Java ARchives8
Total Methods / Classes1636 / 3513
VerdictIncompatible
(1.1%)

Problem Summary

SeverityCount
Added Methods-116
Removed MethodsHigh17
Problems with
Data Types		High1
Medium0
Low4
Problems with
Methods		High0
Medium1
Low0
Other Changes
in Data Types		-3

Added Methods (116)

spark-catalyst_2.10-1.4.0.jar, Row.class
package org.apache.spark.sql
Row.fieldIndex ( String p1 ) [abstract]  :  int
Row.getAs ( String p1 ) [abstract]  :  T
Row.getValuesMap ( scala.collection.Seq<String> p1 ) [abstract]  :  scala.collection.immutable.Map<String,T>

spark-catalyst_2.10-1.4.0.jar, StructType.class
package org.apache.spark.sql.types
StructType.fieldIndex ( String name )  :  int
StructType.getFieldIndex ( String name )  :  scala.Option<Object>
StructType.StructType ( )

spark-core_2.10-1.4.0.jar, RDD<T>.class
package org.apache.spark.rdd
RDD<T>.RDD..doCheckpointCalled ( )  :  boolean
RDD<T>.RDD..doCheckpointCalled_.eq ( boolean p1 )  :  void
RDD<T>.RDD..sc ( )  :  org.apache.spark.SparkContext
RDD<T>.randomSampleWithRange ( double lb, double ub, long seed )  :  RDD<T>
RDD<T>.scope ( )  :  scala.Option<RDDOperationScope>
RDD<T>.withScope ( scala.Function0<U> body )  :  U

spark-core_2.10-1.4.0.jar, SparkConf.class
package org.apache.spark
SparkConf.getDeprecatedConfig ( String p1, SparkConf p2 ) [static]  :  scala.Option<String>
SparkConf.getSizeAsBytes ( String key )  :  long
SparkConf.getSizeAsBytes ( String key, String defaultValue )  :  long
SparkConf.getSizeAsGb ( String key )  :  long
SparkConf.getSizeAsGb ( String key, String defaultValue )  :  long
SparkConf.getSizeAsKb ( String key )  :  long
SparkConf.getSizeAsKb ( String key, String defaultValue )  :  long
SparkConf.getSizeAsMb ( String key )  :  long
SparkConf.getSizeAsMb ( String key, String defaultValue )  :  long
SparkConf.getTimeAsMs ( String key )  :  long
SparkConf.getTimeAsMs ( String key, String defaultValue )  :  long
SparkConf.getTimeAsSeconds ( String key )  :  long
SparkConf.getTimeAsSeconds ( String key, String defaultValue )  :  long
SparkConf.logDeprecationWarning ( String p1 ) [static]  :  void

spark-core_2.10-1.4.0.jar, SparkContext.class
package org.apache.spark
SparkContext.applicationAttemptId ( )  :  scala.Option<String>
SparkContext.externalBlockStoreFolderName ( )  :  String
SparkContext.getOrCreate ( ) [static]  :  SparkContext
SparkContext.getOrCreate ( SparkConf p1 ) [static]  :  SparkContext
SparkContext.SparkContext.._conf ( )  :  SparkConf
SparkContext.SparkContext.._env ( )  :  SparkEnv
SparkContext.SparkContext..assertNotStopped ( )  :  void
SparkContext.range ( long start, long end, long step, int numSlices )  :  rdd.RDD<Object>
SparkContext.setLogLevel ( String logLevel )  :  void
SparkContext.supportDynamicAllocation ( )  :  boolean
SparkContext.withScope ( scala.Function0<U> body )  :  U

spark-core_2.10-1.4.0.jar, SparkListenerApplicationStart.class
package org.apache.spark.scheduler
SparkListenerApplicationStart.appAttemptId ( )  :  scala.Option<String>
SparkListenerApplicationStart.copy ( String appName, scala.Option<String> appId, long time, String sparkUser, scala.Option<String> appAttemptId )  :  SparkListenerApplicationStart
SparkListenerApplicationStart.SparkListenerApplicationStart ( String appName, scala.Option<String> appId, long time, String sparkUser, scala.Option<String> appAttemptId )

spark-hive_2.10-1.4.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.configure ( )  :  scala.collection.immutable.Map<String,String>
HiveContext.convertMetastoreParquetWithSchemaMerging ( )  :  boolean
HiveContext.createSession ( )  :  HiveContext.SQLSession
HiveContext.createSession ( )  :  org.apache.spark.sql.SQLContext.SQLSession
HiveContext.dialectClassName ( )  :  String
HiveContext.executionHive ( )  :  client.ClientWrapper
HiveContext.HIVE_METASTORE_JARS ( ) [static]  :  String
HiveContext.HIVE_METASTORE_VERSION ( ) [static]  :  String
HiveContext.hiveExecutionVersion ( ) [static]  :  String
HiveContext.hiveMetastoreBarrierPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreJars ( )  :  String
HiveContext.hiveMetastoreSharedPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreVersion ( )  :  String
HiveContext.metadataHive ( )  :  client.ClientInterface
HiveContext.newTemporaryConfiguration ( ) [static]  :  scala.collection.immutable.Map<String,String>
HiveContext.parseSql ( String sql )  :  org.apache.spark.sql.catalyst.plans.logical.LogicalPlan
HiveContext.substitutor ( )  :  org.apache.hadoop.hive.ql.parse.VariableSubstitution

spark-sql_2.10-1.4.0.jar, DataFrame.class
package org.apache.spark.sql
DataFrame.coalesce ( int numPartitions )  :  DataFrame
DataFrame.cube ( Column... cols )  :  GroupedData
DataFrame.cube ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.cube ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.cube ( String col1, String... cols )  :  GroupedData
DataFrame.describe ( scala.collection.Seq<String> cols )  :  DataFrame
DataFrame.describe ( String... cols )  :  DataFrame
DataFrame.drop ( String colName )  :  DataFrame
DataFrame.dropDuplicates ( )  :  DataFrame
DataFrame.dropDuplicates ( scala.collection.Seq<String> colNames )  :  DataFrame
DataFrame.dropDuplicates ( String[ ] colNames )  :  DataFrame
DataFrame.join ( DataFrame right, String usingColumn )  :  DataFrame
DataFrame.na ( )  :  DataFrameNaFunctions
DataFrame.DataFrame..logicalPlanToDataFrame ( catalyst.plans.logical.LogicalPlan logicalPlan )  :  DataFrame
DataFrame.randomSplit ( double[ ] weights )  :  DataFrame[ ]
DataFrame.randomSplit ( double[ ] weights, long seed )  :  DataFrame[ ]
DataFrame.randomSplit ( scala.collection.immutable.List<Object> weights, long seed )  :  DataFrame[ ]
DataFrame.rollup ( Column... cols )  :  GroupedData
DataFrame.rollup ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.rollup ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.rollup ( String col1, String... cols )  :  GroupedData
DataFrame.stat ( )  :  DataFrameStatFunctions
DataFrame.write ( )  :  DataFrameWriter

spark-sql_2.10-1.4.0.jar, SQLContext.class
package org.apache.spark.sql
SQLContext.cacheManager ( )  :  execution.CacheManager
SQLContext.createDataFrame ( org.apache.spark.rdd.RDD<Row> rowRDD, types.StructType schema, boolean needsConversion )  :  DataFrame
SQLContext.createSession ( )  :  SQLContext.SQLSession
SQLContext.currentSession ( )  :  SQLContext.SQLSession
SQLContext.defaultSession ( )  :  SQLContext.SQLSession
SQLContext.detachSession ( )  :  void
SQLContext.dialectClassName ( )  :  String
SQLContext.getOrCreate ( org.apache.spark.SparkContext p1 ) [static]  :  SQLContext
SQLContext.getSQLDialect ( )  :  catalyst.ParserDialect
SQLContext.openSession ( )  :  SQLContext.SQLSession
SQLContext.range ( long start, long end )  :  DataFrame
SQLContext.range ( long start, long end, long step, int numPartitions )  :  DataFrame
SQLContext.read ( )  :  DataFrameReader
SQLContext.tlSession ( )  :  ThreadLocal<SQLContext.SQLSession>

spark-streaming_2.10-1.4.0.jar, Checkpoint.class
package org.apache.spark.streaming
Checkpoint.createSparkConf ( )  :  org.apache.spark.SparkConf
Checkpoint.deserialize ( java.io.InputStream p1, org.apache.spark.SparkConf p2 ) [static]  :  Checkpoint
Checkpoint.getCheckpointFiles ( String p1, scala.Option<org.apache.hadoop.fs.FileSystem> p2 ) [static]  :  scala.collection.Seq<org.apache.hadoop.fs.Path>
Checkpoint.serialize ( Checkpoint p1, org.apache.spark.SparkConf p2 ) [static]  :  byte[ ]

spark-streaming_2.10-1.4.0.jar, DStream<T>.class
package org.apache.spark.streaming.dstream
DStream<T>.baseScope ( )  :  scala.Option<String>
DStream<T>.createRDDWithLocalProperties ( org.apache.spark.streaming.Time time, scala.Function0<U> body )  :  U
DStream<T>.validateAtStart ( )  :  void

spark-streaming_2.10-1.4.0.jar, InputDStream<T>.class
package org.apache.spark.streaming.dstream
InputDStream<T>.baseScope ( )  :  scala.Option<String>
InputDStream<T>.id ( )  :  int
InputDStream<T>.name ( )  :  String

spark-streaming_2.10-1.4.0.jar, StreamingContext.class
package org.apache.spark.streaming
StreamingContext.getActive ( ) [static]  :  scala.Option<StreamingContext>
StreamingContext.getActiveOrCreate ( scala.Function0<StreamingContext> p1 ) [static]  :  StreamingContext
StreamingContext.getActiveOrCreate ( String p1, scala.Function0<StreamingContext> p2, org.apache.hadoop.conf.Configuration p3, boolean p4 ) [static]  :  StreamingContext
StreamingContext.getNewInputStreamId ( )  :  int
StreamingContext.getState ( )  :  StreamingContextState
StreamingContext.isCheckpointingEnabled ( )  :  boolean
StreamingContext.StreamingContext..startSite ( )  :  java.util.concurrent.atomic.AtomicReference<org.apache.spark.util.CallSite>
StreamingContext.StreamingContext..stopOnShutdown ( )  :  void
StreamingContext.StreamingContext ( String path, org.apache.spark.SparkContext sparkContext )
StreamingContext.withNamedScope ( String name, scala.Function0<U> body )  :  U
StreamingContext.withScope ( scala.Function0<U> body )  :  U

spark-streaming_2.10-1.4.0.jar, Time.class
package org.apache.spark.streaming
Time.floor ( Duration that, Time zeroTime )  :  Time

to the top

Removed Methods (17)

spark-core_2.10-1.3.0.jar, SparkConf.class
package org.apache.spark
SparkConf.translateConfKey ( String p1, boolean p2 ) [static]  :  String

spark-core_2.10-1.3.0.jar, SparkListenerApplicationStart.class
package org.apache.spark.scheduler
SparkListenerApplicationStart.copy ( String appName, scala.Option<String> appId, long time, String sparkUser )  :  SparkListenerApplicationStart
SparkListenerApplicationStart.SparkListenerApplicationStart ( String appName, scala.Option<String> appId, long time, String sparkUser )

spark-hive_2.10-1.3.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.ddlParserWithHiveQL ( )  :  org.apache.spark.sql.sources.DDLParser
HiveContext.outputBuffer ( )  :  java.io.OutputStream
HiveContext.runHive ( String cmd, int maxRows )  :  scala.collection.Seq<String>
HiveContext.sessionState ( )  :  org.apache.hadoop.hive.ql.session.SessionState

spark-sql_2.10-1.3.0.jar, SQLContext.class
package org.apache.spark.sql
SQLContext.cacheManager ( )  :  CacheManager
SQLContext.checkAnalysis ( )  :  catalyst.analysis.CheckAnalysis
SQLContext.createDataFrame ( org.apache.spark.api.java.JavaRDD<Row> rowRDD, java.util.List<String> columns )  :  DataFrame

spark-streaming_2.10-1.3.0.jar, Checkpoint.class
package org.apache.spark.streaming
Checkpoint.getCheckpointFiles ( String p1, org.apache.hadoop.fs.FileSystem p2 ) [static]  :  scala.collection.Seq<org.apache.hadoop.fs.Path>
Checkpoint.sparkConf ( )  :  org.apache.spark.SparkConf

spark-streaming_2.10-1.3.0.jar, DStream<T>.class
package org.apache.spark.streaming.dstream
DStream<T>.validate ( )  :  void

spark-streaming_2.10-1.3.0.jar, StreamingContext.class
package org.apache.spark.streaming
StreamingContext.getNewReceiverStreamId ( )  :  int
StreamingContext.state ( )  :  scala.Enumeration.Value
StreamingContext.state_.eq ( scala.Enumeration.Value p1 )  :  void
StreamingContext.StreamingContextState ( )  :  StreamingContext.StreamingContextState.

to the top

Problems with Data Types, High Severity (1)

spark-core_2.10-1.3.0.jar
package org.apache.spark.api.java
[+] JavaRDD<T> (1)

to the top

Problems with Methods, Medium Severity (1)

spark-streaming_2.10-1.3.0.jar, DStream
package org.apache.spark.streaming.dstream
[+] DStream<T>.getOrCompute ( org.apache.spark.streaming.Time time )  :  scala.Option<org.apache.spark.rdd.RDD<T>> (1)

to the top

Problems with Data Types, Low Severity (4)

spark-core_2.10-1.3.0.jar
package org.apache.spark.api.java
[+] JavaRDD<T> (1)

spark-hive_2.10-1.3.0.jar
package org.apache.spark.sql.hive
[+] HiveContext (3)

to the top

Other Changes in Data Types (3)

spark-catalyst_2.10-1.3.0.jar
package org.apache.spark.sql
[+] Row (3)

to the top

Java ARchives (8)

spark-catalyst_2.10-1.3.0.jar
spark-core_2.10-1.3.0.jar
spark-hive_2.10-1.3.0.jar
spark-mllib_2.10-1.3.0.jar
spark-sql_2.10-1.3.0.jar
spark-streaming-kafka_2.10-1.3.0.jar
spark-streaming_2.10-1.3.0.jar
spark-yarn_2.10-1.3.0.jar

to the top



Generated on Sat Jan 23 03:18:22 2016 for spark-testing-base_2.10-1.3.1_0.3.0 by Java API Compliance Checker 1.4.1  
A tool for checking backward compatibility of a Java library API