Binary compatibility report for the spark-testing-base_2.10-1.4.1_0.3.0 library  between 1.4.0 and 1.3.0 versions   (relating to the portability of client application spark-testing-base_2.10-1.4.1_0.3.0.jar)

Test Info


Library Namespark-testing-base_2.10-1.4.1_0.3.0
Version #11.4.0
Version #21.3.0
Java Version1.7.0_85

Test Results


Total Java ARchives8
Total Methods / Classes1545 / 4198
VerdictIncompatible
(11.6%)

Problem Summary


SeverityCount
Added Methods-16
Removed MethodsHigh134
Problems with
Data Types
High7
Medium1
Low3
Problems with
Methods
High0
Medium0
Low0

Added Methods (16)


spark-core_2.10-1.3.0.jar, SparkConf.class
package org.apache.spark
SparkConf.translateConfKey ( String p1, boolean p2 ) [static]  :  String

spark-core_2.10-1.3.0.jar, SparkListenerApplicationStart.class
package org.apache.spark.scheduler
SparkListenerApplicationStart.copy ( String appName, scala.Option<String> appId, long time, String sparkUser )  :  SparkListenerApplicationStart
SparkListenerApplicationStart.SparkListenerApplicationStart ( String appName, scala.Option<String> appId, long time, String sparkUser )

spark-hive_2.10-1.3.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.conf ( )  :  org.apache.spark.sql.SQLConf
HiveContext.ddlParserWithHiveQL ( )  :  org.apache.spark.sql.sources.DDLParser
HiveContext.outputBuffer ( )  :  java.io.OutputStream
HiveContext.runHive ( String cmd, int maxRows )  :  scala.collection.Seq<String>
HiveContext.sessionState ( )  :  org.apache.hadoop.hive.ql.session.SessionState
HiveContext.sql ( String sqlText )  :  org.apache.spark.sql.DataFrame

spark-streaming_2.10-1.3.0.jar, Checkpoint.class
package org.apache.spark.streaming
Checkpoint.getCheckpointFiles ( String p1, org.apache.hadoop.fs.FileSystem p2 ) [static]  :  scala.collection.Seq<org.apache.hadoop.fs.Path>
Checkpoint.sparkConf ( )  :  org.apache.spark.SparkConf

spark-streaming_2.10-1.3.0.jar, DStream<T>.class
package org.apache.spark.streaming.dstream
DStream<T>.validate ( )  :  void

spark-streaming_2.10-1.3.0.jar, StreamingContext.class
package org.apache.spark.streaming
StreamingContext.getNewReceiverStreamId ( )  :  int
StreamingContext.state ( )  :  scala.Enumeration.Value
StreamingContext.state_.eq ( scala.Enumeration.Value p1 )  :  void
StreamingContext.StreamingContextState ( )  :  StreamingContext.StreamingContextState.

to the top

Removed Methods (134)


spark-catalyst_2.10-1.4.0.jar, Row.class
package org.apache.spark.sql
Row.fieldIndex ( String p1 ) [abstract]  :  int
Row.getAs ( String p1 ) [abstract]  :  T
Row.getValuesMap ( scala.collection.Seq<String> p1 ) [abstract]  :  scala.collection.immutable.Map<String,T>

spark-catalyst_2.10-1.4.0.jar, StructType.class
package org.apache.spark.sql.types
StructType.fieldIndex ( String name )  :  int
StructType.getFieldIndex ( String name )  :  scala.Option<Object>
StructType.StructType ( )

spark-core_2.10-1.4.0.jar, RDD<T>.class
package org.apache.spark.rdd
RDD<T>.RDD..doCheckpointCalled ( )  :  boolean
RDD<T>.RDD..doCheckpointCalled_.eq ( boolean p1 )  :  void
RDD<T>.RDD..sc ( )  :  org.apache.spark.SparkContext
RDD<T>.randomSampleWithRange ( double lb, double ub, long seed )  :  RDD<T>
RDD<T>.scope ( )  :  scala.Option<RDDOperationScope>
RDD<T>.withScope ( scala.Function0<U> body )  :  U

spark-core_2.10-1.4.0.jar, SparkConf.class
package org.apache.spark
SparkConf.getDeprecatedConfig ( String p1, SparkConf p2 ) [static]  :  scala.Option<String>
SparkConf.getSizeAsBytes ( String key )  :  long
SparkConf.getSizeAsBytes ( String key, String defaultValue )  :  long
SparkConf.getSizeAsGb ( String key )  :  long
SparkConf.getSizeAsGb ( String key, String defaultValue )  :  long
SparkConf.getSizeAsKb ( String key )  :  long
SparkConf.getSizeAsKb ( String key, String defaultValue )  :  long
SparkConf.getSizeAsMb ( String key )  :  long
SparkConf.getSizeAsMb ( String key, String defaultValue )  :  long
SparkConf.getTimeAsMs ( String key )  :  long
SparkConf.getTimeAsMs ( String key, String defaultValue )  :  long
SparkConf.getTimeAsSeconds ( String key )  :  long
SparkConf.getTimeAsSeconds ( String key, String defaultValue )  :  long
SparkConf.logDeprecationWarning ( String p1 ) [static]  :  void

spark-core_2.10-1.4.0.jar, SparkContext.class
package org.apache.spark
SparkContext.applicationAttemptId ( )  :  scala.Option<String>
SparkContext.externalBlockStoreFolderName ( )  :  String
SparkContext.getOrCreate ( ) [static]  :  SparkContext
SparkContext.getOrCreate ( SparkConf p1 ) [static]  :  SparkContext
SparkContext.SparkContext.._conf ( )  :  SparkConf
SparkContext.SparkContext.._env ( )  :  SparkEnv
SparkContext.SparkContext..assertNotStopped ( )  :  void
SparkContext.range ( long start, long end, long step, int numSlices )  :  rdd.RDD<Object>
SparkContext.setLogLevel ( String logLevel )  :  void
SparkContext.supportDynamicAllocation ( )  :  boolean
SparkContext.withScope ( scala.Function0<U> body )  :  U

spark-core_2.10-1.4.0.jar, SparkListenerApplicationStart.class
package org.apache.spark.scheduler
SparkListenerApplicationStart.appAttemptId ( )  :  scala.Option<String>
SparkListenerApplicationStart.copy ( String appName, scala.Option<String> appId, long time, String sparkUser, scala.Option<String> appAttemptId )  :  SparkListenerApplicationStart
SparkListenerApplicationStart.SparkListenerApplicationStart ( String appName, scala.Option<String> appId, long time, String sparkUser, scala.Option<String> appAttemptId )

spark-hive_2.10-1.4.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.configure ( )  :  scala.collection.immutable.Map<String,String>
HiveContext.convertMetastoreParquetWithSchemaMerging ( )  :  boolean
HiveContext.createSession ( )  :  HiveContext.SQLSession
HiveContext.createSession ( )  :  org.apache.spark.sql.SQLContext.SQLSession
HiveContext.dialectClassName ( )  :  String
HiveContext.executionHive ( )  :  client.ClientWrapper
HiveContext.HIVE_METASTORE_JARS ( ) [static]  :  String
HiveContext.HIVE_METASTORE_VERSION ( ) [static]  :  String
HiveContext.hiveExecutionVersion ( ) [static]  :  String
HiveContext.hiveMetastoreBarrierPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreJars ( )  :  String
HiveContext.hiveMetastoreSharedPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreVersion ( )  :  String
HiveContext.metadataHive ( )  :  client.ClientInterface
HiveContext.newTemporaryConfiguration ( ) [static]  :  scala.collection.immutable.Map<String,String>
HiveContext.substitutor ( )  :  org.apache.hadoop.hive.ql.parse.VariableSubstitution

spark-sql_2.10-1.4.0.jar, DataFrame.class
package org.apache.spark.sql
DataFrame.coalesce ( int numPartitions )  :  DataFrame
DataFrame.cube ( Column... cols )  :  GroupedData
DataFrame.cube ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.cube ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.cube ( String col1, String... cols )  :  GroupedData
DataFrame.describe ( scala.collection.Seq<String> cols )  :  DataFrame
DataFrame.describe ( String... cols )  :  DataFrame
DataFrame.drop ( String colName )  :  DataFrame
DataFrame.dropDuplicates ( )  :  DataFrame
DataFrame.dropDuplicates ( scala.collection.Seq<String> colNames )  :  DataFrame
DataFrame.dropDuplicates ( String[ ] colNames )  :  DataFrame
DataFrame.join ( DataFrame right, String usingColumn )  :  DataFrame
DataFrame.na ( )  :  DataFrameNaFunctions
DataFrame.DataFrame..logicalPlanToDataFrame ( catalyst.plans.logical.LogicalPlan logicalPlan )  :  DataFrame
DataFrame.randomSplit ( double[ ] weights )  :  DataFrame[ ]
DataFrame.randomSplit ( double[ ] weights, long seed )  :  DataFrame[ ]
DataFrame.randomSplit ( scala.collection.immutable.List<Object> weights, long seed )  :  DataFrame[ ]
DataFrame.rollup ( Column... cols )  :  GroupedData
DataFrame.rollup ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.rollup ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.rollup ( String col1, String... cols )  :  GroupedData
DataFrame.stat ( )  :  DataFrameStatFunctions
DataFrame.write ( )  :  DataFrameWriter

spark-streaming-kafka_2.10-1.4.0.jar, KafkaTestUtils.class
package org.apache.spark.streaming.kafka
KafkaTestUtils.brokerAddress ( )  :  String
KafkaTestUtils.createTopic ( String topic )  :  void
KafkaTestUtils.eventually ( org.apache.spark.streaming.Time timeout, org.apache.spark.streaming.Time interval, scala.Function0<T> func )  :  T
KafkaTestUtils.isTraceEnabled ( )  :  boolean
KafkaTestUtils.KafkaTestUtils ( )
KafkaTestUtils.log ( )  :  org.slf4j.Logger
KafkaTestUtils.logDebug ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logDebug ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logError ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logError ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logInfo ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logInfo ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logName ( )  :  String
KafkaTestUtils.logTrace ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logTrace ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logWarning ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logWarning ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.org.apache.spark.Logging..log_ ( )  :  org.slf4j.Logger
KafkaTestUtils.org.apache.spark.Logging..log__.eq ( org.slf4j.Logger p1 )  :  void
KafkaTestUtils.KafkaTestUtils..brokerConf ( )  :  kafka.server.KafkaConfig
KafkaTestUtils.KafkaTestUtils..brokerConf_.eq ( kafka.server.KafkaConfig p1 )  :  void
KafkaTestUtils.KafkaTestUtils..brokerConfiguration ( )  :  java.util.Properties
KafkaTestUtils.KafkaTestUtils..brokerPort_.eq ( int p1 )  :  void
KafkaTestUtils.KafkaTestUtils..server ( )  :  kafka.server.KafkaServer
KafkaTestUtils.KafkaTestUtils..server_.eq ( kafka.server.KafkaServer p1 )  :  void
KafkaTestUtils.sendMessages ( String topic, java.util.Map<String,Integer> messageToFreq )  :  void
KafkaTestUtils.sendMessages ( String topic, scala.collection.immutable.Map<String,Object> messageToFreq )  :  void
KafkaTestUtils.sendMessages ( String topic, String[ ] messages )  :  void
KafkaTestUtils.setup ( )  :  void
KafkaTestUtils.teardown ( )  :  void
KafkaTestUtils.waitUntilLeaderOffset ( String topic, int partition, long offset )  :  void
KafkaTestUtils.zkAddress ( )  :  String
KafkaTestUtils.zookeeperClient ( )  :  org.I0Itec.zkclient.ZkClient

spark-streaming_2.10-1.4.0.jar, Checkpoint.class
package org.apache.spark.streaming
Checkpoint.createSparkConf ( )  :  org.apache.spark.SparkConf
Checkpoint.deserialize ( java.io.InputStream p1, org.apache.spark.SparkConf p2 ) [static]  :  Checkpoint
Checkpoint.getCheckpointFiles ( String p1, scala.Option<org.apache.hadoop.fs.FileSystem> p2 ) [static]  :  scala.collection.Seq<org.apache.hadoop.fs.Path>
Checkpoint.serialize ( Checkpoint p1, org.apache.spark.SparkConf p2 ) [static]  :  byte[ ]

spark-streaming_2.10-1.4.0.jar, DStream<T>.class
package org.apache.spark.streaming.dstream
DStream<T>.baseScope ( )  :  scala.Option<String>
DStream<T>.createRDDWithLocalProperties ( org.apache.spark.streaming.Time time, scala.Function0<U> body )  :  U
DStream<T>.validateAtStart ( )  :  void

spark-streaming_2.10-1.4.0.jar, InputDStream<T>.class
package org.apache.spark.streaming.dstream
InputDStream<T>.baseScope ( )  :  scala.Option<String>
InputDStream<T>.id ( )  :  int
InputDStream<T>.name ( )  :  String

spark-streaming_2.10-1.4.0.jar, StreamingContext.class
package org.apache.spark.streaming
StreamingContext.getActive ( ) [static]  :  scala.Option<StreamingContext>
StreamingContext.getActiveOrCreate ( scala.Function0<StreamingContext> p1 ) [static]  :  StreamingContext
StreamingContext.getActiveOrCreate ( String p1, scala.Function0<StreamingContext> p2, org.apache.hadoop.conf.Configuration p3, boolean p4 ) [static]  :  StreamingContext
StreamingContext.getNewInputStreamId ( )  :  int
StreamingContext.getState ( )  :  StreamingContextState
StreamingContext.isCheckpointingEnabled ( )  :  boolean
StreamingContext.StreamingContext..startSite ( )  :  java.util.concurrent.atomic.AtomicReference<org.apache.spark.util.CallSite>
StreamingContext.StreamingContext..stopOnShutdown ( )  :  void
StreamingContext.StreamingContext ( String path, org.apache.spark.SparkContext sparkContext )
StreamingContext.withNamedScope ( String name, scala.Function0<U> body )  :  U
StreamingContext.withScope ( scala.Function0<U> body )  :  U

spark-streaming_2.10-1.4.0.jar, Time.class
package org.apache.spark.streaming
Time.floor ( Duration that, Time zeroTime )  :  Time

to the top

Problems with Data Types, High Severity (7)


spark-catalyst_2.10-1.4.0.jar
package org.apache.spark.sql
[+] Row (3)

package org.apache.spark.sql.catalyst.analysis
[+] Analyzer (1)

spark-sql_2.10-1.4.0.jar
package org.apache.spark.sql
[+] Column (1)

spark-streaming-kafka_2.10-1.4.0.jar
package org.apache.spark.streaming.kafka
[+] KafkaTestUtils (1)

spark-streaming_2.10-1.4.0.jar
package org.apache.spark.streaming.ui
[+] StreamingJobProgressListener (1)

to the top

Problems with Data Types, Medium Severity (1)


spark-core_2.10-1.4.0.jar
package org.apache.spark.api.java
[+] JavaRDD<T> (1)

to the top

Problems with Data Types, Low Severity (3)


spark-hive_2.10-1.4.0.jar
package org.apache.spark.sql.hive
[+] HiveContext (3)

to the top

Java ARchives (8)


spark-catalyst_2.10-1.4.0.jar
spark-core_2.10-1.4.0.jar
spark-hive_2.10-1.4.0.jar
spark-mllib_2.10-1.4.0.jar
spark-sql_2.10-1.4.0.jar
spark-streaming-kafka_2.10-1.4.0.jar
spark-streaming_2.10-1.4.0.jar
spark-yarn_2.10-1.4.0.jar

to the top




Generated on Sat Jan 23 04:00:37 2016 for spark-testing-base_2.10-1.4.1_0.3.0 by Java API Compliance Checker 1.4.1  
A tool for checking backward compatibility of a Java library API