Binary compatibility report for the spark-testing-base_2.10-0.3.1 library  between 1.6.0 and 1.3.0 versions   (relating to the portability of client application spark-testing-base_2.10-0.3.1.jar)

Test Info


Library Namespark-testing-base_2.10-0.3.1
Version #11.6.0
Version #21.3.0
Java Version1.7.0_85

Test Results


Total Java ARchives8
Total Methods / Classes1393 / 5294
VerdictIncompatible
(28.6%)

Problem Summary


SeverityCount
Added Methods-32
Removed MethodsHigh252
Problems with
Data Types
High17
Medium3
Low6
Problems with
Methods
High1
Medium0
Low1

Added Methods (32)


spark-core_2.10-1.3.0.jar, RDD<T>.class
package org.apache.spark.rdd
RDD<T>.markCheckpointed ( RDD<?> checkpointRDD )  :  void

spark-core_2.10-1.3.0.jar, SparkConf.class
package org.apache.spark
SparkConf.translateConfKey ( String p1, boolean p2 ) [static]  :  String

spark-core_2.10-1.3.0.jar, SparkContext.class
package org.apache.spark
SparkContext.preferredNodeLocationData ( )  :  scala.collection.Map<String,scala.collection.Set<scheduler.SplitInfo>>
SparkContext.preferredNodeLocationData_.eq ( scala.collection.Map<String,scala.collection.Set<scheduler.SplitInfo>> p1 )  :  void
SparkContext.requestTotalExecutors ( int numExecutors )  :  boolean

spark-core_2.10-1.3.0.jar, SparkListenerApplicationStart.class
package org.apache.spark.scheduler
SparkListenerApplicationStart.copy ( String appName, scala.Option<String> appId, long time, String sparkUser )  :  SparkListenerApplicationStart
SparkListenerApplicationStart.SparkListenerApplicationStart ( String appName, scala.Option<String> appId, long time, String sparkUser )

spark-hive_2.10-1.3.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.ddlParserWithHiveQL ( )  :  org.apache.spark.sql.sources.DDLParser
HiveContext.executePlan ( org.apache.spark.sql.catalyst.plans.logical.LogicalPlan plan )  :  org.apache.spark.sql.SQLContext.QueryExecution
HiveContext.functionRegistry ( )  :  HiveFunctionRegistry
HiveContext.outputBuffer ( )  :  java.io.OutputStream
HiveContext.runHive ( String cmd, int maxRows )  :  scala.collection.Seq<String>
HiveContext.sessionState ( )  :  org.apache.hadoop.hive.ql.session.SessionState
HiveContext.sql ( String sqlText )  :  org.apache.spark.sql.DataFrame

spark-sql_2.10-1.3.0.jar, DataFrame.class
package org.apache.spark.sql
DataFrame.cache ( )  :  RDDApi
DataFrame.collect ( )  :  Object
DataFrame.DataFrame ( SQLContext sqlContext, SQLContext.QueryExecution queryExecution )
DataFrame.first ( )  :  Object
DataFrame.persist ( )  :  RDDApi
DataFrame.persist ( org.apache.spark.storage.StorageLevel newLevel )  :  RDDApi
DataFrame.queryExecution ( )  :  SQLContext.QueryExecution
DataFrame.showString ( int numRows )  :  String
DataFrame.take ( int n )  :  Object
DataFrame.unpersist ( )  :  RDDApi
DataFrame.unpersist ( boolean blocking )  :  RDDApi

spark-streaming_2.10-1.3.0.jar, Checkpoint.class
package org.apache.spark.streaming
Checkpoint.getCheckpointFiles ( String p1, org.apache.hadoop.fs.FileSystem p2 ) [static]  :  scala.collection.Seq<org.apache.hadoop.fs.Path>
Checkpoint.sparkConf ( )  :  org.apache.spark.SparkConf

spark-streaming_2.10-1.3.0.jar, DStream<T>.class
package org.apache.spark.streaming.dstream
DStream<T>.validate ( )  :  void

spark-streaming_2.10-1.3.0.jar, StreamingContext.class
package org.apache.spark.streaming
StreamingContext.getNewReceiverStreamId ( )  :  int
StreamingContext.state ( )  :  scala.Enumeration.Value
StreamingContext.state_.eq ( scala.Enumeration.Value p1 )  :  void
StreamingContext.StreamingContextState ( )  :  StreamingContext.StreamingContextState.

to the top

Removed Methods (252)


spark-catalyst_2.10-1.6.0.jar, Row.class
package org.apache.spark.sql
Row.fieldIndex ( String p1 ) [abstract]  :  int
Row.getAs ( String p1 ) [abstract]  :  T
Row.getTimestamp ( int p1 ) [abstract]  :  java.sql.Timestamp
Row.getValuesMap ( scala.collection.Seq<String> p1 ) [abstract]  :  scala.collection.immutable.Map<String,T>

spark-core_2.10-1.6.0.jar, JavaSparkContext.class
package org.apache.spark.api.java
JavaSparkContext.setLogLevel ( String logLevel )  :  void

spark-core_2.10-1.6.0.jar, RDD<T>.class
package org.apache.spark.rdd
RDD<T>.getNumPartitions ( )  :  int
RDD<T>.isCheckpointedAndMaterialized ( )  :  boolean
RDD<T>.isLocallyCheckpointed ( )  :  boolean
RDD<T>.localCheckpoint ( )  :  RDD<T>
RDD<T>.mapPartitionsInternal ( scala.Function1<scala.collection.Iterator<T>,scala.collection.Iterator<U>> f, boolean preservesPartitioning, scala.reflect.ClassTag<U> p3 )  :  RDD<U>
RDD<T>.markCheckpointed ( )  :  void
RDD<T>.RDD..doCheckpointCalled ( )  :  boolean
RDD<T>.RDD..doCheckpointCalled_.eq ( boolean p1 )  :  void
RDD<T>.RDD..sc ( )  :  org.apache.spark.SparkContext
RDD<T>.randomSampleWithRange ( double lb, double ub, long seed )  :  RDD<T>
RDD<T>.scope ( )  :  scala.Option<RDDOperationScope>
RDD<T>.withScope ( scala.Function0<U> body )  :  U

spark-core_2.10-1.6.0.jar, SparkConf.class
package org.apache.spark
SparkConf.getAvroSchema ( )  :  scala.collection.immutable.Map<Object,String>
SparkConf.getDeprecatedConfig ( String p1, SparkConf p2 ) [static]  :  scala.Option<String>
SparkConf.getSizeAsBytes ( String key )  :  long
SparkConf.getSizeAsBytes ( String key, long defaultValue )  :  long
SparkConf.getSizeAsBytes ( String key, String defaultValue )  :  long
SparkConf.getSizeAsGb ( String key )  :  long
SparkConf.getSizeAsGb ( String key, String defaultValue )  :  long
SparkConf.getSizeAsKb ( String key )  :  long
SparkConf.getSizeAsKb ( String key, String defaultValue )  :  long
SparkConf.getSizeAsMb ( String key )  :  long
SparkConf.getSizeAsMb ( String key, String defaultValue )  :  long
SparkConf.getTimeAsMs ( String key )  :  long
SparkConf.getTimeAsMs ( String key, String defaultValue )  :  long
SparkConf.getTimeAsSeconds ( String key )  :  long
SparkConf.getTimeAsSeconds ( String key, String defaultValue )  :  long
SparkConf.logDeprecationWarning ( String p1 ) [static]  :  void
SparkConf.registerAvroSchemas ( scala.collection.Seq<org.apache.avro.Schema> schemas )  :  SparkConf

spark-core_2.10-1.6.0.jar, SparkContext.class
package org.apache.spark
SparkContext.applicationAttemptId ( )  :  scala.Option<String>
SparkContext.externalBlockStoreFolderName ( )  :  String
SparkContext.getOrCreate ( ) [static]  :  SparkContext
SparkContext.getOrCreate ( SparkConf p1 ) [static]  :  SparkContext
SparkContext.getRDDStorageInfo ( scala.Function1<rdd.RDD<?>,Object> filter )  :  storage.RDDInfo[ ]
SparkContext.isStopped ( )  :  boolean
SparkContext.killAndReplaceExecutor ( String executorId )  :  boolean
SparkContext.SparkContext.._applicationId ( )  :  String
SparkContext.SparkContext.._cleaner ( )  :  scala.Option<ContextCleaner>
SparkContext.SparkContext.._conf ( )  :  SparkConf
SparkContext.SparkContext.._dagScheduler ( )  :  scheduler.DAGScheduler
SparkContext.SparkContext.._env ( )  :  SparkEnv
SparkContext.SparkContext.._eventLogger ( )  :  scala.Option<scheduler.EventLoggingListener>
SparkContext.SparkContext.._executorAllocationManager ( )  :  scala.Option<ExecutorAllocationManager>
SparkContext.SparkContext.._heartbeatReceiver ( )  :  rpc.RpcEndpointRef
SparkContext.SparkContext.._listenerBusStarted_.eq ( boolean p1 )  :  void
SparkContext.SparkContext.._progressBar ( )  :  scala.Option<ui.ConsoleProgressBar>
SparkContext.SparkContext.._ui ( )  :  scala.Option<ui.SparkUI>
SparkContext.SparkContext..assertNotStopped ( )  :  void
SparkContext.SparkContext..postApplicationEnd ( )  :  void
SparkContext.range ( long start, long end, long step, int numSlices )  :  rdd.RDD<Object>
SparkContext.requestTotalExecutors ( int numExecutors, int localityAwareTasks, scala.collection.immutable.Map<String,Object> hostToLocalTaskCount )  :  boolean
SparkContext.runJob ( rdd.RDD<T> rdd, scala.Function1<scala.collection.Iterator<T>,U> func, scala.collection.Seq<Object> partitions, scala.reflect.ClassTag<U> p4 )  :  Object
SparkContext.runJob ( rdd.RDD<T> rdd, scala.Function2<TaskContext,scala.collection.Iterator<T>,U> func, scala.collection.Seq<Object> partitions, scala.Function2<Object,U,scala.runtime.BoxedUnit> resultHandler, scala.reflect.ClassTag<U> p5 )  :  void
SparkContext.runJob ( rdd.RDD<T> rdd, scala.Function2<TaskContext,scala.collection.Iterator<T>,U> func, scala.collection.Seq<Object> partitions, scala.reflect.ClassTag<U> p4 )  :  Object
SparkContext.setLogLevel ( String logLevel )  :  void
SparkContext.stopped ( )  :  java.util.concurrent.atomic.AtomicBoolean
SparkContext.submitMapStage ( ShuffleDependency<K,V,C> dependency )  :  SimpleFutureAction<MapOutputStatistics>
SparkContext.withScope ( scala.Function0<U> body )  :  U

spark-core_2.10-1.6.0.jar, SparkListener.class
package org.apache.spark.scheduler
SparkListener.onBlockUpdated ( SparkListenerBlockUpdated p1 ) [abstract]  :  void

spark-core_2.10-1.6.0.jar, SparkListenerApplicationStart.class
package org.apache.spark.scheduler
SparkListenerApplicationStart.appAttemptId ( )  :  scala.Option<String>
SparkListenerApplicationStart.copy ( String appName, scala.Option<String> appId, long time, String sparkUser, scala.Option<String> appAttemptId, scala.Option<scala.collection.Map<String,String>> driverLogs )  :  SparkListenerApplicationStart
SparkListenerApplicationStart.driverLogs ( )  :  scala.Option<scala.collection.Map<String,String>>
SparkListenerApplicationStart.SparkListenerApplicationStart ( String appName, scala.Option<String> appId, long time, String sparkUser, scala.Option<String> appAttemptId, scala.Option<scala.collection.Map<String,String>> driverLogs )

spark-core_2.10-1.6.0.jar, SparkListenerBlockUpdated.class
package org.apache.spark.scheduler
SparkListenerBlockUpdated.andThen ( scala.Function1<SparkListenerBlockUpdated,A> p1 ) [static]  :  scala.Function1<org.apache.spark.storage.BlockUpdatedInfo,A>
SparkListenerBlockUpdated.blockUpdatedInfo ( )  :  org.apache.spark.storage.BlockUpdatedInfo
SparkListenerBlockUpdated.canEqual ( Object p1 )  :  boolean
SparkListenerBlockUpdated.compose ( scala.Function1<A,org.apache.spark.storage.BlockUpdatedInfo> p1 ) [static]  :  scala.Function1<A,SparkListenerBlockUpdated>
SparkListenerBlockUpdated.copy ( org.apache.spark.storage.BlockUpdatedInfo blockUpdatedInfo )  :  SparkListenerBlockUpdated
SparkListenerBlockUpdated.equals ( Object p1 )  :  boolean
SparkListenerBlockUpdated.hashCode ( )  :  int
SparkListenerBlockUpdated.productArity ( )  :  int
SparkListenerBlockUpdated.productElement ( int p1 )  :  Object
SparkListenerBlockUpdated.productIterator ( )  :  scala.collection.Iterator<Object>
SparkListenerBlockUpdated.productPrefix ( )  :  String
SparkListenerBlockUpdated.SparkListenerBlockUpdated ( org.apache.spark.storage.BlockUpdatedInfo blockUpdatedInfo )
SparkListenerBlockUpdated.toString ( )  :  String

spark-core_2.10-1.6.0.jar, TaskMetrics.class
package org.apache.spark.executor
TaskMetrics.accumulatorUpdates ( )  :  scala.collection.immutable.Map<Object,Object>
TaskMetrics.getCachedHostName ( String p1 ) [static]  :  String
TaskMetrics.TaskMetrics.._hostname ( )  :  String
TaskMetrics.TaskMetrics.._hostname_.eq ( String p1 )  :  void
TaskMetrics.setAccumulatorsUpdater ( scala.Function0<scala.collection.immutable.Map<Object,Object>> accumulatorsUpdater )  :  void
TaskMetrics.updateAccumulators ( )  :  void

spark-hive_2.10-1.6.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.addJar ( String path )  :  void
HiveContext.configure ( )  :  scala.collection.immutable.Map<String,String>
HiveContext.CONVERT_CTAS ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<Object>
HiveContext.CONVERT_METASTORE_PARQUET ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<Object>
HiveContext.CONVERT_METASTORE_PARQUET_WITH_SCHEMA_MERGING ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<Object>
HiveContext.convertMetastoreParquetWithSchemaMerging ( )  :  boolean
HiveContext.defaultOverrides ( )  :  void
HiveContext.executionHive ( )  :  client.ClientWrapper
HiveContext.getSQLDialect ( )  :  org.apache.spark.sql.catalyst.ParserDialect
HiveContext.HIVE_EXECUTION_VERSION ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<String>
HiveContext.HIVE_METASTORE_BARRIER_PREFIXES ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<scala.collection.Seq<String>>
HiveContext.HIVE_METASTORE_JARS ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<String>
HiveContext.HIVE_METASTORE_SHARED_PREFIXES ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<scala.collection.Seq<String>>
HiveContext.HIVE_METASTORE_VERSION ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<String>
HiveContext.HIVE_THRIFT_SERVER_ASYNC ( ) [static]  :  org.apache.spark.sql.SQLConf.SQLConfEntry<Object>
HiveContext.HiveContext ( org.apache.spark.api.java.JavaSparkContext sc )
HiveContext.HiveContext ( org.apache.spark.SparkContext sc, org.apache.spark.sql.execution.CacheManager cacheManager, org.apache.spark.sql.execution.ui.SQLListener listener, client.ClientWrapper execHive, client.ClientInterface metaHive, boolean isRootContext )
HiveContext.hiveExecutionVersion ( ) [static]  :  String
HiveContext.hiveMetastoreBarrierPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreJars ( )  :  String
HiveContext.hiveMetastoreSharedPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreVersion ( )  :  String
HiveContext.hiveThriftServerAsync ( )  :  boolean
HiveContext.hiveThriftServerSingleSession ( )  :  boolean
HiveContext.metadataHive ( )  :  client.ClientInterface
HiveContext.newSession ( )  :  HiveContext
HiveContext.newSession ( )  :  org.apache.spark.sql.SQLContext
HiveContext.newTemporaryConfiguration ( ) [static]  :  scala.collection.immutable.Map<String,String>
HiveContext.setConf ( org.apache.spark.sql.SQLConf.SQLConfEntry<T> entry, T value )  :  void
HiveContext.substitutor ( )  :  org.apache.hadoop.hive.ql.parse.VariableSubstitution

spark-sql_2.10-1.6.0.jar, DataFrame.class
package org.apache.spark.sql
DataFrame.alias ( scala.Symbol alias )  :  DataFrame
DataFrame.alias ( String alias )  :  DataFrame
DataFrame.as ( Encoder<U> p1 )  :  Dataset<U>
DataFrame.coalesce ( int numPartitions )  :  DataFrame
DataFrame.collectToPython ( )  :  int
DataFrame.cube ( Column... cols )  :  GroupedData
DataFrame.cube ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.cube ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.cube ( String col1, String... cols )  :  GroupedData
DataFrame.DataFrame ( SQLContext sqlContext, execution.QueryExecution queryExecution )
DataFrame.describe ( scala.collection.Seq<String> cols )  :  DataFrame
DataFrame.describe ( String... cols )  :  DataFrame
DataFrame.drop ( Column col )  :  DataFrame
DataFrame.drop ( String colName )  :  DataFrame
DataFrame.dropDuplicates ( )  :  DataFrame
DataFrame.dropDuplicates ( scala.collection.Seq<String> colNames )  :  DataFrame
DataFrame.dropDuplicates ( String[ ] colNames )  :  DataFrame
DataFrame.inputFiles ( )  :  String[ ]
DataFrame.join ( DataFrame right, scala.collection.Seq<String> usingColumns )  :  DataFrame
DataFrame.join ( DataFrame right, scala.collection.Seq<String> usingColumns, String joinType )  :  DataFrame
DataFrame.join ( DataFrame right, String usingColumn )  :  DataFrame
DataFrame.na ( )  :  DataFrameNaFunctions
DataFrame.DataFrame..collect ( boolean needCallback )  :  Row[ ]
DataFrame.DataFrame..withPlan ( scala.Function0<catalyst.plans.logical.LogicalPlan> logicalPlan )  :  DataFrame
DataFrame.queryExecution ( )  :  execution.QueryExecution
DataFrame.randomSplit ( double[ ] weights )  :  DataFrame[ ]
DataFrame.randomSplit ( double[ ] weights, long seed )  :  DataFrame[ ]
DataFrame.randomSplit ( scala.collection.immutable.List<Object> weights, long seed )  :  DataFrame[ ]
DataFrame.repartition ( int numPartitions, Column... partitionExprs )  :  DataFrame
DataFrame.repartition ( int numPartitions, scala.collection.Seq<Column> partitionExprs )  :  DataFrame
DataFrame.repartition ( Column... partitionExprs )  :  DataFrame
DataFrame.repartition ( scala.collection.Seq<Column> partitionExprs )  :  DataFrame
DataFrame.rollup ( Column... cols )  :  GroupedData
DataFrame.rollup ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.rollup ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.rollup ( String col1, String... cols )  :  GroupedData
DataFrame.show ( boolean truncate )  :  void
DataFrame.show ( int numRows, boolean truncate )  :  void
DataFrame.showString ( int _numRows, boolean truncate )  :  String
DataFrame.sortWithinPartitions ( Column... sortExprs )  :  DataFrame
DataFrame.sortWithinPartitions ( scala.collection.Seq<Column> sortExprs )  :  DataFrame
DataFrame.sortWithinPartitions ( String sortCol, scala.collection.Seq<String> sortCols )  :  DataFrame
DataFrame.sortWithinPartitions ( String sortCol, String... sortCols )  :  DataFrame
DataFrame.stat ( )  :  DataFrameStatFunctions
DataFrame.takeAsList ( int n )  :  java.util.List<Row>
DataFrame.transform ( scala.Function1<DataFrame,DataFrame> t )  :  DataFrame
DataFrame.where ( String conditionExpr )  :  DataFrame
DataFrame.withColumn ( String colName, Column col, types.Metadata metadata )  :  DataFrame
DataFrame.withNewExecutionId ( scala.Function0<T> body )  :  T
DataFrame.write ( )  :  DataFrameWriter

spark-streaming-kafka_2.10-1.6.0.jar, KafkaTestUtils.class
package org.apache.spark.streaming.kafka
KafkaTestUtils.brokerAddress ( )  :  String
KafkaTestUtils.createTopic ( String topic )  :  void
KafkaTestUtils.eventually ( org.apache.spark.streaming.Time timeout, org.apache.spark.streaming.Time interval, scala.Function0<T> func )  :  T
KafkaTestUtils.isTraceEnabled ( )  :  boolean
KafkaTestUtils.KafkaTestUtils ( )
KafkaTestUtils.log ( )  :  org.slf4j.Logger
KafkaTestUtils.logDebug ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logDebug ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logError ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logError ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logInfo ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logInfo ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logName ( )  :  String
KafkaTestUtils.logTrace ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logTrace ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.logWarning ( scala.Function0<String> msg )  :  void
KafkaTestUtils.logWarning ( scala.Function0<String> msg, Throwable throwable )  :  void
KafkaTestUtils.org.apache.spark.Logging..log_ ( )  :  org.slf4j.Logger
KafkaTestUtils.org.apache.spark.Logging..log__.eq ( org.slf4j.Logger p1 )  :  void
KafkaTestUtils.KafkaTestUtils..brokerConf ( )  :  kafka.server.KafkaConfig
KafkaTestUtils.KafkaTestUtils..brokerConf_.eq ( kafka.server.KafkaConfig p1 )  :  void
KafkaTestUtils.KafkaTestUtils..brokerConfiguration ( )  :  java.util.Properties
KafkaTestUtils.KafkaTestUtils..brokerPort_.eq ( int p1 )  :  void
KafkaTestUtils.KafkaTestUtils..server ( )  :  kafka.server.KafkaServer
KafkaTestUtils.KafkaTestUtils..server_.eq ( kafka.server.KafkaServer p1 )  :  void
KafkaTestUtils.sendMessages ( String topic, java.util.Map<String,Integer> messageToFreq )  :  void
KafkaTestUtils.sendMessages ( String topic, scala.collection.immutable.Map<String,Object> messageToFreq )  :  void
KafkaTestUtils.sendMessages ( String topic, String[ ] messages )  :  void
KafkaTestUtils.setup ( )  :  void
KafkaTestUtils.teardown ( )  :  void
KafkaTestUtils.zkAddress ( )  :  String
KafkaTestUtils.zookeeperClient ( )  :  org.I0Itec.zkclient.ZkClient

spark-streaming_2.10-1.6.0.jar, Checkpoint.class
package org.apache.spark.streaming
Checkpoint.createSparkConf ( )  :  org.apache.spark.SparkConf
Checkpoint.deserialize ( java.io.InputStream p1, org.apache.spark.SparkConf p2 ) [static]  :  Checkpoint
Checkpoint.getCheckpointFiles ( String p1, scala.Option<org.apache.hadoop.fs.FileSystem> p2 ) [static]  :  scala.collection.Seq<org.apache.hadoop.fs.Path>
Checkpoint.serialize ( Checkpoint p1, org.apache.spark.SparkConf p2 ) [static]  :  byte[ ]

spark-streaming_2.10-1.6.0.jar, DStream<T>.class
package org.apache.spark.streaming.dstream
DStream<T>.baseScope ( )  :  scala.Option<String>
DStream<T>.createRDDWithLocalProperties ( org.apache.spark.streaming.Time time, boolean displayInnerRDDOps, scala.Function0<U> body )  :  U
DStream<T>.DStream..foreachRDD ( scala.Function2<org.apache.spark.rdd.RDD<T>,org.apache.spark.streaming.Time,scala.runtime.BoxedUnit> foreachFunc, boolean displayInnerRDDOps )  :  void
DStream<T>.validateAtStart ( )  :  void

spark-streaming_2.10-1.6.0.jar, InputDStream<T>.class
package org.apache.spark.streaming.dstream
InputDStream<T>.baseScope ( )  :  scala.Option<String>
InputDStream<T>.id ( )  :  int
InputDStream<T>.name ( )  :  String
InputDStream<T>.rateController ( )  :  scala.Option<org.apache.spark.streaming.scheduler.RateController>

spark-streaming_2.10-1.6.0.jar, StreamingContext.class
package org.apache.spark.streaming
StreamingContext.getActive ( ) [static]  :  scala.Option<StreamingContext>
StreamingContext.getActiveOrCreate ( scala.Function0<StreamingContext> p1 ) [static]  :  StreamingContext
StreamingContext.getActiveOrCreate ( String p1, scala.Function0<StreamingContext> p2, org.apache.hadoop.conf.Configuration p3, boolean p4 ) [static]  :  StreamingContext
StreamingContext.getNewInputStreamId ( )  :  int
StreamingContext.getStartSite ( )  :  org.apache.spark.util.CallSite
StreamingContext.getState ( )  :  StreamingContextState
StreamingContext.isCheckpointingEnabled ( )  :  boolean
StreamingContext.StreamingContext..startSite ( )  :  java.util.concurrent.atomic.AtomicReference<org.apache.spark.util.CallSite>
StreamingContext.StreamingContext..stopOnShutdown ( )  :  void
StreamingContext.StreamingContext ( String path, org.apache.spark.SparkContext sparkContext )
StreamingContext.withNamedScope ( String name, scala.Function0<U> body )  :  U
StreamingContext.withScope ( scala.Function0<U> body )  :  U

spark-streaming_2.10-1.6.0.jar, StreamingListener.class
package org.apache.spark.streaming.scheduler
StreamingListener.onOutputOperationCompleted ( StreamingListenerOutputOperationCompleted p1 ) [abstract]  :  void
StreamingListener.onOutputOperationStarted ( StreamingListenerOutputOperationStarted p1 ) [abstract]  :  void

spark-streaming_2.10-1.6.0.jar, StreamingListenerOutputOperationCompleted.class
package org.apache.spark.streaming.scheduler
StreamingListenerOutputOperationCompleted.andThen ( scala.Function1<StreamingListenerOutputOperationCompleted,A> p1 ) [static]  :  scala.Function1<OutputOperationInfo,A>
StreamingListenerOutputOperationCompleted.canEqual ( Object p1 )  :  boolean
StreamingListenerOutputOperationCompleted.compose ( scala.Function1<A,OutputOperationInfo> p1 ) [static]  :  scala.Function1<A,StreamingListenerOutputOperationCompleted>
StreamingListenerOutputOperationCompleted.copy ( OutputOperationInfo outputOperationInfo )  :  StreamingListenerOutputOperationCompleted
StreamingListenerOutputOperationCompleted.equals ( Object p1 )  :  boolean
StreamingListenerOutputOperationCompleted.hashCode ( )  :  int
StreamingListenerOutputOperationCompleted.outputOperationInfo ( )  :  OutputOperationInfo
StreamingListenerOutputOperationCompleted.productArity ( )  :  int
StreamingListenerOutputOperationCompleted.productElement ( int p1 )  :  Object
StreamingListenerOutputOperationCompleted.productIterator ( )  :  scala.collection.Iterator<Object>
StreamingListenerOutputOperationCompleted.productPrefix ( )  :  String
StreamingListenerOutputOperationCompleted.StreamingListenerOutputOperationCompleted ( OutputOperationInfo outputOperationInfo )
StreamingListenerOutputOperationCompleted.toString ( )  :  String

spark-streaming_2.10-1.6.0.jar, StreamingListenerOutputOperationStarted.class
package org.apache.spark.streaming.scheduler
StreamingListenerOutputOperationStarted.andThen ( scala.Function1<StreamingListenerOutputOperationStarted,A> p1 ) [static]  :  scala.Function1<OutputOperationInfo,A>
StreamingListenerOutputOperationStarted.canEqual ( Object p1 )  :  boolean
StreamingListenerOutputOperationStarted.compose ( scala.Function1<A,OutputOperationInfo> p1 ) [static]  :  scala.Function1<A,StreamingListenerOutputOperationStarted>
StreamingListenerOutputOperationStarted.copy ( OutputOperationInfo outputOperationInfo )  :  StreamingListenerOutputOperationStarted
StreamingListenerOutputOperationStarted.equals ( Object p1 )  :  boolean
StreamingListenerOutputOperationStarted.hashCode ( )  :  int
StreamingListenerOutputOperationStarted.outputOperationInfo ( )  :  OutputOperationInfo
StreamingListenerOutputOperationStarted.productArity ( )  :  int
StreamingListenerOutputOperationStarted.productElement ( int p1 )  :  Object
StreamingListenerOutputOperationStarted.productIterator ( )  :  scala.collection.Iterator<Object>
StreamingListenerOutputOperationStarted.productPrefix ( )  :  String
StreamingListenerOutputOperationStarted.StreamingListenerOutputOperationStarted ( OutputOperationInfo outputOperationInfo )
StreamingListenerOutputOperationStarted.toString ( )  :  String

spark-streaming_2.10-1.6.0.jar, Time.class
package org.apache.spark.streaming
Time.floor ( Duration that, Time zeroTime )  :  Time

to the top

Problems with Data Types, High Severity (17)


spark-catalyst_2.10-1.6.0.jar
package org.apache.spark.sql
[+] Row (4)

package org.apache.spark.sql.catalyst.analysis
[+] Analyzer (1)

package org.apache.spark.sql.catalyst.expressions
[+] NamedExpression (1)

spark-core_2.10-1.6.0.jar
package org.apache.spark.scheduler
[+] SparkListener (1)
[+] SparkListenerBlockUpdated (1)

spark-sql_2.10-1.6.0.jar
package org.apache.spark.sql
[+] Column (1)
[+] DataFrame (1)
[+] SQLConf (1)

spark-streaming-kafka_2.10-1.6.0.jar
package org.apache.spark.streaming.kafka
[+] KafkaTestUtils (1)

spark-streaming_2.10-1.6.0.jar
package org.apache.spark.streaming.scheduler
[+] StreamingListener (2)
[+] StreamingListenerOutputOperationCompleted (1)
[+] StreamingListenerOutputOperationStarted (1)

package org.apache.spark.streaming.ui
[+] StreamingJobProgressListener (1)

to the top

Problems with Methods, High Severity (1)


spark-core_2.10-1.6.0.jar, SparkContext
package org.apache.spark
[+] SparkContext.localProperties ( )  :  InheritableThreadLocal<java.util.Properties> (1)

to the top

Problems with Data Types, Medium Severity (3)


spark-core_2.10-1.6.0.jar
package org.apache.spark.api.java
[+] JavaRDD<T> (1)

spark-hive_2.10-1.6.0.jar
package org.apache.spark.sql.hive
[+] HiveContext.QueryExecution (1)

spark-sql_2.10-1.6.0.jar
package org.apache.spark.sql
[+] SQLContext.SparkPlanner (1)

to the top

Problems with Data Types, Low Severity (6)


spark-hive_2.10-1.6.0.jar
package org.apache.spark.sql.hive
[+] HiveContext (5)

spark-sql_2.10-1.6.0.jar
package org.apache.spark.sql
[+] DataFrame (1)

to the top

Problems with Methods, Low Severity (1)


spark-streaming_2.10-1.6.0.jar, StreamingContext
package org.apache.spark.streaming
[+] StreamingContext.stop ( boolean stopSparkContext, boolean stopGracefully )  :  void (1)

to the top

Java ARchives (8)


spark-catalyst_2.10-1.6.0.jar
spark-core_2.10-1.6.0.jar
spark-hive_2.10-1.6.0.jar
spark-mllib_2.10-1.6.0.jar
spark-sql_2.10-1.6.0.jar
spark-streaming-kafka_2.10-1.6.0.jar
spark-streaming_2.10-1.6.0.jar
spark-yarn_2.10-1.6.0.jar

to the top




Generated on Tue Feb 2 01:45:41 2016 for spark-testing-base_2.10-0.3.1 by Java API Compliance Checker 1.4.1  
A tool for checking backward compatibility of a Java library API