Binary compatibility report for the hivemall-spark-0.0.4 library  between 1.4.0 and 1.2.0 versions   (relating to the portability of client application hivemall-spark-0.0.4.jar)

Test Info

Library Namehivemall-spark-0.0.4
Version #11.4.0
Version #21.2.0
Java Version1.7.0_75

Test Results

Total Java ARchives3
Total Methods / Classes501 / 1294
VerdictIncompatible
(61.7%)

Problem Summary

SeverityCount
Added Methods-109
Removed MethodsHigh291
Problems with
Data Types		High8
Medium1
Low1
Problems with
Methods		High0
Medium0
Low0

Added Methods (109)

spark-hive_2.10-1.2.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.createTable ( String tableName, boolean allowExisting, scala.reflect.api.TypeTags.TypeTag<A> p3 )  :  void
HiveContext.dialect ( )  :  String
HiveContext.outputBuffer ( )  :  java.io.OutputStream
HiveContext.runHive ( String cmd, int maxRows )  :  scala.collection.Seq<String>
HiveContext.sessionState ( )  :  org.apache.hadoop.hive.ql.session.SessionState
HiveContext.sql ( String sqlText )  :  org.apache.spark.sql.SchemaRDD

spark-sql_2.10-1.2.0.jar, SQLContext.class
package org.apache.spark.sql
SQLContext.abs ( catalyst.expressions.Expression e )  :  catalyst.expressions.Abs
SQLContext.applySchema ( org.apache.spark.rdd.RDD<catalyst.expressions.Row> rowRDD, catalyst.types.StructType schema )  :  SchemaRDD
SQLContext.applySchemaToPythonRDD ( org.apache.spark.rdd.RDD<Object[ ]> rdd, catalyst.types.StructType schema )  :  SchemaRDD
SQLContext.applySchemaToPythonRDD ( org.apache.spark.rdd.RDD<Object[ ]> rdd, String schemaString )  :  SchemaRDD
SQLContext.approxCountDistinct ( catalyst.expressions.Expression e, double rsd )  :  catalyst.expressions.ApproxCountDistinct
SQLContext.autoBroadcastJoinThreshold ( )  :  int
SQLContext.avg ( catalyst.expressions.Expression e )  :  catalyst.expressions.Average
SQLContext.baseRelationToSchemaRDD ( sources.BaseRelation baseRelation )  :  SchemaRDD
SQLContext.bigDecimalToLiteral ( scala.math.BigDecimal d )  :  catalyst.expressions.Literal
SQLContext.binaryToLiteral ( byte[ ] a )  :  catalyst.expressions.Literal
SQLContext.booleanToLiteral ( boolean b )  :  catalyst.expressions.Literal
SQLContext.byteToLiteral ( byte b )  :  catalyst.expressions.Literal
SQLContext.cacheQuery ( SchemaRDD query, scala.Option<String> tableName, org.apache.spark.storage.StorageLevel storageLevel )  :  void
SQLContext.clear ( )  :  void
SQLContext.codegenEnabled ( )  :  boolean
SQLContext.columnBatchSize ( )  :  int
SQLContext.columnNameOfCorruptRecord ( )  :  String
SQLContext.count ( catalyst.expressions.Expression e )  :  catalyst.expressions.Count
SQLContext.countDistinct ( scala.collection.Seq<catalyst.expressions.Expression> e )  :  catalyst.expressions.CountDistinct
SQLContext.createParquetFile ( String path, boolean allowExisting, org.apache.hadoop.conf.Configuration conf, scala.reflect.api.TypeTags.TypeTag<A> p4 )  :  SchemaRDD
SQLContext.createSchemaRDD ( org.apache.spark.rdd.RDD<A> rdd, scala.reflect.api.TypeTags.TypeTag<A> p2 )  :  SchemaRDD
SQLContext.dateToLiteral ( java.sql.Date d )  :  catalyst.expressions.Literal
SQLContext.decimalToLiteral ( catalyst.types.decimal.Decimal d )  :  catalyst.expressions.Literal
SQLContext.defaultSizeInBytes ( )  :  long
SQLContext.dialect ( )  :  String
SQLContext.doubleToLiteral ( double d )  :  catalyst.expressions.Literal
SQLContext.DslAttribute ( catalyst.expressions.AttributeReference a )  :  catalyst.dsl.package.ExpressionConversions.DslAttribute
SQLContext.DslExpression ( catalyst.expressions.Expression e )  :  catalyst.dsl.package.ExpressionConversions.DslExpression
SQLContext.DslString ( String s )  :  catalyst.dsl.package.ExpressionConversions.DslString
SQLContext.DslSymbol ( scala.Symbol sym )  :  catalyst.dsl.package.ExpressionConversions.DslSymbol
SQLContext.externalSortEnabled ( )  :  boolean
SQLContext.extraStrategies ( )  :  scala.collection.Seq<catalyst.planning.GenericStrategy<execution.SparkPlan>>
SQLContext.extraStrategies_.eq ( scala.collection.Seq<catalyst.planning.GenericStrategy<execution.SparkPlan>> p1 )  :  void
SQLContext.first ( catalyst.expressions.Expression e )  :  catalyst.expressions.First
SQLContext.floatToLiteral ( float f )  :  catalyst.expressions.Literal
SQLContext.inMemoryPartitionPruning ( )  :  boolean
SQLContext.intToLiteral ( int i )  :  catalyst.expressions.Literal
SQLContext.invalidateCache ( catalyst.plans.logical.LogicalPlan plan )  :  void
SQLContext.isParquetBinaryAsString ( )  :  boolean
SQLContext.jsonFile ( String path )  :  SchemaRDD
SQLContext.jsonFile ( String path, double samplingRatio )  :  SchemaRDD
SQLContext.jsonFile ( String path, catalyst.types.StructType schema )  :  SchemaRDD
SQLContext.jsonRDD ( org.apache.spark.rdd.RDD<String> json )  :  SchemaRDD
SQLContext.jsonRDD ( org.apache.spark.rdd.RDD<String> json, double samplingRatio )  :  SchemaRDD
SQLContext.jsonRDD ( org.apache.spark.rdd.RDD<String> json, catalyst.types.StructType schema )  :  SchemaRDD
SQLContext.last ( catalyst.expressions.Expression e )  :  catalyst.expressions.Last
SQLContext.logicalPlanToSparkQuery ( catalyst.plans.logical.LogicalPlan plan )  :  SchemaRDD
SQLContext.longToLiteral ( long l )  :  catalyst.expressions.Literal
SQLContext.lookupCachedData ( catalyst.plans.logical.LogicalPlan plan )  :  scala.Option<CachedData>
SQLContext.lookupCachedData ( SchemaRDD query )  :  scala.Option<CachedData>
SQLContext.lower ( catalyst.expressions.Expression e )  :  catalyst.expressions.Lower
SQLContext.max ( catalyst.expressions.Expression e )  :  catalyst.expressions.Max
SQLContext.min ( catalyst.expressions.Expression e )  :  catalyst.expressions.Min
SQLContext.numShufflePartitions ( )  :  int
SQLContext.CacheManager..cachedData ( )  :  scala.collection.mutable.ArrayBuffer<CachedData>
SQLContext.CacheManager..cacheLock ( )  :  java.util.concurrent.locks.ReentrantReadWriteLock
SQLContext.CacheManager._setter_.CacheManager..cachedData_.eq ( scala.collection.mutable.ArrayBuffer p1 )  :  void
SQLContext.CacheManager._setter_.CacheManager..cacheLock_.eq ( java.util.concurrent.locks.ReentrantReadWriteLock p1 )  :  void
SQLContext.SQLConf._setter_.settings_.eq ( java.util.Map p1 )  :  void
SQLContext.parquetCompressionCodec ( )  :  String
SQLContext.parquetFile ( String path )  :  SchemaRDD
SQLContext.parquetFilterPushDown ( )  :  boolean
SQLContext.parseDataType ( String dataTypeString )  :  catalyst.types.DataType
SQLContext.registerFunction ( String name, scala.Function10<?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function11<?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function12<?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function13<?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function14<?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function15<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function16<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function17<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function18<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function19<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function1<?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function20<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function21<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function22<?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function2<?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function3<?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function4<?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function5<?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function6<?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function7<?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function8<?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerFunction ( String name, scala.Function9<?,?,?,?,?,?,?,?,?,T> func, scala.reflect.api.TypeTags.TypeTag<T> p3 )  :  void
SQLContext.registerPython ( String name, byte[ ] command, java.util.Map<String,String> envVars, java.util.List<String> pythonIncludes, String pythonExec, java.util.List<org.apache.spark.broadcast.Broadcast<org.apache.spark.api.python.PythonBroadcast>> broadcastVars, org.apache.spark.Accumulator<java.util.List<byte[ ]>> accumulator, String stringDataType )  :  void
SQLContext.registerRDDAsTable ( SchemaRDD rdd, String tableName )  :  void
SQLContext.settings ( )  :  java.util.Map<String,String>
SQLContext.shortToLiteral ( short s )  :  catalyst.expressions.Literal
SQLContext.sql ( String sqlText )  :  SchemaRDD
SQLContext.sqlParser ( )  :  catalyst.SparkSQLParser
SQLContext.sqrt ( catalyst.expressions.Expression e )  :  catalyst.expressions.Sqrt
SQLContext.stringToLiteral ( String s )  :  catalyst.expressions.Literal
SQLContext.sum ( catalyst.expressions.Expression e )  :  catalyst.expressions.Sum
SQLContext.sumDistinct ( catalyst.expressions.Expression e )  :  catalyst.expressions.SumDistinct
SQLContext.symbolToUnresolvedAttribute ( scala.Symbol s )  :  catalyst.analysis.UnresolvedAttribute
SQLContext.table ( String tableName )  :  SchemaRDD
SQLContext.timestampToLiteral ( java.sql.Timestamp t )  :  catalyst.expressions.Literal
SQLContext.tryUncacheQuery ( SchemaRDD query, boolean blocking )  :  boolean
SQLContext.uncacheQuery ( SchemaRDD query, boolean blocking )  :  void
SQLContext.upper ( catalyst.expressions.Expression e )  :  catalyst.expressions.Upper
SQLContext.useCachedData ( catalyst.plans.logical.LogicalPlan plan )  :  catalyst.plans.logical.LogicalPlan
SQLContext.useCompression ( )  :  boolean

to the top

Removed Methods (291)

spark-hive_2.10-1.4.0.jar, HiveContext.class
package org.apache.spark.sql.hive
HiveContext.configure ( )  :  scala.collection.immutable.Map<String,String>
HiveContext.convertCTAS ( )  :  boolean
HiveContext.convertMetastoreParquetWithSchemaMerging ( )  :  boolean
HiveContext.createSession ( )  :  HiveContext.SQLSession
HiveContext.createSession ( )  :  org.apache.spark.sql.SQLContext.SQLSession
HiveContext.dialectClassName ( )  :  String
HiveContext.executionHive ( )  :  client.ClientWrapper
HiveContext.HIVE_METASTORE_JARS ( ) [static]  :  String
HiveContext.HIVE_METASTORE_VERSION ( ) [static]  :  String
HiveContext.hiveExecutionVersion ( ) [static]  :  String
HiveContext.hiveMetastoreBarrierPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreJars ( )  :  String
HiveContext.hiveMetastoreSharedPrefixes ( )  :  scala.collection.Seq<String>
HiveContext.hiveMetastoreVersion ( )  :  String
HiveContext.invalidateTable ( String tableName )  :  void
HiveContext.metadataHive ( )  :  client.ClientInterface
HiveContext.newTemporaryConfiguration ( ) [static]  :  scala.collection.immutable.Map<String,String>
HiveContext.refreshTable ( String tableName )  :  void
HiveContext.substitutor ( )  :  org.apache.hadoop.hive.ql.parse.VariableSubstitution

spark-hive_2.10-1.4.0.jar, HiveFunctionWrapper.class
package org.apache.spark.sql.hive
HiveFunctionWrapper.andThen ( scala.Function1<HiveFunctionWrapper,A> p1 ) [static]  :  scala.Function1<String,A>
HiveFunctionWrapper.canEqual ( Object p1 )  :  boolean
HiveFunctionWrapper.compose ( scala.Function1<A,String> p1 ) [static]  :  scala.Function1<A,HiveFunctionWrapper>
HiveFunctionWrapper.copy ( String functionClassName )  :  HiveFunctionWrapper
HiveFunctionWrapper.deserializeObjectByKryo ( com.esotericsoftware.kryo.Kryo kryo, java.io.InputStream in, Class<?> clazz, scala.reflect.ClassTag<T> p4 )  :  T
HiveFunctionWrapper.equals ( Object p1 )  :  boolean
HiveFunctionWrapper.hashCode ( )  :  int
HiveFunctionWrapper.productArity ( )  :  int
HiveFunctionWrapper.productElement ( int p1 )  :  Object
HiveFunctionWrapper.productIterator ( )  :  scala.collection.Iterator<Object>
HiveFunctionWrapper.productPrefix ( )  :  String
HiveFunctionWrapper.serializeObjectByKryo ( com.esotericsoftware.kryo.Kryo kryo, Object plan, java.io.OutputStream out )  :  void
HiveFunctionWrapper.toString ( )  :  String

spark-hive_2.10-1.4.0.jar, HiveGenericUdtf.class
package org.apache.spark.sql.hive
HiveGenericUdtf.HiveGenericUdtf ( HiveFunctionWrapper funcWrapper, scala.collection.Seq<org.apache.spark.sql.catalyst.expressions.Expression> children )

spark-sql_2.10-1.4.0.jar, Column.class
package org.apache.spark.sql
Column.alias ( String alias )  :  Column
Column.and ( Column other )  :  Column
Column.apply ( Object extraction )  :  Column
Column.as ( scala.collection.Seq<String> aliases )  :  Column
Column.as ( scala.Symbol alias )  :  Column
Column.as ( String alias )  :  Column
Column.as ( String alias, types.Metadata metadata )  :  Column
Column.as ( String[ ] aliases )  :  Column
Column.asc ( )  :  Column
Column.between ( Object lowerBound, Object upperBound )  :  Column
Column.bitwiseAND ( Object other )  :  Column
Column.bitwiseOR ( Object other )  :  Column
Column.bitwiseXOR ( Object other )  :  Column
Column.cast ( types.DataType to )  :  Column
Column.cast ( String to )  :  Column
Column.Column ( catalyst.expressions.Expression expr )
Column.Column ( String name )
Column.contains ( Object other )  :  Column
Column.desc ( )  :  Column
Column.divide ( Object other )  :  Column
Column.endsWith ( Column other )  :  Column
Column.endsWith ( String literal )  :  Column
Column.eqNullSafe ( Object other )  :  Column
Column.equals ( Object that )  :  boolean
Column.equalTo ( Object other )  :  Column
Column.explain ( boolean extended )  :  void
Column.expr ( )  :  catalyst.expressions.Expression
Column.geq ( Object other )  :  Column
Column.getField ( String fieldName )  :  Column
Column.getItem ( Object key )  :  Column
Column.gt ( Object other )  :  Column
Column.hashCode ( )  :  int
Column.in ( Column... list )  :  Column
Column.in ( scala.collection.Seq<Column> list )  :  Column
Column.isNotNull ( )  :  Column
Column.isNull ( )  :  Column
Column.isTraceEnabled ( )  :  boolean
Column.leq ( Object other )  :  Column
Column.like ( String literal )  :  Column
Column.log ( )  :  org.slf4j.Logger
Column.logDebug ( scala.Function0<String> msg )  :  void
Column.logDebug ( scala.Function0<String> msg, Throwable throwable )  :  void
Column.logError ( scala.Function0<String> msg )  :  void
Column.logError ( scala.Function0<String> msg, Throwable throwable )  :  void
Column.logInfo ( scala.Function0<String> msg )  :  void
Column.logInfo ( scala.Function0<String> msg, Throwable throwable )  :  void
Column.logName ( )  :  String
Column.logTrace ( scala.Function0<String> msg )  :  void
Column.logTrace ( scala.Function0<String> msg, Throwable throwable )  :  void
Column.logWarning ( scala.Function0<String> msg )  :  void
Column.logWarning ( scala.Function0<String> msg, Throwable throwable )  :  void
Column.lt ( Object other )  :  Column
Column.minus ( Object other )  :  Column
Column.mod ( Object other )  :  Column
Column.multiply ( Object other )  :  Column
Column.notEqual ( Object other )  :  Column
Column.or ( Column other )  :  Column
Column.org.apache.spark.Logging..log_ ( )  :  org.slf4j.Logger
Column.org.apache.spark.Logging..log__.eq ( org.slf4j.Logger p1 )  :  void
Column.otherwise ( Object value )  :  Column
Column.over ( expressions.WindowSpec window )  :  Column
Column.plus ( Object other )  :  Column
Column.rlike ( String literal )  :  Column
Column.startsWith ( Column other )  :  Column
Column.startsWith ( String literal )  :  Column
Column.substr ( int startPos, int len )  :  Column
Column.substr ( Column startPos, Column len )  :  Column
Column.toString ( )  :  String
Column.unapply ( Column p1 ) [static]  :  scala.Option<catalyst.expressions.Expression>
Column.unary_.bang ( )  :  Column
Column.unary_.minus ( )  :  Column
Column.when ( Column condition, Object value )  :  Column

spark-sql_2.10-1.4.0.jar, DataFrame.class
package org.apache.spark.sql
DataFrame.agg ( java.util.Map<String,String> exprs )  :  DataFrame
DataFrame.agg ( Column expr, Column... exprs )  :  DataFrame
DataFrame.agg ( Column expr, scala.collection.Seq<Column> exprs )  :  DataFrame
DataFrame.agg ( scala.collection.immutable.Map<String,String> exprs )  :  DataFrame
DataFrame.agg ( scala.Tuple2<String,String> aggExpr, scala.collection.Seq<scala.Tuple2<String,String>> aggExprs )  :  DataFrame
DataFrame.apply ( String colName )  :  Column
DataFrame.as ( scala.Symbol alias )  :  DataFrame
DataFrame.as ( String alias )  :  DataFrame
DataFrame.cache ( )  :  DataFrame
DataFrame.cache ( )  :  RDDApi
DataFrame.coalesce ( int numPartitions )  :  DataFrame
DataFrame.col ( String colName )  :  Column
DataFrame.collect ( )  :  Object
DataFrame.collect ( )  :  Row[ ]
DataFrame.collectAsList ( )  :  java.util.List<Row>
DataFrame.columns ( )  :  String[ ]
DataFrame.count ( )  :  long
DataFrame.cube ( Column... cols )  :  GroupedData
DataFrame.cube ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.cube ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.cube ( String col1, String... cols )  :  GroupedData
DataFrame.DataFrame ( SQLContext sqlContext, catalyst.plans.logical.LogicalPlan logicalPlan )
DataFrame.DataFrame ( SQLContext sqlContext, SQLContext.QueryExecution queryExecution )
DataFrame.describe ( scala.collection.Seq<String> cols )  :  DataFrame
DataFrame.describe ( String... cols )  :  DataFrame
DataFrame.distinct ( )  :  DataFrame
DataFrame.drop ( String colName )  :  DataFrame
DataFrame.dropDuplicates ( )  :  DataFrame
DataFrame.dropDuplicates ( scala.collection.Seq<String> colNames )  :  DataFrame
DataFrame.dropDuplicates ( String[ ] colNames )  :  DataFrame
DataFrame.dtypes ( )  :  scala.Tuple2<String,String>[ ]
DataFrame.except ( DataFrame other )  :  DataFrame
DataFrame.explain ( )  :  void
DataFrame.explain ( boolean extended )  :  void
DataFrame.explode ( scala.collection.Seq<Column> input, scala.Function1<Row,scala.collection.TraversableOnce<A>> f, scala.reflect.api.TypeTags.TypeTag<A> p3 )  :  DataFrame
DataFrame.explode ( String inputColumn, String outputColumn, scala.Function1<A,scala.collection.TraversableOnce<B>> f, scala.reflect.api.TypeTags.TypeTag<B> p4 )  :  DataFrame
DataFrame.filter ( Column condition )  :  DataFrame
DataFrame.filter ( String conditionExpr )  :  DataFrame
DataFrame.first ( )  :  Object
DataFrame.first ( )  :  Row
DataFrame.flatMap ( scala.Function1<Row,scala.collection.TraversableOnce<R>> f, scala.reflect.ClassTag<R> p2 )  :  org.apache.spark.rdd.RDD<R>
DataFrame.foreach ( scala.Function1<Row,scala.runtime.BoxedUnit> f )  :  void
DataFrame.foreachPartition ( scala.Function1<scala.collection.Iterator<Row>,scala.runtime.BoxedUnit> f )  :  void
DataFrame.groupBy ( Column... cols )  :  GroupedData
DataFrame.groupBy ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.groupBy ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.groupBy ( String col1, String... cols )  :  GroupedData
DataFrame.head ( )  :  Row
DataFrame.head ( int n )  :  Row[ ]
DataFrame.intersect ( DataFrame other )  :  DataFrame
DataFrame.isLocal ( )  :  boolean
DataFrame.javaRDD ( )  :  org.apache.spark.api.java.JavaRDD<Row>
DataFrame.javaToPython ( )  :  org.apache.spark.api.java.JavaRDD<byte[ ]>
DataFrame.join ( DataFrame right )  :  DataFrame
DataFrame.join ( DataFrame right, Column joinExprs )  :  DataFrame
DataFrame.join ( DataFrame right, Column joinExprs, String joinType )  :  DataFrame
DataFrame.join ( DataFrame right, String usingColumn )  :  DataFrame
DataFrame.limit ( int n )  :  DataFrame
DataFrame.logicalPlan ( )  :  catalyst.plans.logical.LogicalPlan
DataFrame.map ( scala.Function1<Row,R> f, scala.reflect.ClassTag<R> p2 )  :  org.apache.spark.rdd.RDD<R>
DataFrame.mapPartitions ( scala.Function1<scala.collection.Iterator<Row>,scala.collection.Iterator<R>> f, scala.reflect.ClassTag<R> p2 )  :  org.apache.spark.rdd.RDD<R>
DataFrame.na ( )  :  DataFrameNaFunctions
DataFrame.numericColumns ( )  :  scala.collection.Seq<catalyst.expressions.Expression>
DataFrame.orderBy ( Column... sortExprs )  :  DataFrame
DataFrame.orderBy ( scala.collection.Seq<Column> sortExprs )  :  DataFrame
DataFrame.orderBy ( String sortCol, scala.collection.Seq<String> sortCols )  :  DataFrame
DataFrame.orderBy ( String sortCol, String... sortCols )  :  DataFrame
DataFrame.DataFrame..logicalPlanToDataFrame ( catalyst.plans.logical.LogicalPlan logicalPlan )  :  DataFrame
DataFrame.persist ( )  :  DataFrame
DataFrame.persist ( )  :  RDDApi
DataFrame.persist ( org.apache.spark.storage.StorageLevel newLevel )  :  DataFrame
DataFrame.persist ( org.apache.spark.storage.StorageLevel newLevel )  :  RDDApi
DataFrame.printSchema ( )  :  void
DataFrame.queryExecution ( )  :  SQLContext.QueryExecution
DataFrame.randomSplit ( double[ ] weights )  :  DataFrame[ ]
DataFrame.randomSplit ( double[ ] weights, long seed )  :  DataFrame[ ]
DataFrame.randomSplit ( scala.collection.immutable.List<Object> weights, long seed )  :  DataFrame[ ]
DataFrame.rdd ( )  :  org.apache.spark.rdd.RDD<Row>
DataFrame.registerTempTable ( String tableName )  :  void
DataFrame.repartition ( int numPartitions )  :  DataFrame
DataFrame.resolve ( String colName )  :  catalyst.expressions.NamedExpression
DataFrame.rollup ( Column... cols )  :  GroupedData
DataFrame.rollup ( scala.collection.Seq<Column> cols )  :  GroupedData
DataFrame.rollup ( String col1, scala.collection.Seq<String> cols )  :  GroupedData
DataFrame.rollup ( String col1, String... cols )  :  GroupedData
DataFrame.sample ( boolean withReplacement, double fraction )  :  DataFrame
DataFrame.sample ( boolean withReplacement, double fraction, long seed )  :  DataFrame
DataFrame.schema ( )  :  types.StructType
DataFrame.select ( Column... cols )  :  DataFrame
DataFrame.select ( scala.collection.Seq<Column> cols )  :  DataFrame
DataFrame.select ( String col, scala.collection.Seq<String> cols )  :  DataFrame
DataFrame.select ( String col, String... cols )  :  DataFrame
DataFrame.selectExpr ( scala.collection.Seq<String> exprs )  :  DataFrame
DataFrame.selectExpr ( String... exprs )  :  DataFrame
DataFrame.show ( )  :  void
DataFrame.show ( int numRows )  :  void
DataFrame.showString ( int numRows )  :  String
DataFrame.sort ( Column... sortExprs )  :  DataFrame
DataFrame.sort ( scala.collection.Seq<Column> sortExprs )  :  DataFrame
DataFrame.sort ( String sortCol, scala.collection.Seq<String> sortCols )  :  DataFrame
DataFrame.sort ( String sortCol, String... sortCols )  :  DataFrame
DataFrame.sqlContext ( )  :  SQLContext
DataFrame.stat ( )  :  DataFrameStatFunctions
DataFrame.take ( int n )  :  Object
DataFrame.take ( int n )  :  Row[ ]
DataFrame.toDF ( )  :  DataFrame
DataFrame.toDF ( scala.collection.Seq<String> colNames )  :  DataFrame
DataFrame.toDF ( String... colNames )  :  DataFrame
DataFrame.toJavaRDD ( )  :  org.apache.spark.api.java.JavaRDD<Row>
DataFrame.toJSON ( )  :  org.apache.spark.rdd.RDD<String>
DataFrame.toString ( )  :  String
DataFrame.unionAll ( DataFrame other )  :  DataFrame
DataFrame.unpersist ( )  :  DataFrame
DataFrame.unpersist ( )  :  RDDApi
DataFrame.unpersist ( boolean blocking )  :  DataFrame
DataFrame.unpersist ( boolean blocking )  :  RDDApi
DataFrame.where ( Column condition )  :  DataFrame
DataFrame.withColumn ( String colName, Column col )  :  DataFrame
DataFrame.withColumnRenamed ( String existingName, String newName )  :  DataFrame
DataFrame.write ( )  :  DataFrameWriter

spark-sql_2.10-1.4.0.jar, GroupedData.class
package org.apache.spark.sql
GroupedData.agg ( java.util.Map<String,String> exprs )  :  DataFrame
GroupedData.agg ( Column expr, Column... exprs )  :  DataFrame
GroupedData.agg ( Column expr, scala.collection.Seq<Column> exprs )  :  DataFrame
GroupedData.agg ( scala.collection.immutable.Map<String,String> exprs )  :  DataFrame
GroupedData.agg ( scala.Tuple2<String,String> aggExpr, scala.collection.Seq<scala.Tuple2<String,String>> aggExprs )  :  DataFrame
GroupedData.apply ( DataFrame p1, scala.collection.Seq<catalyst.expressions.Expression> p2, GroupedData.GroupType p3 ) [static]  :  GroupedData
GroupedData.avg ( scala.collection.Seq<String> colNames )  :  DataFrame
GroupedData.avg ( String... colNames )  :  DataFrame
GroupedData.count ( )  :  DataFrame
GroupedData.GroupedData ( DataFrame df, scala.collection.Seq<catalyst.expressions.Expression> groupingExprs, GroupedData.GroupType groupType )
GroupedData.max ( scala.collection.Seq<String> colNames )  :  DataFrame
GroupedData.max ( String... colNames )  :  DataFrame
GroupedData.mean ( scala.collection.Seq<String> colNames )  :  DataFrame
GroupedData.mean ( String... colNames )  :  DataFrame
GroupedData.min ( scala.collection.Seq<String> colNames )  :  DataFrame
GroupedData.min ( String... colNames )  :  DataFrame
GroupedData.GroupedData..strToExpr ( String expr )  :  scala.Function1<catalyst.expressions.Expression,catalyst.expressions.Expression>
GroupedData.sum ( scala.collection.Seq<String> colNames )  :  DataFrame
GroupedData.sum ( String... colNames )  :  DataFrame

spark-sql_2.10-1.4.0.jar, SQLConf.class
package org.apache.spark.sql
SQLConf.dataFrameRetainGroupColumns ( )  :  boolean

spark-sql_2.10-1.4.0.jar, SQLContext.class
package org.apache.spark.sql
SQLContext.applySchemaToPythonRDD ( org.apache.spark.rdd.RDD<Object[ ]> rdd, types.StructType schema )  :  DataFrame
SQLContext.applySchemaToPythonRDD ( org.apache.spark.rdd.RDD<Object[ ]> rdd, String schemaString )  :  DataFrame
SQLContext.baseRelationToDataFrame ( sources.BaseRelation baseRelation )  :  DataFrame
SQLContext.cacheManager ( )  :  execution.CacheManager
SQLContext.conf ( )  :  SQLConf
SQLContext.createDataFrame ( org.apache.spark.api.java.JavaRDD<?> rdd, Class<?> beanClass )  :  DataFrame
SQLContext.createDataFrame ( org.apache.spark.api.java.JavaRDD<Row> rowRDD, types.StructType schema )  :  DataFrame
SQLContext.createDataFrame ( org.apache.spark.rdd.RDD<?> rdd, Class<?> beanClass )  :  DataFrame
SQLContext.createDataFrame ( org.apache.spark.rdd.RDD<A> rdd, scala.reflect.api.TypeTags.TypeTag<A> p2 )  :  DataFrame
SQLContext.createDataFrame ( org.apache.spark.rdd.RDD<Row> rowRDD, types.StructType schema )  :  DataFrame
SQLContext.createDataFrame ( org.apache.spark.rdd.RDD<Row> rowRDD, types.StructType schema, boolean needsConversion )  :  DataFrame
SQLContext.createDataFrame ( scala.collection.Seq<A> data, scala.reflect.api.TypeTags.TypeTag<A> p2 )  :  DataFrame
SQLContext.createExternalTable ( String tableName, String path )  :  DataFrame
SQLContext.createExternalTable ( String tableName, String path, String source )  :  DataFrame
SQLContext.createExternalTable ( String tableName, String source, java.util.Map<String,String> options )  :  DataFrame
SQLContext.createExternalTable ( String tableName, String source, types.StructType schema, java.util.Map<String,String> options )  :  DataFrame
SQLContext.createExternalTable ( String tableName, String source, types.StructType schema, scala.collection.immutable.Map<String,String> options )  :  DataFrame
SQLContext.createExternalTable ( String tableName, String source, scala.collection.immutable.Map<String,String> options )  :  DataFrame
SQLContext.createSession ( )  :  SQLContext.SQLSession
SQLContext.currentSession ( )  :  SQLContext.SQLSession
SQLContext.defaultSession ( )  :  SQLContext.SQLSession
SQLContext.detachSession ( )  :  void
SQLContext.dialectClassName ( )  :  String
SQLContext.emptyDataFrame ( )  :  DataFrame
SQLContext.experimental ( )  :  ExperimentalMethods
SQLContext.getOrCreate ( org.apache.spark.SparkContext p1 ) [static]  :  SQLContext
SQLContext.getSchema ( Class<?> beanClass )  :  scala.collection.Seq<catalyst.expressions.AttributeReference>
SQLContext.getSQLDialect ( )  :  catalyst.ParserDialect
SQLContext.implicits ( )  :  SQLContext.implicits.
SQLContext.openSession ( )  :  SQLContext.SQLSession
SQLContext.parquetFile ( String... paths )  :  DataFrame
SQLContext.parseDataType ( String dataTypeString )  :  types.DataType
SQLContext.range ( long start, long end )  :  DataFrame
SQLContext.range ( long start, long end, long step, int numPartitions )  :  DataFrame
SQLContext.read ( )  :  DataFrameReader
SQLContext.registerDataFrameAsTable ( DataFrame df, String tableName )  :  void
SQLContext.sql ( String sqlText )  :  DataFrame
SQLContext.SQLContext ( org.apache.spark.api.java.JavaSparkContext sparkContext )
SQLContext.sqlParser ( )  :  SparkSQLParser
SQLContext.table ( String tableName )  :  DataFrame
SQLContext.tableNames ( )  :  String[ ]
SQLContext.tableNames ( String databaseName )  :  String[ ]
SQLContext.tables ( )  :  DataFrame
SQLContext.tables ( String databaseName )  :  DataFrame
SQLContext.tlSession ( )  :  ThreadLocal<SQLContext.SQLSession>
SQLContext.udf ( )  :  UDFRegistration

to the top

Problems with Data Types, High Severity (8)

spark-hive_2.10-1.4.0.jar
package org.apache.spark.sql.hive
[+] HiveContext.QueryExecution (1)
[+] HiveFunctionWrapper (2)

spark-sql_2.10-1.4.0.jar
package org.apache.spark.sql
[+] Column (1)
[+] DataFrame (1)
[+] GroupedData (1)
[+] SQLContext.QueryExecution (1)

package org.apache.spark.sql.sources
[+] DDLParser (1)

to the top

Problems with Data Types, Medium Severity (1)

spark-sql_2.10-1.4.0.jar
package org.apache.spark.sql.sources
[+] DDLParser (1)

to the top

Problems with Data Types, Low Severity (1)

spark-hive_2.10-1.4.0.jar
package org.apache.spark.sql.hive
[+] HiveContext (1)

to the top

Java ARchives (3)

spark-hive_2.10-1.4.0.jar
spark-mllib_2.10-1.4.0.jar
spark-sql_2.10-1.4.0.jar

to the top



Generated on Tue Aug 18 12:54:42 2015 for hivemall-spark-0.0.4 by Java API Compliance Checker 1.4.1  
A tool for checking backward compatibility of a Java library API