我正在尝试将代码从Python转换为Scala，我陷入了scikit-learn中存在的函数中，而在Scala Spark中找不到它
<p
是否可以通过指定我想要的实际大小而不是使用比率将数据帧分为训练集和测试集？我看到大多数示例
我有一个非常大的短信数据集（大约3.5M）。我正在使用tf-idf向量来表示此数据集中的每个消息。我想将
我是新来的火花。我正在使用以下配置集在Spark独立版本（v3.0.0）中编写机器学习算法：
<pre><code>Spark
我创建了一个Spark Scala项目来测试XGBoost4J-Spark。该项目成功构建，但是在运行脚本时出现此错误：
<pre
我想使用Spark MLlib的BinaryClassificationMetrics中可用的二进制分类指标，例如precisionByThreshold和retretByThreshold
是否可以使用groupBy子句或某种聚合方法从pyspark的<code>spark.mllib</code>库中应用KS测试？
例如，我有一个数
我一直在玩Databrick笔记本，但遇到了一个奇怪的问题。逻辑是我从文件中读取<code>parsed_points_df</code>，对
我们需要将（火花）机器学习模型存储到文件系统或数据库中，以便其他系统可以通过该模型运行新数
从数据集中获取模型的方法是使用：
<pre><code>val model = fpgrowth.fit(dataset)
</code></pre>
我认为<code>fit</co
我正在尝试加速数据块上的Spark ML管道。
目前，为具有2000行3列的数据帧训练SparkML管道需要花费35
<pre><code>Dataset <Row> ds = spark.read()
.option("header", false)
.option("inferSchema", true)
.csv("resul
我是使用Spark的MLLib Python API的新手。我有CSV格式的数据，如下所示：
<pre><code>Label 0 1 2 3 4 5
Apache spark具有可用的TF-IDF算法：
<a href="https://spark.apache.org/docs/latest/ml-features.html#tf-idf" rel="nofollow noreferr
在我的pyspark脚本中，我是
<ol>
<li>加载所有用户（约1700万）</li>
<li>加载所有项目（约60,000）</li>
<li>
如何在Java中将字符串ID转换为整数
<pre><code> JavaRDD<Rating> ratings = feedbackRDD.map((Function<Document, Rati
我有一个表示（X，Y，value）的RDD [Long，Long，Double]。 X和Y值缺失。
我想将其转换为X x Y矩阵，元素
我是pyspark和Apache Spark机器学习库的新手。
我正在尝试将OneHotEncoder应用于Spark MLlib中的几个分类列。
首
我是pyspark和Apache Spark机器学习库的新手。我正在尝试将OneHotEncoder应用于Spark MLlib中的几个分类列。
我遵
我在一个13MB的数据集（具有5万行的搅动数据集）和一个带参数网格的GBM数据集上使用Spark ML，已经两个
