6

我正在尝试从 csv 加载训练和测试数据，在 scikit/sklearn 中运行随机森林回归器，然后预测测试文件的输出。

TrainLoanData.csv 文件包含 5 列；第一列是输出，接下来的 4 列是特征。TestLoanData.csv 包含 4 列 - 特征。

当我运行代码时，我收到错误：

    predicted_probs = ["%f" % x[1] for x in predicted_probs]
IndexError: invalid index to scalar variable.

这是什么意思？

这是我的代码：

import numpy, scipy, sklearn, csv_io //csv_io from https://raw.github.com/benhamner/BioResponse/master/Benchmarks/csv_io.py
from sklearn import datasets
from sklearn.ensemble import RandomForestRegressor

def main():
    #read in the training file
    train = csv_io.read_data("TrainLoanData.csv")
    #set the training responses
    target = [x[0] for x in train]
    #set the training features
    train = [x[1:] for x in train]
    #read in the test file
    realtest = csv_io.read_data("TestLoanData.csv")

    # random forest code
    rf = RandomForestRegressor(n_estimators=10, min_samples_split=2, n_jobs=-1)
    # fit the training data
    print('fitting the model')
    rf.fit(train, target)
    # run model against test data
    predicted_probs = rf.predict(realtest)
    print predicted_probs
    predicted_probs = ["%f" % x[1] for x in predicted_probs]
    csv_io.write_delimited_file("random_forest_solution.csv", predicted_probs)

main()
4

3 回答 3

5

a 的返回值RandomForestRegressor是一个浮点数组：

In [3]: rf = RandomForestRegressor(n_estimators=10, min_samples_split=2, n_jobs=-1)

In [4]: rf.fit([[1,2,3],[4,5,6]],[-1,1])
Out[4]: 
RandomForestRegressor(bootstrap=True, compute_importances=False,
           criterion='mse', max_depth=None, max_features='auto',
           min_density=0.1, min_samples_leaf=1, min_samples_split=2,
           n_estimators=10, n_jobs=-1, oob_score=False,
           random_state=<mtrand.RandomState object at 0x7fd894d59528>,
           verbose=0)

In [5]: rf.predict([1,2,3])
Out[5]: array([-0.6])

In [6]: rf.predict([[1,2,3],[4,5,6]])
Out[6]: array([-0.6,  0.4])

所以你试图索引一个浮点数(-0.6)[1]，这是不可能的。

附带说明一下，该模型不返回概率。

于 2013-01-09T09:35:39.300 回答
2

首先，拥有示例数据来重现和调试您的问题总是有帮助的。如果它们太大或太神秘，您可以提取其中有趣的部分。

变量的内容predicted_probs似乎与您期望的不一样。它似乎是一个整数列表（或数组），这也是我所期望的。

在 sklearn 中，该X.train()方法总是采用训练数据及其对应的类（通常是整数或字符串）。然后该X.predict()方法只获取验证数据并返回预测结果，即，对于验证数据中的每一组，一个类（同样是整数或字符串）。

如果你想知道训练后的分类器的准确率有多好，你不能只训练和预测，还必须进行交叉验证，即反复训练和验证，每次检查有多少预测是正确的。sklean 有一个很好的文档，我相信你会找到相应的部分。如果没有，问我。

于 2013-01-09T09:31:18.260 回答
1

尝试使用 numpy 的“genfromtxt”而不是“csv_io.read_data”来加载数据集 - 它会自动将 csv 中的数据转换为 numpy 数组。阅读Python 数据科学入门文章将对您有用...

于 2013-01-24T17:04:36.513 回答