getCheckpointFile

类: matlab.compiler.mlspark.RDD
命名空间: matlab.compiler.mlspark

获取对 RDD 执行检查点操作时用来保存输出的文件的名称

全页展开

语法

file = getCheckpointFile(obj)

说明

file = getCheckpointFile(obj) 获取对 RDD obj 执行检查点操作时用来保存输出的文件的名称。

输入参数

全部展开

输入 RDD，指定为 RDD 对象。

输出参量

全部展开

对 RDD 执行检查点操作时用来保存输出的文件的名称，以字符向量形式返回。

示例

全部展开

获取对 RDD 执行检查点操作时用来保存输出的文件的名称。

%% Connect to Spark
sparkProp = containers.Map({'spark.executor.cores'}, {'1'});
conf = matlab.compiler.mlspark.SparkConf('AppName','myApp', ...
                        'Master','local[1]','SparkProperties',sparkProp);
sc = matlab.compiler.mlspark.SparkContext(conf);

%% getCheckpointFile
sc.setCheckpointDir('myDir')  % set the checkpoint directory
x = sc.parallelize({1,2,3})
y = x.map(@(x)({x,1}));
y.checkpoint()  % tell spark to checkpoint the RDD
y.collect()
% need to call collect, so that spark actually materializes the RDD 
% and checkpoints to the myDir directory
y.getCheckpointFile()

版本历史记录

在 R2016b 中推出

另请参阅

| | |