у меня есть коллекция файлов в каталоге, и я хочу прочитать некоторые конкретные файлы из этих файлов как один RDD, например:
2000.txt
2001.txt
2002.txt
2003.txt
2004.txt
2005.txt
2006.txt
2007.txt
2008.txt
2009.txt
2010.txt
2011.txt
2012.txt
и я хочу прочитать каждый конкретный диапазон из этих файлов, например:
range = 4
from = 2004
then read files : 2004.txt , 2005.txt , 2006.txt , 2007.txt
as one RDD (data)
как я могу сделать это в искре scala?