spark-csv पर टैग किए गए जवाब

13
स्पार्क डेटाफ़्रेम में पूर्ण स्तंभ सामग्री कैसे दिखाएं?
मैं DataFrame में डेटा लोड करने के लिए स्पार्क-सीएसवी का उपयोग कर रहा हूं। मैं एक साधारण क्वेरी करना चाहता हूं और सामग्री प्रदर्शित करता हूं: val df = sqlContext.read.format("com.databricks.spark.csv").option("header", "true").load("my.csv") df.registerTempTable("tasks") results = sqlContext.sql("select col from tasks"); results.show() कॉल लगता है: scala> results.show(); +--------------------+ | col| +--------------------+ |2015-11-16 07:15:...| …

13
स्पार्क-सीएसवी का उपयोग करके एकल सीएसवी फ़ाइल लिखें
मैं https://github.com/databricks/spark-csv का उपयोग कर रहा हूं, मैं एक एकल CSV लिखने की कोशिश कर रहा हूं, लेकिन सक्षम नहीं है, यह एक फ़ोल्डर बना रहा है। एक स्कैला फ़ंक्शन की आवश्यकता है जो पथ और फ़ाइल नाम जैसे पैरामीटर लेगा और उस CSV फ़ाइल को लिखेगा।
हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.