Tôi đang cố đọc một tệp Excel với Spark bằng Jupyter trong VSCODE, với phiên bản Java là 1. 8. 0_311 [Oracle Corporation] and version Scala of version 2. 12. 15
Nội dung chính Hiển thị
- java. lang thang. Ngoại lệ Đối số bất hợp pháp. tham số "USEHeader" bị thiếu trong các tùy chọn
- Cách nào để cài đặt com crealytics Spark trong excel?
- Com crealytics Spark excel là gì?
- Cách thức nào để ôn tập một tệp excel trong databricks?
Nội dung chính Hiển thị Hiển thị
- java. lang thang. Ngoại lệ Đối số bất hợp pháp. tham số "USEHeader" bị thiếu trong các tùy chọn
- Làm cách nào để cài đặt com crealytics spark trong excel?
- Com crealytics Spark Excel là gì?
- Làm cách nào để đọc tệp excel trong Databricks?
Đây là mã dưới đây
# import necessary library
import pandas as pd
from pyspark.sql.types import StructType
# entry point for spark's functionality
from pyspark import SparkContext, SparkConf, SQLContext
configure = SparkConf[].setAppName["name"].setMaster["local"]
sc = SparkContext[conf= configure]
sql = SQLContext[sc]
# entry point for spark's dataframes
from pyspark.sql import SparkSession
spark = SparkSession \
.builder \
.master["local"] \
.appName["pharmacy scraper"] \
.config["spark.jars.packages", "com.crealytics:spark-excel_2.11:0.12.2"] \
.getOrCreate[]
# reading excel file
df_generika = spark.read.format["com.crealytics.spark.excel"].option["useHeader", "true"].option["inferSchema", "true"].option["dataAddress", "Sheet1"].load["./../data/raw-data/generika.xlsx"]
Thật không thể, nó tạo ra một lỗi
Py4JJavaError: An error occurred while calling o36.load.
: java.lang.ClassNotFoundException:
Failed to find data source: com.crealytics.spark.excel. Please find packages at
//spark.apache.org/third-party-projects.html
Xin chào, tôi có thể biết Java. Lang ILLEGALARGUMENTException is what. tham số "USEHeader" bị thiếu trong các tùy chọn. Tôi có thể biết java là gì không. lang IllegalArgumentException. Tham số "useHeader" bị thiếu trong tùy chọn.
Tôi có thể biết java là gì không. lang IllegalArgumentException. Tham số "useHeader" bị thiếu trong tùy chọn.
Đọc tệp XLSX, mã của tôi theo DF_EXCEL = Spark. Đọc. Định dạng ["com. crealytics. tia lửa. vượt trội"]. Tùy chọn ["Tiêu đề", "Đúng"]. . df_excel= tia lửa. đọc. định dạng ["com. crealytics. tia lửa. vượt trội"]. tùy chọn ["tiêu đề", "đúng"]. tùy chọn ["treatEmptyValuesAsNulls", "false"]. tùy chọn ["inferSchema", "false"]. tùy chọn ["addColorColumns", "false"]. tải ["/FileStore/bảng/kiểm tra. xlsx"]
df_excel= spark. đọc. định dạng ["com. crealytics. tia lửa. vượt trội"]. tùy chọn ["tiêu đề", "đúng"]. tùy chọn ["treatEmptyValuesAsNulls", "false"]. tùy chọn ["inferSchema", "false"]. tùy chọn ["addColorColumns", "false"]. tải ["/FileStore/bảng/kiểm tra. xlsx"]
hiển thị [df_excel]
Sử dụng Apache Spark 2. 4. 5, Scala 2. 11 Spark-Excel 2. 11. 0. 12. 5 spark-excel 2. 11. 0. 12. 5
spark-excel 2. 11. 0. 12. 5
Full error
java. lang thang. Ngoại lệ Đối số bất hợp pháp. tham số "USEHeader" bị thiếu trong các tùy chọn
Làm cách nào để cài đặt com crealytics spark trong excel?
/databricks/spark/python/pyspark/sql/utils. py in deco[*a, **kw]
62 thử.
---> 63 trả lại f[*a, **kw]
64 ngoại trừ py4j. giao thức. Py4JJavaError là e.
Com crealytics Spark Excel là gì?
327 "Đã xảy ra lỗi khi gọi {0}{1}{2}. \N".
--> định dạng 328[target_id,". ", tên], giá trị]
329 other.
Cách làm nào để đọc tệp excel trong Databricks?
. java. lang thang. Ngoại lệ Đối số bất hợp pháp. Tham số "useHeader" bị thiếu trong tùy chọn.
tại com. crealytics. tia lửa. vượt trội. Nguồn mặc định. checkParameter[DefaultSource. scala. 68]
tại com. crealytics. tia lửa. vượt trội. Nguồn mặc định. createRelation[DefaultSource. scala. 31]
tại com. crealytics. tia lửa. vượt trội. Nguồn mặc định. createRelation[DefaultSource. scala. 18]
tại com. crealytics. tia lửa. vượt trội. Nguồn mặc định. createRelation[DefaultSource. scala. 12]
tại tổ chức. apache. tia lửa. sql. chấp hành. nguồn dữ liệu. Nguồn dữ liệu. giải quyếtRelation[DataSource. scala. 351]
tại tổ chức. apache. tia lửa. sql. DataFrameReader. loadV1Source[DataFrameReader. scala. 311]
tại tổ chức. apache. tia lửa. sql. DataFrameReader. tải [DataFrameReader. scala. 297]
tại tổ chức. apache. tia lửa. sql. DataFrameReader. tải [DataFrameReader. scala. 214]
lúc mặt trời. phản chiếu. NativeMethodAccessorImpl. gọi0[Phương thức gốc]
at sun. phản chiếu. NativeMethodAccessorImpl. gọi [NativeMethodAccessorImpl. java. 62]
lúc mặt trời. phản chiếu. DelegatingMethodAccessorImpl. gọi [DelegatingMethodAccessorImpl. java. 43]
tại java. lang thang. phản chiếu. Phương pháp. gọi [Phương thức. java. 498]
tại py4j. sự phản xạ. Phương thứcInvoker. gọi [Phương thứcInvoker. java. 244]
tại py4j. sự phản xạ. Phản ÁnhĐộng Cơ. gọi [ReflectionEngine. java. 380]
tại py4j. cổng. gọi [Cổng. java. 295]
tại py4j. mệnh lệnh. Trừu TượngLệnh. InvokeMethod[AbstractCommand. java. 132]
tại py4j. mệnh lệnh. Lệnh gọi. thực thi [CallCommand. java. 79]
tại py4j. CổngKết Nối. chạy [GatewayConnection. java. 251]
tại java. lang thang. Chủ đề. chạy [Chủ đề. java. 748]
Đây là mã dưới đây
Thật không may, nó đã tạo ra một lỗi
in
----> 1 df_excel= spark. đọc. định dạng ["com. crealytics. tia lửa. vượt trội"]. tùy chọn ["treatEmptyValuesAsNulls", "false"]. tùy chọn ["inferSchema", "false"]. tùy chọn ["addColorColumns", "false"]. tải ["/FileStore/bảng/kiểm tra. xlsx"]
2
3 hiển thị[df_excel]
/databricks/spark/python/pyspark/sql/readwriter. py in load [self, path, format, lược đồ, ** tùy chọn] 166 return self. _df [tự. _jreader. load [ Not must be Not. 168 if type [Đường dẫn]. = Danh sách. 164 tự. tùy chọn [** Tùy chọn] 165 if isInstance [đường dẫn, chuỗi cơ sở]. -> 166 tự trả về. _df [tự. _jreader. tải [đường dẫn]] đường dẫn]. = Danh sách.
164 bản thân. tùy chọn[**tùy chọn]
165 if isinstance[path, basestring].
--> 166 tự quay lại. _df[tự. _jreader. load[path]]
167 đường dẫn elif không có.
168 nếu loại [đường dẫn]. = danh sách.
/databricks 1259 CHO TEMP_ARG Trong TEMP_ARGS. Gọi [tự, *args] 1255 Trả lời = self. gateway_client. send_command [lệnh] 1256 return_value = get_return_value [ -> 1257 Trả lời trong temp_args. call[self, *args]
1255 answer = self. gateway_client. send_command[lệnh]
1256 return_value = get_return_value[
-> 1257 tự trả lời. gateway_client, tự. target_id, bản thân. name]
1258
1259 cho temp_arg trong temp_args.
/databricks/spark/python/pyspark/sql/utils. py in deco [*a, ** kW] 77 Mưa Khôn 77 MƯA. StartSwith['java. lang thang. Ngoại lệ Đối số bất hợp pháp. ']. ---> 79 Nâng cao bất hợp pháp
77 raise QueryExecutionException[s. tách ra['. ', 1][1], stackTrace]
78 nếu s. bắt đầu với ['java. lang thang. Ngoại lệ Đối số bất hợp pháp. '].
---> 79 tăng IllegalArgumentException[s. tách ra['. ', 1][1], stackTrace]
tăng 80
81 trả về deco
Ngoại lệ Đối số bất hợp pháp. 'Tham số "User"
Cách nào để cài đặt com crealytics Spark trong excel?
1 câu trả lời. .
cú pha. Thư Viện Databricks Cyi Set --Cluster-id "id Cluster"-Maven-T-Toordates "GroupId. ID hiện vật. Phiênn Bản" [TứC Là. tổ chức. jsoup. JSoup. 1. 7. 2]
BƯỚC 1. Từ đối chiếu Độ Maven, Bạn Có Thể Vào Kho
BƯỚC 2. SỬ DỤNG NH CLI Databricks Bên dưới Để Cài đặt 'Com
Com crealytics Spark excel là gì?
GitHub - Creaiytics/Spark -Excel. One plugin Spark To DooC And VIết Các tập tin Excel. Một Spark Plugin để đọc và viết các tệp Excel. Một plugin Spark để đọc và ghi tệp Excel .
Cách thức nào để ôn tập một tệp excel trong databricks?
could work. đăng nhập vào tài khoản databricks của bạn, nhấp vào cụm, sau đó nhấp đúp vào cụm bạn muốn làm việc với