国产av日韩一区二区三区精品,成人性爱视频在线观看,国产,欧美,日韩,一区,www.成色av久久成人,2222eeee成人天堂

目次
FlinkがPyflinkのジョブを糸に提出するときに見つからないPythonスクリプトの解決策
ホームページ Java &#&チュートリアル PyflinkジョブをYARNアプリケーションに送信するときに、FlinkがPythonタスクスクリプトを見つけることができない問題を解決する方法は?

PyflinkジョブをYARNアプリケーションに送信するときに、FlinkがPythonタスクスクリプトを見つけることができない問題を解決する方法は?

Apr 19, 2025 pm 05:21 PM
python apache python腳本

PyflinkジョブをYARNアプリケーションに送信するときに、FlinkがPythonタスクスクリプトを見つけることができない問題を解決する方法は?

FlinkがPyflinkのジョブを糸に提出するときに見つからないPythonスクリプトの解決策

Flinkを使用してPyflinkジョブをYarnに送信する場(chǎng)合、Pythonスクリプトが見つからないエラーが発生した場(chǎng)合、通常、Pythonスクリプトパス構(gòu)成エラーまたはPython環(huán)境設(shè)定の問題によって引き起こされます。この記事では、この問題を分析して解決します。

次のコマンドを使用して、Pyflinkジョブを提出しました。

 ./flink run-application -t yarn-application \
-dyarn.application.name = flinkcdctestpython \
-dyarn.provided.lib.dirs = "hdfs:// nameservice1/pyflink/flink-dist-181" \
-pyarch hdfs://nameservice1/pyflink/pyflink181.zip \
-pycyientexec pyflink181.zip/pyflink181/bin/python \
-pyexec pyflink181.zip/pyflink181/bin/python \
-py hdfs://nameservice1/pyflink/wc2.py

エラーメッセージは次のとおりです。

 <code>2024-05-24 16:38:02,030 info org.apache.flink.client.python.pythondriver [] - pyflink181.zip/pyflink181/bin/python: can't open file 'hdfs://nameservice1/pyflink/wc2.py': [errno 2] no such file or directory</code>

このエラーは、Flinkが指定されたPythonスクリプトwc2.pyを見つけることができないことを示しています。ただし、Javaジョブを送信するときはHDFS構(gòu)成が正常です。つまり、HDFS構(gòu)成自體に問題はありません。

問題は次の側(cè)面にある可能性があります。

  1. Pythonスクリプトパス: hdfs://nameservice1/pyflink/wc2.pyパスが正しいかどうか、およびこのパスの下にwc2.pyファイルが存在するかどうかを再確認(rèn)してください。 HDFSコマンドを使用して確認(rèn)してください。

     HDFS DFS -LS HDFS://NAMESERVICE1/PYFLINK/wc2.py
  2. Python環(huán)境構(gòu)成: -pyclientexecおよび-pyexecパラメータは、python実行環(huán)境を指定します。 pyflink181.zipのPython環(huán)境が正しく構(gòu)成されており、HDFSにアクセスできることを確認(rèn)してください。パラメーターをHDFSのPython環(huán)境パスに直接指すことをお?jiǎng)幛幛筏蓼埂?/p>

     -pyclientexec hdfs://nameservice1/pyflink/pyflink181.zip/pyflink181/bin/python
    -pyexec hdfs://nameservice1/pyflink/pyflink181.zip/pyflink181/bin/python
  3. 権限の問題: FlinkジョブがHDFSでPythonスクリプトファイルにアクセスする許可があることを確認(rèn)してください。ファイルの許可を確認(rèn)してください:

     HDFS DFS -LS -H HDFS://NAMESERVICE1/PYFLINK/wc2.py
  4. FlinkおよびPyflinkバージョンの互換性: FlinkバージョンがPyflinkバージョンと互換性があることを確認(rèn)します。バージョンの不一致は問題を引き起こす可能性があります。

上記の手順を通じて、Pyflinkジョブを送信する際にFlinkがPythonスクリプトを見つけることができない問題を見つけて解決できるはずです。問題が続く場(chǎng)合は、FlinkとPyflinkのログファイルをチェックして、その他の手がかりを確認(rèn)してください。

以上がPyflinkジョブをYARNアプリケーションに送信するときに、FlinkがPythonタスクスクリプトを見つけることができない問題を解決する方法は?の詳細(xì)內(nèi)容です。詳細(xì)については、PHP 中國(guó)語(yǔ) Web サイトの他の関連記事を參照してください。

このウェブサイトの聲明
この記事の內(nèi)容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰屬します。このサイトは、それに相當(dāng)する法的責(zé)任を負(fù)いません。盜作または侵害の疑いのあるコンテンツを見つけた場(chǎng)合は、admin@php.cn までご連絡(luò)ください。

ホットAIツール

Undress AI Tool

Undress AI Tool

脫衣畫像を無(wú)料で

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード寫真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

寫真から衣服を削除するオンライン AI ツール。

Clothoff.io

Clothoff.io

AI衣類リムーバー

Video Face Swap

Video Face Swap

完全無(wú)料の AI 顔交換ツールを使用して、あらゆるビデオの顔を簡(jiǎn)単に交換できます。

ホットツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無(wú)料のコードエディター

SublimeText3 中國(guó)語(yǔ)版

SublimeText3 中國(guó)語(yǔ)版

中國(guó)語(yǔ)版、とても使いやすい

ゼンドスタジオ 13.0.1

ゼンドスタジオ 13.0.1

強(qiáng)力な PHP 統(tǒng)合開発環(huán)境

ドリームウィーバー CS6

ドリームウィーバー CS6

ビジュアル Web 開発ツール

SublimeText3 Mac版

SublimeText3 Mac版

神レベルのコード編集ソフト(SublimeText3)

PythonでAPI認(rèn)証を処理する方法 PythonでAPI認(rèn)証を処理する方法 Jul 13, 2025 am 02:22 AM

API認(rèn)証を扱うための鍵は、認(rèn)証方法を正しく理解して使用することです。 1。Apikeyは、通常、リクエストヘッダーまたはURLパラメーターに配置されている最も単純な認(rèn)証方法です。 2。BasicAuthは、內(nèi)部システムに適したBase64エンコード送信にユーザー名とパスワードを使用します。 3。OAUTH2は、最初にclient_idとclient_secretを介してトークンを取得し、次にリクエストヘッダーにbearertokenを持ち込む必要があります。 4。トークンの有効期限に対処するために、トークン管理クラスをカプセル化し、トークンを自動(dòng)的に更新できます。要するに、文書に従って適切な方法を選択し、重要な情報(bào)を安全に保存することが重要です。

Pythonで大きなJSONファイルを解析する方法は? Pythonで大きなJSONファイルを解析する方法は? Jul 13, 2025 am 01:46 AM

Pythonで大きなJSONファイルを効率的に処理する方法は? 1. IJSONライブラリを使用して、アイテムごとの解析を介してメモリオーバーフローをストリーミングして回避します。 2. JSonlines形式の場(chǎng)合は、行ごとに読み取り、json.loads()で処理できます。 3.または、大きなファイルを小さな部分に分割してから、個(gè)別に処理します。これらの方法は、メモリ制限の問題を効果的に解決し、さまざまなシナリオに適しています。

タプルの上のループ用のPython タプルの上のループ用のPython Jul 13, 2025 am 02:55 AM

Pythonでは、ループを使用してタプルを通過(guò)する方法には、要素を直接繰り返し、インデックスと要素を同時(shí)に取得し、ネストされたタプルを処理する方法が含まれます。 1。インデックスを管理せずに、for loopを直接使用して、各要素に順番に各要素にアクセスします。 2。enumerate()を使用して、同時(shí)にインデックスと値を取得します。デフォルトのインデックスは0で、開始パラメーターも指定できます。 3.ネストされたタプルはループで開梱できますが、サブタプル構(gòu)造が一貫していることを確認(rèn)する必要があります。さらに、タプルは不変であり、ループでコンテンツを変更することはできません。不要な値は\ _によって無(wú)視できます。エラーを避けるために、トラバースする前にタプルが空であるかどうかを確認(rèn)することをお?jiǎng)幛幛筏蓼埂?/p>

Pythonで非同期API呼び出しを作成する方法 Pythonで非同期API呼び出しを作成する方法 Jul 13, 2025 am 02:01 AM

Pythonは、Async/async/awaitを使用して非同期APIコールを?qū)g裝します。 Asyncを使用してCoroutine関數(shù)を定義し、asyncio.runドライバーを介して実行します。 AIOHTTPを介して非同期HTTP要求を開始し、Asyncwithを使用してクライアントを作成し、応答結(jié)果を待ちます。 asyncio.gatherを使用して、タスクリストをパッケージ化します。予防策には、同期コードの混合ではなくブロッキング操作の回避、およびJupyterがイベントループを特別に処理する必要があります。マスターイベント

Apacheで簡(jiǎn)単なHTMLファイルを提供する方法は? Apacheで簡(jiǎn)単なHTMLファイルを提供する方法は? Jul 14, 2025 am 12:52 AM

ApacheにシンプルなHTMLファイルを提供するには、最初にHTMLファイルを準(zhǔn)備し、正しいディレクトリに配置します。 1. index.htmlまたはemble.htmlなどの簡(jiǎn)単なHTMLファイルを作成します。 2.ファイルをApacheデフォルトのルートディレクトリ/var/www/html/またはカスタムパスにコピーします。 3. Apacheサービスが開始され、ブラウザを介してアクセスしてテストしてください。 4. Webサイトディレクトリを変更する必要がある場(chǎng)合は、Apache構(gòu)成ファイルのDocumentRootおよびディレクトリパスを変更し、サービスを再起動(dòng)して構(gòu)成を有効にします。プロセス全體では、ファイル拡張機(jī)能、パスアクセス許可、およびサービスステータスに注意を払い、すべての設(shè)定が正確で、ページを正常に表示できるようにします。

Pythonの他のものは何ですか Pythonの他のものは何ですか Jul 13, 2025 am 02:48 AM

Ifelseは、條件付き判斷のためにPythonで使用されるインフラストラクチャであり、條件の信頼性を通じて異なるコードブロックが実行されます。マルチコンディショニングの判斷の場(chǎng)合、Elifの使用をサポートして枝を追加し、インデントが構(gòu)文キーです。 num = 15の場(chǎng)合、プログラムは「この數(shù)値が10を超える」を出力します。割り當(dāng)てロジックが必要な場(chǎng)合、Status = "Adult" ifage> = 18else "マイナー"などの3成分演算子を使用できます。 1。Ifelseは、真または誤った條件に従って実行パスを選択します。 2。Elifは複數(shù)の條件分岐を追加できます。 3.インデントはコードの所有権を決定し、エラーは例外につながります。 4.三元演算子は、単純な割り當(dāng)てシナリオに適しています。

Pythonの純粋な機(jī)能とは何ですか Pythonの純粋な機(jī)能とは何ですか Jul 14, 2025 am 12:18 AM

Pythonの純粋な関數(shù)は、同じ入力が與えられた副作用なしで常に同じ出力を返す関數(shù)を參照しています。その特性には次のものが含まれます。1。決定論、つまり、同じ入力は常に同じ出力を生成します。 2。副作用はありません。つまり、外部変數(shù)、入力データ、外の世界との相互作用はありません。たとえば、defadd(a、b):Returna Bは純粋な機(jī)能です。これは、何回追加(2,3)が呼ばれても、プログラム內(nèi)の他のコンテンツを変更せずに常に5を返します。対照的に、グローバル変數(shù)を変更したり、入力パラメーターを変更したりする関數(shù)は、非純度関數(shù)です。純粋な機(jī)能の利點(diǎn)は次のとおりです。テストが容易で、同時(shí)実行に適し、パフォーマンスを改善するためのキャッシュの結(jié)果、Map()やFilter()などの機(jī)能的なプログラミングツールとよく一致させることができます。

ApacheのデフォルトのWebルートディレクトリは何ですか? ApacheのデフォルトのWebルートディレクトリは何ですか? Jul 15, 2025 am 01:51 AM

ApacheのデフォルトのWebルートディレクトリは、ほとんどのLinuxディストリビューションで/var/www/htmlです。これは、Apacheサーバーが特定のドキュメントルートディレクトリからファイルを提供しているためです。構(gòu)成がカスタマイズされていない場(chǎng)合、ubuntu、centos、fedoraの使用/var/www/htmlなどのシステムが、通常/usr/local/var/www、windows(xampp)はc:\ xampp \ htdocsです。現(xiàn)在のパスを確認(rèn)するには、httpd.confやapache2.confなどのApache構(gòu)成ファイルを確認(rèn)するか、phpinfo()でpを作成できます。

See all articles