[jenkinsci-ja:429] ジョブ実行途中でたまにこける現象について

Previous Topic Next Topic
 
classic Classic list List threaded Threaded
4 messages Options
Reply | Threaded
Open this post in threaded view
|

[jenkinsci-ja:429] ジョブ実行途中でたまにこける現象について

Mucho
お世話になっております。Muchoです。
またしても質問ですが、よろしくお願いします。
 
ジョブの実行途中に、任意のタイミングで以下のようなエラーを出して止まってしまいます。
ジョブの内容は、SVN更新⇒プロジェクトをビルドするというものです。
発生するタイミングは、更新中だったり、ビルド中だったりでまちまちで、そもそもエラーが発生せず正常に完走できる場合も多々あります。
これは何に起因して発生している問題なのでしょうか。
何かしらのプラグインが悪さしてるんでしょうか?
環境は、サービスが走っているサーバーもJNLPスレーブも、Windows7 64bit です。
Jenkins本体は、1.492 (Windows) です。
 
何かお気づきの方がおられましたらご指摘いただけないでしょうか。
よろしくお願いします。
 
 
FATAL: スクリプトファイル C:\[Users]\AppData\Local\Temp\hudson888886527474389183.bat を削除できません
hudson.util.IOException2: remote file operation failed: C:\[Users]\AppData\Local\Temp\hudson888886527474389183.bat at [hidden email]
 at hudson.FilePath.act(FilePath.java:848)
 at hudson.FilePath.act(FilePath.java:825)
 at hudson.FilePath.delete(FilePath.java:1202)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:92)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:58)
 at hudson.tasks.BuildStepMonitor$1.perform(BuildStepMonitor.java:19)
 at hudson.model.AbstractBuild$AbstractBuildExecution.perform(AbstractBuild.java:804)
 at hudson.model.Build$BuildExecution.build(Build.java:199)
 at hudson.model.Build$BuildExecution.doRun(Build.java:160)
 at hudson.model.AbstractBuild$AbstractBuildExecution.run(AbstractBuild.java:586)
 at hudson.model.Run.execute(Run.java:1518)
 at hudson.model.FreeStyleBuild.run(FreeStyleBuild.java:46)
 at hudson.model.ResourceController.execute(ResourceController.java:88)
 at hudson.model.Executor.run(Executor.java:236)
Caused by: hudson.remoting.ChannelClosedException: channel is already closed
 at hudson.remoting.Channel.send(Channel.java:494)
 at hudson.remoting.Request.call(Request.java:129)
 at hudson.remoting.Channel.call(Channel.java:665)
 at hudson.FilePath.act(FilePath.java:841)
 ... 13 more
Caused by: java.net.SocketException: Software caused connection abort: recv failed
 at java.net.SocketInputStream.socketRead0(Native Method)
 at java.net.SocketInputStream.read(Unknown Source)
 at java.io.BufferedInputStream.fill(Unknown Source)
 at java.io.BufferedInputStream.read(Unknown Source)
 at java.io.ObjectInputStream$PeekInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peekByte(Unknown Source)
 at java.io.ObjectInputStream.readObject0(Unknown Source)
 at java.io.ObjectInputStream.readObject(Unknown Source)
 at hudson.remoting.Command.readFrom(Command.java:90)
 at hudson.remoting.ClassicCommandTransport.read(ClassicCommandTransport.java:59)
 at hudson.remoting.SynchronousCommandTransport$ReaderThread.run(SynchronousCommandTransport.java:48)
FATAL: hudson.remoting.RequestAbortedException: java.net.SocketException: Software caused connection abort: recv failed
hudson.remoting.RequestAbortedException: hudson.remoting.RequestAbortedException: java.net.SocketException: Software caused connection abort: recv failed
 at hudson.remoting.Request.call(Request.java:174)
 at hudson.remoting.Channel.call(Channel.java:665)
 at hudson.remoting.RemoteInvocationHandler.invoke(RemoteInvocationHandler.java:158)
 at $Proxy58.join(Unknown Source)
 at hudson.Launcher$RemoteLauncher$ProcImpl.join(Launcher.java:915)
 at hudson.Launcher$ProcStarter.join(Launcher.java:360)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:82)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:58)
 at hudson.tasks.BuildStepMonitor$1.perform(BuildStepMonitor.java:19)
 at hudson.model.AbstractBuild$AbstractBuildExecution.perform(AbstractBuild.java:804)
 at hudson.model.Build$BuildExecution.build(Build.java:199)
 at hudson.model.Build$BuildExecution.doRun(Build.java:160)
 at hudson.model.AbstractBuild$AbstractBuildExecution.run(AbstractBuild.java:586)
 at hudson.model.Run.execute(Run.java:1518)
 at hudson.model.FreeStyleBuild.run(FreeStyleBuild.java:46)
 at hudson.model.ResourceController.execute(ResourceController.java:88)
 at hudson.model.Executor.run(Executor.java:236)
Caused by: hudson.remoting.RequestAbortedException: java.net.SocketException: Software caused connection abort: recv failed
 at hudson.remoting.Request.abort(Request.java:299)
 at hudson.remoting.Channel.terminate(Channel.java:725)
 at hudson.remoting.SynchronousCommandTransport$ReaderThread.run(SynchronousCommandTransport.java:69)
Caused by: java.net.SocketException: Software caused connection abort: recv failed
 at java.net.SocketInputStream.socketRead0(Native Method)
 at java.net.SocketInputStream.read(Unknown Source)
 at java.io.BufferedInputStream.fill(Unknown Source)
 at java.io.BufferedInputStream.read(Unknown Source)
 at java.io.ObjectInputStream$PeekInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peekByte(Unknown Source)
 at java.io.ObjectInputStream.readObject0(Unknown Source)
 at java.io.ObjectInputStream.readObject(Unknown Source)
 at hudson.remoting.Command.readFrom(Command.java:90)
 at hudson.remoting.ClassicCommandTransport.read(ClassicCommandTransport.java:59)
 at hudson.remoting.SynchronousCommandTransport$ReaderThread.run(SynchronousCommandTransport.java:48)
K96
Reply | Threaded
Open this post in threaded view
|

[jenkinsci-ja:430] Re: ジョブ実行途中でたまにこける現象について

K96
こんばんは.

わたしも全然詳しくないんですが,ちょうど Jenkins Users によく似た記事が出ていました.
https://groups.google.com/d/msg/jenkinsci-users/JJ4GlS0UCQY/C1D6jQYyKVwJ

NWの瞬断では?
ログは接続が切れてしまって,後始末に失敗しているだけのように見えます.

あと時々起こるという点では,ファイルロック関係もあるかもしれません.
わたしは一度 TortoiseSVN のアイコンキャッシュに嵌められたことがあります…

以上,不確かな情報ですいません.


2012年12月7日金曜日 1時01分58秒 UTC+9 Mucho:
お世話になっております。Muchoです。
またしても質問ですが、よろしくお願いします。
 
ジョブの実行途中に、任意のタイミングで以下のようなエラーを出して止まってしまいます。
ジョブの内容は、SVN更新⇒プロジェクトをビルドするというものです。
発生するタイミングは、更新中だったり、ビルド中だったりでまちまちで、そもそもエラーが発生せず正常に完走できる場合も多々あります。
これは何に起因して発生している問題なのでしょうか。
何かしらのプラグインが悪さしてるんでしょうか?
環境は、サービスが走っているサーバーもJNLPスレーブも、Windows7 64bit です。
Jenkins本体は、1.492 (Windows) です。
 
何かお気づきの方がおられましたらご指摘いただけないでしょうか
よろしくお願いします。
Reply | Threaded
Open this post in threaded view
|

[jenkinsci-ja:431] Re: ジョブ実行途中でたまにこける現象について

chai
In reply to this post by Mucho
いつもお世話になっております。chaiです。

K96様のおっしゃる通りNWの瞬断、パケットロス等SSH接続の障害だと思います。
自分も何回かIOException2、ChannelClosedExceptionに遭遇していますが、
Jenkinsとは関係なくSSHでログインし死活監視するとそっちも死んでいます。
Teratermだと自動的にウィンドウが閉じられはせず、キーボードのコールバックもなく、画面変化がない状態に陥ります。

以上です。宜しくお願い致します。

2012年12月7日金曜日 1時01分58秒 UTC+9 Mucho:
お世話になっております。Muchoです。
またしても質問ですが、よろしくお願いします。
 
ジョブの実行途中に、任意のタイミングで以下のようなエラーを出して止まってしまいます。
ジョブの内容は、SVN更新⇒プロジェクトをビルドするというものです。
発生するタイミングは、更新中だったり、ビルド中だったりでまちまちで、そもそもエラーが発生せず正常に完走できる場合も多々あります。
これは何に起因して発生している問題なのでしょうか。
何かしらのプラグインが悪さしてるんでしょうか?
環境は、サービスが走っているサーバーもJNLPスレーブも、Windows7 64bit です。
Jenkins本体は、1.492 (Windows) です。
 
何かお気づきの方がおられましたらご指摘いただけないでしょうか
よろしくお願いします。
 
 
FATAL: スクリプトファイル C:\[Users]\AppData\Local\Temp\hudson888886527474389183.bat を削除できません
hudson.util.IOException2: remote file operation failed: C:\[Users]\AppData\Local\Temp\hudson888886527474389183.bat at <a href="javascript:" target="_blank" gdf-obfuscated-mailto="ATO2_FRvLv4J">hudson.remo...@daeb2d:SlaveNode1
 at hudson.FilePath.act(FilePath.java:848)
 at hudson.FilePath.act(FilePath.java:825)
 at hudson.FilePath.delete(FilePath.java:1202)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:92)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:58)
 at hudson.tasks.BuildStepMonitor$1.perform(BuildStepMonitor.java:19)
 at hudson.model.AbstractBuild$AbstractBuildExecution.perform(AbstractBuild.java:804)
 at hudson.model.Build$BuildExecution.build(Build.java:199)
 at hudson.model.Build$BuildExecution.doRun(Build.java:160)
 at hudson.model.AbstractBuild$AbstractBuildExecution.run(AbstractBuild.java:586)
 at hudson.model.Run.execute(Run.java:1518)
 at hudson.model.FreeStyleBuild.run(FreeStyleBuild.java:46)
 at hudson.model.ResourceController.execute(ResourceController.java:88)
 at hudson.model.Executor.run(Executor.java:236)
Caused by: hudson.remoting.ChannelClosedException: channel is already closed
 at hudson.remoting.Channel.send(Channel.java:494)
 at hudson.remoting.Request.call(Request.java:129)
 at hudson.remoting.Channel.call(Channel.java:665)
 at hudson.FilePath.act(FilePath.java:841)
 ... 13 more
Caused by: java.net.SocketException: Software caused connection abort: recv failed
 at java.net.SocketInputStream.socketRead0(Native Method)
 at java.net.SocketInputStream.read(Unknown Source)
 at java.io.BufferedInputStream.fill(Unknown Source)
 at java.io.BufferedInputStream.read(Unknown Source)
 at java.io.ObjectInputStream$PeekInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peekByte(Unknown Source)
 at java.io.ObjectInputStream.readObject0(Unknown Source)
 at java.io.ObjectInputStream.readObject(Unknown Source)
 at hudson.remoting.Command.readFrom(Command.java:90)
 at hudson.remoting.ClassicCommandTransport.read(ClassicCommandTransport.java:59)
 at hudson.remoting.SynchronousCommandTransport$ReaderThread.run(SynchronousCommandTransport.java:48)
FATAL: hudson.remoting.RequestAbortedException: java.net.SocketException: Software caused connection abort: recv failed
hudson.remoting.RequestAbortedException: hudson.remoting.RequestAbortedException: java.net.SocketException: Software caused connection abort: recv failed
 at hudson.remoting.Request.call(Request.java:174)
 at hudson.remoting.Channel.call(Channel.java:665)
 at hudson.remoting.RemoteInvocationHandler.invoke(RemoteInvocationHandler.java:158)
 at $Proxy58.join(Unknown Source)
 at hudson.Launcher$RemoteLauncher$ProcImpl.join(Launcher.java:915)
 at hudson.Launcher$ProcStarter.join(Launcher.java:360)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:82)
 at hudson.tasks.CommandInterpreter.perform(CommandInterpreter.java:58)
 at hudson.tasks.BuildStepMonitor$1.perform(BuildStepMonitor.java:19)
 at hudson.model.AbstractBuild$AbstractBuildExecution.perform(AbstractBuild.java:804)
 at hudson.model.Build$BuildExecution.build(Build.java:199)
 at hudson.model.Build$BuildExecution.doRun(Build.java:160)
 at hudson.model.AbstractBuild$AbstractBuildExecution.run(AbstractBuild.java:586)
 at hudson.model.Run.execute(Run.java:1518)
 at hudson.model.FreeStyleBuild.run(FreeStyleBuild.java:46)
 at hudson.model.ResourceController.execute(ResourceController.java:88)
 at hudson.model.Executor.run(Executor.java:236)
Caused by: hudson.remoting.RequestAbortedException: java.net.SocketException: Software caused connection abort: recv failed
 at hudson.remoting.Request.abort(Request.java:299)
 at hudson.remoting.Channel.terminate(Channel.java:725)
 at hudson.remoting.SynchronousCommandTransport$ReaderThread.run(SynchronousCommandTransport.java:69)
Caused by: java.net.SocketException: Software caused connection abort: recv failed
 at java.net.SocketInputStream.socketRead0(Native Method)
 at java.net.SocketInputStream.read(Unknown Source)
 at java.io.BufferedInputStream.fill(Unknown Source)
 at java.io.BufferedInputStream.read(Unknown Source)
 at java.io.ObjectInputStream$PeekInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peek(Unknown Source)
 at java.io.ObjectInputStream$BlockDataInputStream.peekByte(Unknown Source)
 at java.io.ObjectInputStream.readObject0(Unknown Source)
 at java.io.ObjectInputStream.readObject(Unknown Source)
 at hudson.remoting.Command.readFrom(Command.java:90)
 at hudson.remoting.ClassicCommandTransport.read(ClassicCommandTransport.java:59)
 at hudson.remoting.SynchronousCommandTransport$ReaderThread.run(SynchronousCommandTransport.java:48)
Reply | Threaded
Open this post in threaded view
|

[jenkinsci-ja:433] Re: ジョブ実行途中でたまにこける現象について

Mucho
In reply to this post by Mucho
K96様、chai様、ご返信ありがとうございます。
 
私も、NWの瞬断は頭をよぎってはいたところです。
ただ、だとしたら、いったいどう対策したものかという問題も。
 
リンク先での事例の通り、JNLPではなく、SSHによるスレーブにして解消すれば良いのですが。
(個人的にSSHそのものに不慣れなので、これが一番の問題だったりしますが)
 
またファイルロックの問題も、TortoiseSVNが入っているので、このあたりもたしかに怪しいところはあります。
 
ただ、同一マシン上のスレーブで実行している分には問題が発生しないので、
やはりNWがらみの可能性が高そうです。
 
頂いた情報などを元に、とりあえず私の心が折れるまではもう少しあがいてみようと思います。
以上、ありがとうございました。