Sqoop 导入失败

Question

我正在尝试运行在 hadoop 集群中并行执行 sqoop 作业，但是我们看到在并行运行期间，sqoop 作业失败并出现以下错误。

16/11/11 09:24:59 ERROR manager.SqlManager: Error executing statement: java.sql.SQLRecoverableException: IO Error: Connection reset
java.sql.SQLRecoverableException: IO Error: Connection reset
    at oracle.jdbc.driver.T4CConnection.logon(T4CConnection.java:682)
    at oracle.jdbc.driver.PhysicalConnection.<init>(PhysicalConnection.java:715)
    at oracle.jdbc.driver.T4CConnection.<init>(T4CConnection.java:385)
    at oracle.jdbc.driver.T4CDriverExtension.getConnection(T4CDriverExtension.java:30)
    at oracle.jdbc.driver.OracleDriver.connect(OracleDriver.java:564)
    at java.sql.DriverManager.getConnection(DriverManager.java:664)
    at java.sql.DriverManager.getConnection(DriverManager.java:247)
    at org.apache.sqoop.manager.OracleManager.makeConnection(OracleManager.java:327)
    at org.apache.sqoop.manager.GenericJdbcManager.getConnection(GenericJdbcManager.java:52)
    at org.apache.sqoop.manager.SqlManager.execute(SqlManager.java:744)
    at org.apache.sqoop.manager.SqlManager.execute(SqlManager.java:767)
    at org.apache.sqoop.manage

该错误似乎仅在 hadoop 中有多个作业运行时才会发生。我正在搜索类似的错误并遇到了这些链接。但关键是我们如何在 sqoop Jobs 中适应它。

Oracle JDBC intermittent Connection Issue.

非常感谢任何帮助。

Answer 1

此问题在添加属性 -Dmapred.child.java.opts="-Djava.security.egd=file:///dev/urandom".

后得到解决

问题详情由Oracle JDBC intermittent Connection Issue

提供

和

Oracle 11g connection reset error

感谢 link 中的人提供的答案。

Sqoop 导入失败

Sqoop import failiing

sqoop