大数据小白踩坑日记sqoop导入数据报错：IOException: No columns to generate for ClassWrite

最新推荐文章于 2021-07-21 20:03:13 发布
原创 最新推荐文章于 2021-07-21 20:03:13 发布 · 741 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文记录了一次使用sqoop导入数据时遇到的IOException和MySQLSyntaxErrorException异常，并分享了解决方法。异常源于sqoop执行SQL时未正确处理条件语句，导致语法错误。文章强调了在SQL查询中正确使用where1=1条件的重要性，特别是在防止SQL注入时。

大数据小白踩坑日记sqoop导入数据报错：IOException: No columns to generate for ClassWrite

异常截图

在这里插入图片描述

MySQLSyntaxErrorException这个异常出现意味着你的sql语法有问题，但是检查了sql发现并没有错（我认为）

处理结果

为了防止sql注入，通常会在查询语句中加入"where 1=1"，切记，最后一个1后面要加上空格，否则就会报以上异常。原因是：
原因
sqoop执行sql时，会在你的条件后面加上一个and，如果不加空格，1和and连在一起，出现语法错误。

WhiteCoderXxx
关注
使用Sqoop将数据从Hive导入MySQL报错：No columns to generate for ClassWriter
weixin_46507693的博客
04-11 3526
使用sqoop将数据从hive导入mysql
大数据之Sqoop(四):java.io.IOException:No columns to generate for ClassWriter
maoyuanming0806的博客
01-19 1844
这两天做个项目使用到sqoop，这东西以前用过，现在有点忘了，出了点差错，记录下来 文章目录环境报错问题原因解决 环境 hadoop 2.4.1 jdk8 sqoop 1.4.6 centos7 mysql 5.7.x 报错 [root@mym sqoop]# bin/sqoop import \ > --connect jdbc:mysql://192.168.31.201:330...
Sqoop 导入数据报错：No columns to generate for ClassWriter
zjh_746140129的博客
12-11 5842
使用Sqoop 导入数据报错信息如下： java.sql.SQLException: Streaming result set com.mysql.jdbc 18/09/07 10:09:20 INFO manager.MySQLManager: Preparing to use a MySQL streaming resultset. 18/09/07 10:09:20 INFO tool....
no columns to generate for ClassWriter【Sqoop迁移工具】
To-nemy
11-12 1064
报错信息如下所示： ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@54b0a583 is still active. No statements may be issued when a...
sqoop No columns to generate for ClassWriter
小海的专栏
11-13 7521
在执行sqoop从oracle导出数据到hive时报错：No columns to generate for ClassWriter 问题原因：oracle数据库的IP/用户名/密码/数据库名称 错误导致连接不上。
使用Sqoop从Hive导出数据到MySQL报错No columns to generate for ClassWriter
m0_57809678的博客
06-29 333
报错如下 解决：在mysql连接URL后加上useSSL=false,如下图 后面再导入就可以了
sqoop批量脚本导入报错ERROR tool.ImportTool: Import failed: java.io.IOException: No columns to generate for C
lsp的博客
01-16 8983
问题原因：数据库的IP/用户名/密码/数据库名称 错误导致连接不上 ERROR tool.ImportTool: Import failed: java.io.IOException: No columns to generate for ClassWriter         at org.apache.sqoop.orm.ClassWriter.generate(ClassWriter.ja...
Sqoop异常Encountered IOException running export job: java.io.IOException: No columns to generate for C...
06-08
这个异常通常是因为在 Sqoop 导出数据时，没有指定要导出的列。因此，Sqoop 不知道该如何生成导出数据的列名，从而导致该异常。 要解决这个问题，您需要在 Sqoop 命令中指定要导出的列。例如，假设您要将一个表导出...
at org.apache.sqoop.Sqoop.main(Sqoop.java:238) 25/07/07 21:04:29 ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: No columns to generate for ClassWriter
最新发布
07-09
我们正在处理一个Sqoop导入错误：“No columns to generate for ClassWriter”。根据引用内容，这个错误可能有多种原因，包括但不限于： 1. 使用了旧版本的MySQL驱动（或Oracle驱动）存在bug。 2. 数据库连接信息...
sqoop 工具报错：No columns to generate for ClassWriter报错真实原因
IKnowNothinglee的博客
05-29 1万+
今天遇到这个错误，查了一下网上的答案五花八门，分析对比后结果发现，这个报错其实不是真正的报错。只是这段话刚好是报错代码的最后面，所以才被误以为这是一个独立的报错，这只是一类错误的统称，其实有很多不同的错误都会导致出现这个代码。 java.io.IOException: No columns to generate for ClassWriter 比如： （1）由于mysql驱动mysql-co...
使用sqoop将MySQL中的数据导入hdfs时报错问题No columns to generate for ClassWriter
qq_39576369的博客
09-19 977
有些人看到的报错信息是最后一行的No columns to generate for ClassWriter，但问题实际不出在jar包上，应该继续往上找，我的错误是这样的 ERROR manager.SqlManager: Error executing statement: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Ac...
MySQLSyntaxErrorException: Unknown column
Talk is cheap
11-02 2189
Error updating database. Cause: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Unknown column ‘give_card_id’ in ‘field list’ The error may involve com.usercard.dao.TransferRecordDao.add-I...
Sqoop异常 ERROR tool.ImportTool: Imported Failed: column not found
xinguopeng的博客
07-23 2605
Sqoop导入数据到hive报列找不到异常，如下： 20/07/22 13:44:42 INFO mapreduce.ImportJobBase: Transferred 111.0097 MB in 40.0756 seconds (2.77 MB/sec) 20/07/22 13:44:42 INFO mapreduce.ImportJobBase: Retrieved 1301733 records. 20/07/22 13:44:42 INFO manager.SqlManager: Executi
Sqoop ERROR tool.ImportTool: Imported Failed: There is no column found in the target table
Vi的博客
07-17 8387
Sqoop从oracle中导入数据到hive时，若在导入表不属于指定用户， 则在导入的表名前需要添加大写的所属用户的用户名 如： sqoop import --hive-import --connect "jdbc:oracle:thin:@(DESCRIPTION=(ADDRESS_LIST=(ADDRESS=(PROTOCOL=TCP)(HOST=xx.xxx.xx.xxx)(PORT=152
MySQLSyntaxErrorException: Unknown column 的解决方法
热门推荐
JamesLi6的博客
08-10 1万+
com.mysql.jdbc.exceptions.MySQLSyntaxErrorException: Unknown column '?????' in 'where clause' at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1026) at com.mysql.jdbc.SQLError.createSQLEx
com.mysql.jdbc.exceptions.MySQLSyntaxErrorException: Unknown column"错误解决方
weixin_34306676的博客
12-04 370
看看sql语句和数据库中的字段是否对应。一般都是因为粗心大意写错了数据库字段名造成的。 本文转自xwdreamer博客园博客，原文链接：http://www.cnblogs.com/xwdreamer/archive/2010/11/28/2297070.html，如需转载请自行联系原作者 ...
sqoop到数据到mysql报错_Sqoop- sqoop将mysql数据表导入到hive报错
weixin_34790159的博客
02-04 270
[root@ip-172-32-1-221 lib]# sqoop import --connect jdbc:mysql://54.223.175.12:3308/gxt3 --username guesttest --password guesttest --table ecomaccessv3 -m 1 --hive-importWarning: /opt/cloudera/parcels/...
记录sqoop导入过程中出现的问题
weixin_43454942的博客
08-22 399
java.io.IOException: No columns to generate for ClassWriter 可以通过添加这个–driver com.mysql.jdbc.Driver 来修改 还遇到另一个错误，但是尚未处理，报错是找不到导入过来的temporary文件，查询得知可能是因为map作业的推测机制，因为另开作业之后删除了另一个作业的临时文件，所以报错，可以关闭这个推测机制，但...
sqoop导入数据进hive中遇到问题的解决办法
轻言少语的博客
07-21 895
因为我是在导入成功后才写的文章，所以问题就不一一赘述了，直接解决方案。 我原版本信息：hive-2.3.6 hadooop2.7 sqoop-1.4.7 在网上找了很多方法，没有解决问题，没有导入数据成功，我就换了下hive版本 现版本信息： hive-1.2.1 hadooop2.7 sqoop-1.4.7 解决办法（依次执行）： 1. [root@hadoop01 ~]# cp /usr/local/hive1.2.1/lib/hive-common-1.2.1.jar /usr/
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值