jjzjj

python - 如何在 spark 中使用 transform python udf 执行 hql 脚本?

我是通过POC激发和学习的新手。作为此POC的一部分,我正在尝试直接执行hql文件,该文件具有transform关键字以使用pythonudf。我已经在CLI“hive-ffilename.hql”中测试了hql脚本,它工作正常。我在spark-sql中尝试过相同的脚本,但它因hdfspathnotfound错误而失败。我尝试以如下不同的方式提供hdfs路径,但都不起作用"/test/scripts/test.hql""hdfs://test.net:8020/test/scripts/test.hql""hdfs:///test.net:8020/test/scripts/test.

hadoop - 如何在 Hadoop 中编写 HQL 表达式以验证 X9999 等特定格式的字母数字字段的格式

我如何编写HQL来确定字段的结果是否将第一个字符作为字母并且以下四个字符是数字。(即-该字段的格式为“F5555”,因此我需要验证从该字段的查询返回的所有结果都遵循正确的格式。 最佳答案 你可以试试这个:selectREGEXP_EXTRACT('d55555','^[A-Za-z]?[0-9]{5}$',0);现在,为了理解,请阅读this并查看下一条评论:^表示字符串的开始(在这种模式下我们标记开始);[A-Za-z]-表示任何字母:大写或小写;>?-意味着我们只需要前一个字符类出现1次;[0-9]-从0到9的任意数字;{5}-

sql - HQL left outer join 用于查找一个表中存在而另一个表中不存在的记录

我有两个具有相同列的表,我想找出第一个表中存在但第二个表中不存在的记录。两个表之间的键由三列组成。我正在编写如下所示的Hive查询:*Selecta.x,b.yfromtable_1aleftouterjointable_2bona.c1=b.c1anda.c2=b.c2anda.c3=b.c3whereisnull(b.c1)orisnull(b.c2)orisnull(b.c3);*这个查询是否正确?如果table_1中有100条记录,其中50条记录与table_2匹配,则结果将包含table_1中剩余的50行或更多行,因为我对多个属性进行连接并在where条件下使用“OR”。

linux - 如何从配置单元终端中运行 hql 文件?

我需要运行一个HQL文件并根据结果执行操作。HQL文件创建一个表。下面是我如何从我的bash脚本调用脚本。ifecho-e"hive-f$table_create_file-hiveconfdatabase='$hive_db'-hiveconftable='$hive_table_name'-hiveconfquery='$hive_query'"thenecho"success"elseecho"errormessage"exit100fi但是即使HQL文件中的创建表命令失败,这也会返回成功。我相信这是因为我没有通过管道连接到hive终端。我该如何处理这种情况?任何帮助将不胜感激。

java - HQL查询中的 hibernate 表未映射错误

我有一个使用Hibernate对数据库进行CRUD操作的Web应用程序。我收到一个错误,说该表未映射。查看Java文件:错误信息:org.springframework.orm.hibernate3.HibernateQueryException:Booksisnotmapped[SELECTCOUNT(*)FROMBooks];nestedexceptionisorg.hibernate.hql.ast.QuerySyntaxException:Booksisnotmapped[SELECTCOUNT(*)FROMBooks]atorg.springframework.orm.hib

java - HQL查询中的 hibernate 表未映射错误

我有一个使用Hibernate对数据库进行CRUD操作的Web应用程序。我收到一个错误,说该表未映射。查看Java文件:错误信息:org.springframework.orm.hibernate3.HibernateQueryException:Booksisnotmapped[SELECTCOUNT(*)FROMBooks];nestedexceptionisorg.hibernate.hql.ast.QuerySyntaxException:Booksisnotmapped[SELECTCOUNT(*)FROMBooks]atorg.springframework.orm.hib

hadoop - HQL - 如何将几个分区中的数据从一个表复制/移动到另一个表

我有一个表(main_table),它被分区并存储记录的历史记录,并带有一个标志来指示记录是否被删除。我有另一个table9del_table),它与​​main_table具有相同的模式,但只存储一天的已删除记录(delete_falg='Y')。作为一个过程,我需要每天将del_table中可用的记录移动到main_table。我正在尝试编写一个LOADDATAINPATH命令,它可以将del_table的各个分区中的可用数据移动到main_table的相应分区,但我的尝试似乎都没有用。请让我知道是否可以通过使用LOADDATAINPATH命令来实现它,而无需指定单独的分区?我正在

java - 在 Hibernate 中进行分页是否有比执行选择和计数查询更有效的方法?

通常分页查询看起来像这样。有没有更好的方法,而不是制作两个几乎相等的方法,一个执行“select*...”,另一个执行“count*...”?publicListfindCats(Stringname,intoffset,intlimit){Queryq=session.createQuery("fromCatwherename=:name");q.setString("name",name);if(offset>0){q.setFirstResult(offset);}if(limit>0){q.setMaxResults(limit);}returnq.list();}public

java - 在 Hibernate 中进行分页是否有比执行选择和计数查询更有效的方法?

通常分页查询看起来像这样。有没有更好的方法,而不是制作两个几乎相等的方法,一个执行“select*...”,另一个执行“count*...”?publicListfindCats(Stringname,intoffset,intlimit){Queryq=session.createQuery("fromCatwherename=:name");q.setString("name",name);if(offset>0){q.setFirstResult(offset);}if(limit>0){q.setMaxResults(limit);}returnq.list();}public

hadoop - 如何使用 .hql 文件执行 HQL 命令

我是Hive的新手,想知道如何直接从.hql文件执行hive命令。 最佳答案 如@rajshukla4696所述,hive-ffilename.hql或beeline-ffilename都可以使用。您还可以通过“-e”从命令行执行查询:hive-e"select*frommy_table"这里有很多有用的Hive命令行参数:HiveCommandlineOptions 关于hadoop-如何使用.hql文件执行HQL命令,我们在StackOverflow上找到一个类似的问题: