sparksql的string转日期格式(将string类型的数据类型转换为spark rdd时报错的解决方法)
类别:脚本大全 浏览量:2222
时间:2022-01-28 01:39:40 sparksql的string转日期格式
将string类型的数据类型转换为spark rdd时报错的解决方法
在将string类型的数据类型转换为spark rdd时,一直报这个错,StructType can not accept object %r in type %s” % (obj, type(obj)))
|
. . . s = str (tree) y = str (YESTERDAY) list0 = [s, y] outRes = self .sc.parallelize(list0) df_tree = outRes.toDF( "model: string, dt: string" ).registerTempTable( "temp" ) . . . |
查了半天的资料,问了不少同事都没能解决掉这个bug。最后终于google到一个类似的case,终于把问题解决。记录一下!
|
. . . s = str (tree) y = str (YESTERDAY) list0 = [s, y] outRes = self .sc.parallelize([list0]) df_tree = outRes.toDF( "model: string, dt: string" ).registerTempTable( "temp" ) . . . |
上面的问题办法是,将sc.parallelize([list0])
中的list0
再转成一个整体list
,问题即可解决。
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对开心学习网的支持。如果你想了解更多相关内容请查看下面相关链接
原文链接:https://blog.csdn.net/y999666/article/details/78649760
您可能感兴趣
- Guid ToString的格式
- php面向对象怎么调用属性(PHP面向对象程序设计__tostring和__invoke用法分析)
- 用javascript解析json(JavaScript JSON.stringify的使用总结)
- js中substring的用法、与substr的区别
- mysql substr函数的用法(MySQL切分函数substring的具体使用)
- C#中string.format的格式和用法
- python字符串之基本操作小练习(Python数据类型之String字符串实例详解)
- C#中ToString()常见的格式
- C# string 和 stringbuilder 的区别
- Request、Request.Form、Request.QueryString的区别
- sqlservercount函数怎么用(Sql Server中Substring函数的用法实例解析)
- python redis锁的使用(Python操作redis实例小结String、Hash、List、Set等)
- String.Empty,NULL和""的区别
- sparksql的string转日期格式(将string类型的数据类型转换为spark rdd时报错的解决方法)
- DateTime.ToString 格式化时间字符串
- 如何判断数据是json还是字符串(JSON.stringify的多种用法总结)
- 寒假余额不满24小时,不如来一场说走就走的亲子阅读之旅(寒假余额不满24小时)
- 省委书记出席的交流会,十位县委书记同场发言,代表公文材料的高水平(省委书记出席的交流会)
- 《刘老根3》热播,去世15年的她却再次被 伤害(去世15年的她却再次被)
- 十二星座爱情支配欲指数(十二星座爱情支配欲指数)
- 虐待儿童是发泄支配欲的愚蠢行为(虐待儿童是发泄支配欲的愚蠢行为)
- 你或许不知道你隐藏的支配欲望(你或许不知道你隐藏的支配欲望)
热门推荐
- docker端口映射和暴露端口的区别(解决docker指定udp端口号的问题)
- C#排序算法的比较
- div css实例列表(DIV+CSS实现电台列表设计的示例代码)
- mysql查询逗号分割字符串(MySQL 字符串拆分实例无分隔符的字符串截取)
- 学python可以应用到哪些方面(学习python可以干什么)
- html5播放器按菜单键没反应(解决HTML5中的audio在手机端和微信端的不能自动播放问题)
- laravel消息机制(laravel框架中间件 except 和 only 的用法示例)
- python eval函数原理(浅谈Python中eval的强大与危害)
- dede联动菜单样式(dede标签云如何生成不同颜色、不同大小的tag标签)
- 简单介绍HTTPS与HTTP的区别
排行榜
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9