首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Hank’s Blog

    Series object has no attribute explode

    foo', [], [3, 4]]) s 0 [1, 2, 3] 1 foo 2 [] 3 [3, 4] dtype: object s.explode () AttributeError: 'Series' object has no attribute 'explode' 解决: 升级pandas至0.25以及以上版本

    1.7K20发布于 2020-09-17
  • 来自专栏北漂的我

    Hive lateral view 和 explode 详解

    使用 lateral view 和 explode 查询 select name,subordinate from employees lateral view explode(subordinates 总结: explode就是将hive一行中复杂的 array 或者 map 结构拆分成多行。 opt/hadoop-2.7.4/README.txt' overwrite into table doc; select word, count(*) from doc lateral view explode

    1.6K30发布于 2019-05-29
  • 来自专栏星汉技术

    Hive应用:explode和lateral view

    Hive应用:explode和lateral view 一、explode() 这个函数大多数人都接触过,将一行数据转换成列数据,可以用于array和map类型的数据。 用于array的语法如下: select explode(arraycol) as newcol from tablename; explode():函数中的参数传入的是arrary数据类型的列名。 用于map的语法如下: select explode(mapcol) as (keyname,valuename) from tablename; explode():函数中的参数传入的是map数据类型的列名 在查阅了资料之后,看到explode()函数可以做这个事情,首先写了一条语句: select explode(score) from student_score; select explode(score 可惜的是,explode函数怎么使用,都关联不了name字段。

    81510编辑于 2022-01-05
  • 来自专栏全栈程序员必看

    hive lateral view 与 explode详解

    项目github地址:bitcarmanlee easy-algorithm-interview-and-practice 欢迎大家star,留言,一起学习进步 1.explode hive wiki 对于expolde的解释如下: explode() takes in an array (or a map) as an input and outputs the elements of the array ) FROM myMapTable; 总结起来一句话:explode就是将hive一行中复杂的array或者map结构拆分成多行。 由此可见,lateral view与explode等udtf就是天生好搭档,explode将复杂结构一行拆成多行,然后再用lateral view做各种聚合。 3.实例 还是第一部分的例子,上面我们explode出来以后的数据,不是标准的json格式,我们通过lateral view与explode组合解析出标准的json格式数据: SELECT ecrd,

    6.5K10编辑于 2022-11-08
  • 来自专栏星汉技术

    Hive应用:explode和lateral view

    Hive应用:explode和lateral view 一、explode() 这个函数大多数人都接触过,将一行数据转换成列数据,可以用于array和map类型的数据。 用于array的语法如下: select explode(arraycol) as newcol from tablename; explode():函数中的参数传入的是arrary数据类型的列名。 用于map的语法如下: select explode(mapcol) as (keyname,valuename) from tablename; explode():函数中的参数传入的是map数据类型的列名 在查阅了资料之后,看到explode()函数可以做这个事情,首先写了一条语句: select explode(score) from student_score; select explode(score 可惜的是,explode函数怎么使用,都关联不了name字段。

    21.7K64发布于 2019-04-01
  • 来自专栏数据仓库技术

    列转行-lateral view explode列转行

    ---+---------------------------+----------------------------+-----------------------------+ 二、函数介绍 explode 0003 | | r003 | 0007 | +-----------+-----------+ 1、解决方案 先将字符串通过split函数转换成array,然后使用explode select rider_id, order_id from t2_delivery_orders lateral view explode(split(order_list, ',' | 0003 | | r003 | 0007 | +-----------+-----------+ 2、注意 由于我们使用了lateral view横向视图与explode 原因为在explode处理order_list时因为r004对应行记录为null而直接剔除了,lateral view 关联方式为inner join 方式,导致最终结果中无对应数据。

    48110编辑于 2024-08-19
  • 来自专栏数据仓库技术

    列转行-explode_outer及lateral view outer

    split explode_outer 三、列转行 将骑手及其订单转换成订单粒度,每单一行记录。 方案 先将字符串通过split函数转换成array,然后使用explode炸开,即可得到最终结果。 解决方法 2.1 explodeexplode_outer函数比较 我们先看下在order_list列使用explode函数和explode_outer函数的结果 explode select explode select explode_outer(split(order_list,',')) as order_id from t2_delivery_orders 执行结果 +-----------+ 2.2 解决sql 执行SQL select rider_id, order_id from t2_delivery_orders lateral view explode_outer

    34810编辑于 2024-08-20
  • 来自专栏一个会写诗的程序员的博客

    使用 Hive 炸裂函数 explode (map) 宽表转高表

    Hive 炸裂函数 explode(map<string,string>) 宽表转高表SQL: select slice_id, user_id, shop_id, 'user_stats_public ' as table_code, explode(kv) as (field_code,field_value) from ( select user_id, -1 as shop_id () : Usage Examples explode (array) select explode(array('A','B','C')); select explode(array('A','B * from (select 0) t lateral view explode(array('A','B','C')) tf as col; explode (map) select explode( (adid_list) AS myCol... is not supported UDTF's can't be nested SELECT explode(explode(adid_list)) AS

    2.8K20编辑于 2021-12-24
  • 来自专栏数据仓库技术

    深入理解Hive中的explode和posexplode函数

    大家好,今天我将向大家介绍Hive中两个常用且强大的函数:explode和posexplode,它们在处理复杂的数据类型时有着不可替代的作用。下面我们就来一起看看它们的用法和实例。 1. Explode函数的用法与实例 Explode函数是Hive中一个魔术般的函数,它可以将array或者map类型的列进行展开。 实际上,在我们上一篇文章中提及的Lateral view就是和explode函数配合使用的。 函数对items列进行展开: select explode(items) as item from array_table; 结果会是: +-------------+ | item | 通过上述例子,相信你已经对explode和posexplode有了一定的理解。在实际的数据处理中,这两个函数的重要性更是不言而喻。希望这个指南能帮助你在遇到复杂数据类型时能更加得心应手。

    6.8K10编辑于 2024-01-08
  • 来自专栏站长的编程笔记

    使用PHP的Explode函数进行字符串分割

    一、Explode函数简介 PHP中,Explode函数可以将一个字符串按照指定的分隔符分割成一个数组。 函数原型:array explode ( string delimiter , string string [, int 其中,delimiter是分隔符,string是要分割的字符串, 二、使用Explode 函数分割字符串 使用Explode函数分割字符串非常简单。 我们首先声明一个字符串,然后再使用Explode函数对字符串进行分割。 使用Explode函数将字符串分割成一个数组,最终输出数组。 三、使用Explode函数限制数组长度 在使用Explode函数时,我们可以限制返回的数组长度。

    1.1K50编辑于 2023-08-17
  • 来自专栏啄木鸟软件测试

    Hive学习-lateral view 、explode、reflect和窗口函数

    1. lateral view 、explode、reflect 1) 使用explode函数将hive表中的Map和Array字段数据进行拆分 需求 现在有数据格式如下 zhangsan child1 ; hive (default)> use hive_explode; hive (hive_explode)> CREATE table t3(name string, children array, 当中的数据拆分开 hive (hive_explode)> SELECT explode(children) AS myChild FROM t3; 将map当中的数据拆分开 hive (hive_explode ; 使用explode拆分Array hive (hive_explode)> SELECT explode(split(goods_id,',')) as goods_id FROM explode_lateral_view ; 使用explode拆解Map hive (hive_explode)> SELECT explode(split(area,',')) as area FROM explode_lateral_view

    1.1K10编辑于 2024-09-10
  • 来自专栏数据仓库践行者

    你真的了解Lateral View explode吗?--源码复盘

    用Lateral view explode这么久,竟然发现,不是很了解它? Lateral view与UDTF函数一起使用,UDTF对每个输入行产生0或者多个输出行。 我们最常用的就是explode了,可是如果面试的时候,我问你:Lateral view explode 会产生shuffle吗?为什么会,或者不会? 你确定你能毫不犹豫、确定无疑的答出来吗? 它的作用就是告知一下: 2-1、左侧SelectOperator 筛选出你需要的非explode的列:id,sq 2-2-1、右侧SelectOperator 筛选出explode的列:split(sq 当UDTF不产生任何行时,比如explode()函数的输入列为空,LATERALVIEW就不会生成任何输出行。在这种情况下原有行永远不会出现在结果中。 Lateral view explode 会产生shuffle吗? 当然不会,毋庸置疑!

    2.7K60发布于 2020-05-07
  • 来自专栏Python爬虫与数据挖掘

    盘点一个Pandas中explode()爆炸函数应用实际案例

    二、解决方案 针对该问题,其实有两个方法,第一个是【麦叔】书中给出的openpyxl库进行拆解,如下图所示: 第二个是使用pandas中的explode()函数,这里直接给出【1px】大佬答案,如下图所示 : 其实关键点就是pandas中的爆炸函数explode(),早在之前我看到过有人用这个,只是一直不知道怎么用,今天在这里算是涨知识了。 df.columns df.loc[:, ['索引关键字']] = df['索引关键字'].str.split(";") # expand=True 可以把用分割的内容直接分列 df.head() df.explode 本文基于实际过程中遇到的Excel数据拓展分列的问题,使用pandas中的explode()函数顺利完成解答,一个小题目,帮助自己和大家加深对该函数的认识。

    1.3K20编辑于 2022-04-12
  • 来自专栏写PHP的老王

    PHP 字符串分割成数组函数explode,str_split 内部实现

    如果指定分割符,可以使用explode,如果没有分割符,可以使用split实现。 那么两个函数内部如何实现,有什么不同呢? explode explode — 使用一个字符串分割另一个字符串 ? explode使用zend_hash_next_index_insert_new。 内部都是循环截取字符串实现分割字符。

    1.6K20发布于 2019-08-12
  • 来自专栏V站

    PHP通过explode函数简单利用ip138获取ip域名位置信息

    转至V站 PHP通过explode函数简单利用ip138获取ip/域名位置信息 演示站:http://ip.vzhan.tw 核心代码: function get_ipcity($ip){ $str=file_get_contents ip={$ip}"); $a=explode('本站主数据:', $str)[1]; $b=explode('

    ',$a)[0]; return $b; } 全站源码下载

    2K00发布于 2019-02-13
  • 来自专栏程序员小助手

    别再explode

    一个粗糙的示例 获取一张上传图片的扩展名,有些同学可能会这样写: $userfile_name = $_FILES['image']['name']; $userfile_extn = explode( ", strtolower($_FILES['image']['name'])); 那么直接对文件名进行 explode ,裁切出来的是一个属组。 如果文件名字符串比较特殊,这样的程序会不会 explode 失败返回 False?从而抛出异常? 有可能会!所以这个写法是有 bug 的。 PHP 都准备好函数了!

    1K30发布于 2020-06-17
  • 来自专栏Live专区

    实现评论显示操作系统和评论来源

    ('Firefox/', $regs[0]); $FireFox_vern = explode(' ('Maxthon/', $agent); $Maxthon_vern = explode(' ('Edge/', $regs[0]); $Edge_vern = explode(' ('rowser/', $agent); $QQ_vern = explode(' ('Chrome/', $agent); $chrome_vern = explode('

    80530编辑于 2022-08-16
  • 来自专栏无量测试之道

    刚发现了 Hive 超赞的解析 Json 数组的函数,分享给你~

    函数运用 1. explode函数 语法 explode(Array|Map) 说明 explode()函数接收一个 array 或者 map 类型的数据作为输入,然后将 array 或 map 里面的元素按照每行的形式输出 举例 array测试sql语句: select explode(array('user_id','name','age')); 执行结果: map测试sql语句: select explode(map 具体函数运用 了解 explode 函数与 regexp_replace 函数的使用规则后,现在来完成上面数据准备中提出的解析需求。 第一步解析:json数组拆分成多行 sql语句: SELECT explode(split( regexp_replace( regexp_replace( 第一步解析:拆分广告id 拆分sql语句: SELECT page_name, ads_id FROM page_ads LATERAL VIEW explode(ads_id) adTable

    10K10编辑于 2022-07-05
  • 来自专栏兰舟千帆的java学习笔记

    数据可视化之matplotlib绘制饼状图

    = [0,0,0,0,0.1,0] plt.pie(sizes,explode=explode,labels=labels,autopct='%1.1f%%',shadow=False,startangle = [0,0,0,0,0.1,0] plt.pie(sizes,explode=explode,labels=labels,autopct='%1.1f%%',shadow=False,startangle 即无阴影,True,即显示阴影 plt.pie(sizes,explode=explode,labels=labels,startangle=150,colors=colors,shadow=True) plt.pie(sizes,counterclock=False,explode=explode,labels=labels,startangle=45,autopct='%1.1f%%',colors plt.pie(sizes,radius=1.5,labeldistance=0.9,counterclock=False,explode=explode,labels=labels,startangle

    1.8K30编辑于 2022-07-16
  • 来自专栏季春二九

    Typecho 博客文章评论添加显示 UserAgent(UA)的功能

    ('Maxthon/', $agent); $Maxthon_vern = explode(' ('Edge/', $regs[0]); $Edge_vern = explode(' ('rowser/', $agent); $QQ_vern = explode(' ('Chrome/', $agent); $chrome_vern = explode(' ('Version/', $agent); $safari_vern = explode('

    1.6K40编辑于 2023-03-22
领券