当前位置: 首页 > news >正文

【JIT/极态云】技术文档--数据处理

数据处理

一、简介

数据处理服务是一类通用服务,提供了针对数据转换、源数据构建等针对数据操作的函数集。

在这里插入图片描述

同时由于前后端在编程语言的实现差异,数据处理服务有不同的使用入口,但两者在交互流程与功能上一致。

在这里插入图片描述

二、转换单行数据

数据转换的关键就是对数据映射,将源模型的字段与目标模型中的相应字段对应起来,确保数据能在新的对象中正确识别加载。

转换单行数据是指将一个单行数据变量中的部分字段赋值给另一个单行数据变量。与单行数据直接赋值的区别在于,转换方法的颗粒度会更小,允许赋值其中一部分字段。

在这里插入图片描述

在转换函数的变量转换面板中,左侧选择目标模型,即被赋值的对象。而右侧选择数据来源方,针对单行数据转换,来源方可以是单行数据、字典。

在这里插入图片描述

选择来源方后,会自动匹配来源方中与目标模型类型相同且同名的字段。在此基础上,开发者也可以继续调整映射字段。

三、转换多行数据

转换多行数据是指将一个多行数据变量中的部分字段赋值给另一个多行数据变量。与多行数据直接赋值的区别在于,转换方法只会针对选择的字段赋值,未被选择的字段值为空。

转换多行数据可以类比为转换单行数据的批量操作。

在这里插入图片描述

在转换函数的变量转换面板中,左侧选择目标模型,即被赋值的对象。而右侧选择数据来源方,针对多行数据转换,来源方可以是多行数据、列表(子项为单行数据或字典)、单行数据。

选择来源方后,会自动匹配来源方中与目标模型类型相同且同名的字段。在此基础上,开发者也可以继续调整映射字段。

四、转换筛选条件

转换筛选条件作用于对筛选条件变量的转换,在操作与配置上与转换单行数据一致。

在这里插入图片描述

五、数据集

数据集提供了在函数编辑中组装目标数据集的能力。它的交互方式与聚合表基本一致,都是提供三种聚合方式(横向连接、追加合并、分组汇总)。通过多层级的聚合即可得到最终想要的数据结构。

在这里插入图片描述

数据集与聚合表的区别在于原始数据的输入上,也就是第一层数据表节点的数据来源。

正常在聚合表中,每个节点都可以通过设置数据筛选来过滤数据;

而在数据集中,除了设置筛选这种赋值方式,还可以通过直接传入多行数据来构建。

在这里插入图片描述

同时针对于数据集的输出,也提供了“查询多行数据”函数,可以将输出结果转换成想要的目标模型数据。

image.png

六、注意事项

对于原有筛选条件的字段若没有匹配映射,则在新的筛选条件中视为不过滤该字段。

进一步了解极态云,体验产品?

请访问 极态云官网


http://www.mrgr.cn/news/61261.html

相关文章:

  • 海豚调度DolphinScheduler-3.1.9配置windows本地开发环境
  • 如何通过openssl生成.crt和.key
  • Web开发(一)HTML5
  • 【ArcGIS初学】产生随机点计算混淆矩阵
  • 数据结构之哈希表
  • 势均力敌(C++ 三级题--使用vector和push_back)
  • 线上虚拟3D画展有何优势?
  • DRC-20开发指南:新一代区块链代币标准
  • LeetCode HOT100系列题解之课程表(9/100)
  • 什么是crm软件?最全百科
  • 掌握机器学习中的偏差与方差:模型性能的关键
  • 【pyvimomi脚本实践01】使用 Python 连接 VMware ESXi 并获取主机信息
  • 【ROS2】cv_bridge:ROS图像消息和OpenCV的cv::Mat格式转换库
  • 深度学习(七)深度强化学习:融合创新的智能之路(7/10)
  • pyinstaller 打包python GUI程序避坑指南
  • 串联两个检测模型
  • 金山C++一面-面经总结
  • HTB:Analytics[WriteUP]
  • [Linux进程控制]进程创建|进程终止|进程等待
  • 练习pandas的基础操作,有题目有详解有源码
  • 使用不可靠来源的住宅代理的风险
  • 怎么提取视频里的音频?关于提取视频里音频的几种方法
  • Gartner发布生成式AI的信任、风险和安全管理创新指南:生成式AI的三类风险—内容异常、数据安全和AI应用安全
  • 从理论到实践,精准测试的初创之路
  • Jmeter压力测试简单教程(包括服务器状态监控)
  • 6.标志寄存器