IA平台-实时数据智能化能力_上海致宇信息技术有限公司

实时数据智能化能力

Hexinfo Autoflow（端流平台）是一个易于使用、功能强大且稳定可靠的流批一体、适配双开发模式的低代码数据流编排的开发管理平台

平台简介

智能自动化通过将AI能力加入到数据集成和流程自动化中，从而简化工作流程降低成本，提高客户满意度，提供实时的数据洞察分析，帮助企业实现更好的动态决策。智能自动化是业务流程自动化的演变，由于AI技术的发展，原本以人为中心的复杂任务，机器已逐步能够替代人工完成。例如：自动收取邮件，使用AI技术分析邮件内容，识别出邮件意图，自动发起相应的业务流程，协同人工共同完成端到端的业务流程。通过自动分析业务流程历史数据，并改进流程和决策过程。

数据流管道架构图

Hexinfo Autoflow 帮助任何开发人员或数据工程师去除了数据处理过程中编写“胶水”代码的步骤，整个数据流管道的上下游数据的“粘合”都由平台自动编排处理，使用者只需要关注业务层的逻辑实现，通过可视化拖动的方式构建事件驱动的数据流。

双开发模式

支持DAG拖拽式和纯 SQL过程两种开发模式，无需手动编写代码

开发预览调试

内置预览调试可轻松开发实时流计算的管道

多种维度监控

配备完备的监控，监控流计算中的流量、异常、耗时、数量等

集中式日志

汇聚数据流计算时分布在各台节点运行日志，集中提供问题追溯跟踪

统一元数据

支持统一元数据，纯SQL开发时无需重复创建关联表

流批一体开发

同一套开发流程支持流批一体数据处理

配置匿名化

支持配置匿名化，减少开发依赖、共享资源和访问控制

二次定制方便

前后端一体开发模式，二次定制开发各类转换器

实时数据智能化能力

二次定制

品质保障提供灵活便捷的前后端一体Java SDK，可依据自身需求自定义扩展各类转换器（Transformer）。

支持三种类型转换器：Source类（S）转换器、Processor类（P）转换器、Target类（T）转换器。

平台已提供大部分通用转换器，经过简单的二次开发可实现各种特殊的业务逻辑转换器来处理数据。

实时数据智能化能力

实时ETL
ETL 是将业务系统的数据经过抽取、清洗转换之后加载到目的端的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据。
金融实时风控
在金融应用场景中，快速探测到风险能够有效地减少损失，将金融交易大数据与Autoflow平台流计算相结合，引入特征模型算法，及时过滤出诸如盗刷卡等异常交易行为，实施风险控制以提升金融安全系数。
营销精准推荐
在互联网营销场景中，借助于Autoflow平台流计算，实时提取特征变量及跟踪用户关注品类，以预测用户的消费趋势，为精准推荐提供基础能力，从而提升用户购物体验、促进消费行为。
物联网监控
在工业设备运转过程中，及早发现潜在故障能够极大地降低生产风险。通过Autoflow平台流计算，实时汇聚工业传感器数据，并进行聚合计算和异常分析筛选，便可实现设备的秒级监控和异常告警，保障工业生产的平稳运行。
数据库查询加速
关系型数据库在海量数据下容易遇到查询性能不足、可扩展性差的挑战。通过Autoflow平台流计算将数据从关系型数据库实时同步到 ES，借助 ES 的海量数据高并发低延时查询、SQL、弹性扩展等能力，更好地满足数据库查询加速的需求，弥补传统关系型数据库的不足。

SQL Studio

SQL Studio 以 WebIDE 的方式提供集纯SQL开发、元数据管理、代码调试、部署管理、运行监控、指标告警、智能诊断等为一体的一站式开发运维的工作台。SQL与其他的编程语言相比学习成本较低，使用SQL作业进行开发将降低数据开发人员使用Flink的门槛。

DAG Studio

DAG Studio 以 WebIDE 的方式提供集图形化开发、多语言开发、预览调试、部署管理、多维监控、指标告警、智能诊断等为一体的一站式开发运维的工作台。将流式作业开发可视化，流式作业的开发人员，可以通过拖拉拽的方式来绘制数据的流向，拖拽相应组件至画布区，并通过箭头连接两个组件，构成一个直观的数据流图。