位置：首页 > 资讯 > 电商资讯>利用InformationSchema与阿里云账单治理API实现MaxCompute费用对账分摊统计

利用InformationSchema与阿里云账单治理API实现MaxCompute费用对账分摊统计

发布时间：2022-11-08

栏目：电商资讯

利用MaxComputeInformationSchema与阿里云交易和账单治理API实现MaxCompute费用对账分摊统计

很多的企业用户选择MaxCompute按量付费模式构建自己的数据平台，利用MaxCompute按作业付费的计费模型，在获得高性能的同时避免"IDLE"状态的不必要资源费用支出，仅为实际使用付费。

那么在一个规模比较大的公司，企业购买了MaxCompute服务，会支撑企业内部的不同部门、个人来使用MaxCompute来开展数据处理分析。为了更好地识别数据平台使用方的周期性花费成本，优化数据资源的使用，就有必要对作业的费用进行统计，从而确认不同人员或归属部门的作业数量、作业费用、作业时长、作业资源使用量等指标。基于这些指标进行成本分摊、作业优化等治理工作。

阿里云交易和账单系统包含了MaxCompute产品的费用信息及费用明细，通过关联交易和账单系统的计费明细与MaxCompute项目的作业明细或某时间段的账单费用，可以获得使用用户、作业明细信息（如提交人账号、作业SQL内容、作业资源使用大小等信息）与计费明细或账单费用间的关系，从而开展分析。

本文将介绍假如自动化实现MaxCompute按量付费项目的作业费用统计，您也可以通过阿里云交易和账单系统API获取其他需要的费用信息，扩展分析场景。

1、获得MaxCompute项目历史作业明细

MaxComputeInformation_Schema服务是MaxCompute产品的开放元数据服务，通过Information_Schema提供的一组视图，用户可以自助地查询访问到项目内的准实时的table,column,function等全量元数据信息，同时也提供了项目内近期的作业历史明细，供使用者自助查询使用。

通过元数据服务Information_Schema里面的作业历史表tasks_history视图，可以查询到准实时的项目作业历史明细。包括：项目名称、任务名称、Instanceid、开始时间、结束时间、任务复杂度、任务CPU使用情况等字段。

备注：Information_Schema目前正在灰度中，即将全面开放。

2、获取作业的计费明细数据

用户可以通过费用中心账号总览消费记录去查询具体的消费情况。

同时，格式阿里云交易和账单治理OpenAPI为用户提供治理阿里云产品售卖和财资能力，通过该api可以程序化获取MaxCompute作业计费明细数据。

调用QueryUserOmsData接口（阿里云的账单系统OMS），可以查询到具体计量信息编号、数据分类、存储、SQL读取量、公网上下行流量等字段信息。

3、关联计费明细与作业明细

通过表关联，查询到需要计算的数据结果

这些数据可以通过作业ID与计费明细数据进行关联后，您就获取各个作业明细的费用信息(例如,SQL费用=数据扫描量*复杂度)，从而可以开展不同视角的分析。

需要强调的是：MaxCompute的计费都是以阿里云费用中心的出账结果及费用明细为准。

1.查询元数据服务里面的作业历史表tasks_history

例如，您登录访问的当前项目为myproject1，在myproject1中，可以通过查询INFORMATION_SCHEMA.tables获得当前myproject1中所有表的元数据信息。