CN103927314A - 一种数据批量处理的方法和装置 - Google Patents
一种数据批量处理的方法和装置 Download PDFInfo
- Publication number
- CN103927314A CN103927314A CN201310016209.2A CN201310016209A CN103927314A CN 103927314 A CN103927314 A CN 103927314A CN 201310016209 A CN201310016209 A CN 201310016209A CN 103927314 A CN103927314 A CN 103927314A
- Authority
- CN
- China
- Prior art keywords
- data
- user request
- summarizing
- request data
- dimension
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title abstract description 5
- 238000012545 processing Methods 0.000 claims abstract description 114
- 238000000034 method Methods 0.000 claims abstract description 41
- 230000002776 aggregation Effects 0.000 claims description 27
- 238000004220 aggregation Methods 0.000 claims description 27
- 238000004458 analytical method Methods 0.000 claims description 6
- 238000012546 transfer Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 238000010923 batch production Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/335—Filtering based on additional data, e.g. user or group profiles
- G06F16/337—Profile generation, learning or modification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
Claims (16)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310016209.2A CN103927314B (zh) | 2013-01-16 | 2013-01-16 | 一种数据批量处理的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310016209.2A CN103927314B (zh) | 2013-01-16 | 2013-01-16 | 一种数据批量处理的方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103927314A true CN103927314A (zh) | 2014-07-16 |
CN103927314B CN103927314B (zh) | 2017-10-13 |
Family
ID=51145536
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310016209.2A Active CN103927314B (zh) | 2013-01-16 | 2013-01-16 | 一种数据批量处理的方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103927314B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104346449A (zh) * | 2014-10-28 | 2015-02-11 | 用友软件股份有限公司 | 数据合并方法和数据合并装置 |
CN104407922A (zh) * | 2014-10-29 | 2015-03-11 | 中国建设银行股份有限公司 | 一种异步批处理调度方法及系统 |
CN105404650A (zh) * | 2015-10-30 | 2016-03-16 | 中国石油集团东方地球物理勘探有限责任公司 | 一种gis数据处理方法及装置 |
CN105894366A (zh) * | 2016-04-22 | 2016-08-24 | 上海瀚之友信息技术服务有限公司 | 一种秒杀型交易处理系统及方法 |
CN108427733A (zh) * | 2018-02-28 | 2018-08-21 | 网易(杭州)网络有限公司 | 审核规则的设置方法、装置和系统、设备、存储介质 |
CN109389286A (zh) * | 2018-09-03 | 2019-02-26 | 阿里巴巴集团控股有限公司 | 一种业务处理、调度、分批方法、装置、设备及介质 |
CN109901989A (zh) * | 2017-12-11 | 2019-06-18 | 优酷网络技术(北京)有限公司 | Json对比方法和装置以及电子设备 |
CN111612464A (zh) * | 2020-05-27 | 2020-09-01 | 北银金融科技有限责任公司 | 一种海量联机交易处理方法 |
CN112750027A (zh) * | 2020-12-30 | 2021-05-04 | 中电金信软件有限公司 | 批量业务处理方法、装置、计算机设备和存储介质 |
CN114078049A (zh) * | 2021-10-09 | 2022-02-22 | 南方电网深圳数字电网研究院有限公司 | 一种用于供应链金融资信服务的数据处理方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060047650A1 (en) * | 2004-08-24 | 2006-03-02 | Freeman Thomas M | Trainable record searcher |
CN102541942A (zh) * | 2010-12-31 | 2012-07-04 | 中国银联股份有限公司 | 一种数据批量转移系统及其方法 |
CN102682045A (zh) * | 2011-03-18 | 2012-09-19 | 财团法人工业技术研究院 | 基于动态语言模型的推荐方法与推荐系统 |
US20120330980A1 (en) * | 2011-06-24 | 2012-12-27 | Xobni, Inc. | Personalizing an Online Service Based on Data Collected for a User of a Computing Device |
-
2013
- 2013-01-16 CN CN201310016209.2A patent/CN103927314B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060047650A1 (en) * | 2004-08-24 | 2006-03-02 | Freeman Thomas M | Trainable record searcher |
CN102541942A (zh) * | 2010-12-31 | 2012-07-04 | 中国银联股份有限公司 | 一种数据批量转移系统及其方法 |
CN102682045A (zh) * | 2011-03-18 | 2012-09-19 | 财团法人工业技术研究院 | 基于动态语言模型的推荐方法与推荐系统 |
US20120330980A1 (en) * | 2011-06-24 | 2012-12-27 | Xobni, Inc. | Personalizing an Online Service Based on Data Collected for a User of a Computing Device |
Non-Patent Citations (1)
Title |
---|
崔赛英: "VFP6.0环境下数据批量处理方法探究", 《电脑编程技巧与维护》 * |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104346449B (zh) * | 2014-10-28 | 2017-11-24 | 用友网络科技股份有限公司 | 数据合并方法和数据合并装置 |
CN104346449A (zh) * | 2014-10-28 | 2015-02-11 | 用友软件股份有限公司 | 数据合并方法和数据合并装置 |
CN104407922A (zh) * | 2014-10-29 | 2015-03-11 | 中国建设银行股份有限公司 | 一种异步批处理调度方法及系统 |
CN104407922B (zh) * | 2014-10-29 | 2019-03-01 | 中国建设银行股份有限公司 | 一种异步批处理调度方法及系统 |
CN105404650A (zh) * | 2015-10-30 | 2016-03-16 | 中国石油集团东方地球物理勘探有限责任公司 | 一种gis数据处理方法及装置 |
CN105894366A (zh) * | 2016-04-22 | 2016-08-24 | 上海瀚之友信息技术服务有限公司 | 一种秒杀型交易处理系统及方法 |
CN109901989B (zh) * | 2017-12-11 | 2023-12-12 | 阿里巴巴(中国)有限公司 | Json对比方法和装置以及电子设备 |
CN109901989A (zh) * | 2017-12-11 | 2019-06-18 | 优酷网络技术(北京)有限公司 | Json对比方法和装置以及电子设备 |
CN108427733A (zh) * | 2018-02-28 | 2018-08-21 | 网易(杭州)网络有限公司 | 审核规则的设置方法、装置和系统、设备、存储介质 |
CN109389286A (zh) * | 2018-09-03 | 2019-02-26 | 阿里巴巴集团控股有限公司 | 一种业务处理、调度、分批方法、装置、设备及介质 |
CN109389286B (zh) * | 2018-09-03 | 2022-11-18 | 阿里巴巴集团控股有限公司 | 一种业务处理、调度、分批方法、装置、设备及介质 |
CN111612464A (zh) * | 2020-05-27 | 2020-09-01 | 北银金融科技有限责任公司 | 一种海量联机交易处理方法 |
CN112750027A (zh) * | 2020-12-30 | 2021-05-04 | 中电金信软件有限公司 | 批量业务处理方法、装置、计算机设备和存储介质 |
CN114078049A (zh) * | 2021-10-09 | 2022-02-22 | 南方电网深圳数字电网研究院有限公司 | 一种用于供应链金融资信服务的数据处理方法及装置 |
CN114078049B (zh) * | 2021-10-09 | 2024-08-23 | 南方电网数字平台科技(广东)有限公司 | 一种用于供应链金融资信服务的数据处理方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN103927314B (zh) | 2017-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103927314B (zh) | 一种数据批量处理的方法和装置 | |
JP5298117B2 (ja) | 分散コンピューティングにおけるデータマージング | |
CN107506451B (zh) | 用于数据交互的异常信息监控方法及装置 | |
CN104699718B (zh) | 用于快速引入业务数据的方法和装置 | |
US10061858B2 (en) | Method and apparatus for processing exploding data stream | |
CN109033109B (zh) | 数据处理方法及系统 | |
CN109669976B (zh) | 基于etl的数据服务方法及设备 | |
CN107464151B (zh) | 高并发业务的订单数据处理方法及装置 | |
CN110798445B (zh) | 公共网关接口测试方法、装置、计算机设备及存储介质 | |
CN110750458A (zh) | 大数据平台测试方法、装置、可读存储介质及电子设备 | |
CN106982150A (zh) | 一种基于Hadoop的移动互联网用户行为分析方法 | |
US20140237554A1 (en) | Unified platform for big data processing | |
CN102541723A (zh) | 用于软件测试的自动化测试装置 | |
CN103139006A (zh) | 基于web服务的自动化测试装置及方法 | |
CN108959294B (zh) | 一种访问搜索引擎的方法和装置 | |
CN112286815A (zh) | 一种接口测试脚本的生成方法及其相关设备 | |
CN105205167A (zh) | 一种日志数据系统 | |
CN113010542A (zh) | 业务数据处理方法、装置、计算机设备及存储介质 | |
CN111611479B (zh) | 用于网络资源推荐的数据处理方法及相关装置 | |
CN111966718B (zh) | 用于应用系统的数据传播追踪的系统及方法 | |
Vanhove et al. | Tengu: An experimentation platform for big data applications | |
CN111553652A (zh) | 业务处理方法及装置 | |
CN104765787B (zh) | 软件系统内要素文件关联关系分析方法及系统 | |
CN112035466B (zh) | 一种区块链查询外置索引开发框架 | |
CN113449035B (zh) | 数据同步方法、装置、计算机设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1197480 Country of ref document: HK |
|
GR01 | Patent grant | ||
GR01 | Patent grant | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: GR Ref document number: 1197480 Country of ref document: HK |
|
TR01 | Transfer of patent right |
Effective date of registration: 20191204 Address after: P.O. Box 31119, grand exhibition hall, hibiscus street, 802 West Bay Road, Grand Cayman, Cayman Islands Patentee after: Innovative advanced technology Co., Ltd Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands Patentee before: Alibaba Group Holding Co., Ltd. |
|
TR01 | Transfer of patent right |