數(shù)據(jù)湖
數(shù)據(jù)湖 (Data Lake)是指以自然格式存儲(chǔ)數(shù)據(jù)的系統(tǒng)或存儲(chǔ)庫(kù),通常是對(duì)象塊或文件。數(shù)據(jù)湖通常是對(duì)所有企業(yè)數(shù)據(jù)進(jìn)行統(tǒng)一存儲(chǔ),包含原始數(shù)據(jù)和用于報(bào)告、可視化、分析和機(jī)器學(xué)習(xí)等各種任務(wù)的轉(zhuǎn)換數(shù)據(jù)。湖中的數(shù)據(jù)包括來(lái)自關(guān)系 數(shù)據(jù)庫(kù) 的結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)和二進(jìn)制數(shù)據(jù)從而形成一個(gè)集中式數(shù)據(jù)存儲(chǔ)容納所有形式的數(shù)據(jù)。
Spark
Spark是一個(gè)開源的,并行數(shù)據(jù)處理框架,能夠幫助用戶簡(jiǎn)單的開發(fā)快速,統(tǒng)一的 大數(shù)據(jù) 應(yīng)用,對(duì)數(shù)據(jù)進(jìn)行,協(xié)處理,流式處理,交互式分析等等。Spark提供了一個(gè)快速的計(jì)算,寫入,以及交互式查詢的框架。相比于Hadoop,Spark擁有明顯的性能優(yōu)勢(shì)。Spark使用in-memory的計(jì)算方式,通過(guò)這種方式來(lái)避免一個(gè)MapReduce工作流中的多個(gè)任務(wù)對(duì)同一個(gè) 數(shù)據(jù)集 進(jìn)行計(jì)算時(shí)的IO瓶頸。
FusionInsight大數(shù)據(jù)
華為FusionInsight MRS是一個(gè)分布式數(shù)據(jù)處理系統(tǒng),對(duì)外提供大容量的數(shù)據(jù)存儲(chǔ)、查詢和分析能力。MRS是一個(gè)在華為云上部署和管理Hadoop系統(tǒng)的服務(wù),一鍵即可部署Hadoop集群。MRS提供租戶完全可控的一站式企業(yè)級(jí)大數(shù)據(jù)集群云服務(wù),完全兼容開源接口,結(jié)合 華為云計(jì)算 、存儲(chǔ)優(yōu)勢(shì)及大數(shù)據(jù)行業(yè)經(jīng)驗(yàn),為客戶提供高性能、低成本、靈活易用的全棧大數(shù)據(jù)平臺(tái),輕松運(yùn)行Hadoop、Spark、HBase、Kafka、Storm等大數(shù)據(jù)組件,并具備在后續(xù)根據(jù)業(yè)務(wù)需要進(jìn)行定制開發(fā)的能力,幫助企業(yè)快速構(gòu)建海量數(shù)據(jù)信息處理系統(tǒng),并通過(guò)對(duì)海量信息數(shù)據(jù)實(shí)時(shí)與非實(shí)時(shí)的分析挖掘,發(fā)現(xiàn)全新價(jià)值點(diǎn)和企業(yè)商機(jī)。
HBase
HBase是一個(gè)開源的、面向列(Column-Oriented)、適合存儲(chǔ)海量非結(jié)構(gòu)化數(shù)據(jù)或半結(jié)構(gòu)化數(shù)據(jù)的、具備高可靠性、高性能、可靈活擴(kuò)展伸縮的、支持實(shí)時(shí)數(shù)據(jù)讀寫的分布式存儲(chǔ)系統(tǒng)。
Hive
Hive是建立在Hadoop上的 數(shù)據(jù)倉(cāng)庫(kù) 基礎(chǔ)構(gòu)架。它提供了一系列的工具,可以用來(lái)進(jìn)行數(shù)據(jù)提取轉(zhuǎn)化加載(ETL),這是一種可以存儲(chǔ)、查詢和分析存儲(chǔ)在Hadoop中的大規(guī)模數(shù)據(jù)的機(jī)制。Hive定義了簡(jiǎn)單的類SQL查詢語(yǔ)言,稱為HiveQL,它允許熟悉SQL的用戶查詢數(shù)據(jù)。Hive的數(shù)據(jù)計(jì)算依賴于MapReduce、Spark、Tez。
Hadoop
Hadoop是一個(gè)分布式系統(tǒng)框架。用戶可以在不了解分布式底層細(xì)節(jié)的情況下,開發(fā)分布式程序,充分利用了集群的高速運(yùn)算和存儲(chǔ)。 Hadoop能夠?qū)Υ罅繑?shù)據(jù)以可靠的、高效的、可伸縮的方式進(jìn)行分布式處理。Hadoop是可靠的,因?yàn)樗僭O(shè)計(jì)算單元和存儲(chǔ)會(huì)失敗,因此維護(hù)多個(gè)工作數(shù)據(jù)副本,確保對(duì)失敗節(jié)點(diǎn)重新分布處理;Hadoop是高效的,因?yàn)樗圆⑿械姆绞焦ぷ鳎瑥亩涌焯幚硭俣?;Hadoop是可伸縮的,能夠處理PB級(jí)數(shù)據(jù)。 Hadoop主要由HDFS、MapReduce、Yarn等服務(wù)組成。
Flink
Flink是一個(gè)批處理和流處理結(jié)合的統(tǒng)一計(jì)算框架,其核心是一個(gè)提供了數(shù)據(jù)分發(fā)以及并行化計(jì)算的流數(shù)據(jù)處理引擎。它的最大亮點(diǎn)是流處理,是業(yè)界最頂級(jí)的開源流處理引擎。
Kafka
Kafka是一個(gè)分布式的、分區(qū)的、多副本的消息發(fā)布-訂閱系統(tǒng),它提供了類似于JMS的特性,但在設(shè)計(jì)上完全不同,它具有消息持久化、高吞吐、分布式、多客戶端支持、實(shí)時(shí)等特性,適用于離線和在線的消息消費(fèi),如常規(guī)的消息收集、網(wǎng)站活性跟蹤、聚合統(tǒng)計(jì)系統(tǒng)運(yùn)營(yíng)數(shù)據(jù)(監(jiān)控?cái)?shù)據(jù))、日志收集等大量數(shù)據(jù)的互聯(lián)網(wǎng)服務(wù)的數(shù)據(jù)收集場(chǎng)景
內(nèi)容審核
內(nèi)容審核 ?( Content Moderation )基于基于深度神經(jīng)網(wǎng)絡(luò)模型,實(shí)現(xiàn)對(duì)圖像、文本、視頻內(nèi)容的智能檢測(cè)檢測(cè),可自動(dòng)進(jìn)行涉黃、廣告、涉政涉暴、涉政敏感人物、違禁品和灌水文本等內(nèi)容的檢測(cè),幫助客戶降低業(yè)務(wù)違規(guī)風(fēng)險(xiǎn),大幅降低人工審核成本。
區(qū)塊鏈
狹義的講, 區(qū)塊鏈 是一種按照時(shí)間順序?qū)?shù)據(jù)區(qū)塊以順序相連的方式組合成的一種鏈?zhǔn)綌?shù)據(jù)結(jié)構(gòu),并以密碼學(xué)方式保證不可篡改和不可偽造的分布式賬本;廣義來(lái)講,區(qū)塊鏈技術(shù)是利用鏈?zhǔn)綌?shù)據(jù)結(jié)構(gòu)來(lái)驗(yàn)證和存儲(chǔ)數(shù)據(jù)、利用分布式節(jié)點(diǎn)共識(shí)算法來(lái)生成和更新數(shù)據(jù)、利用密碼學(xué)的方式保證數(shù)據(jù)傳輸和訪問(wèn)的安全性、利用由 自動(dòng)化 腳本代碼組成的智能合約來(lái)編程和操作數(shù)據(jù)的一種全新的分布式基礎(chǔ)架構(gòu)與計(jì)算模式。
主機(jī)安全
主機(jī)安全 是保證主機(jī)在數(shù)據(jù)存儲(chǔ)和處理期間的保密性、完整性和可用性,它需要通過(guò)一系列的安全技術(shù)和安全管理措施,為主機(jī)建立完整的安全保護(hù)環(huán)境。華為云統(tǒng)一主機(jī)安全管理平臺(tái)—— 企業(yè)主機(jī)安全 ?(Host Security Service, HSS ),是提升主機(jī)整體安全性的服務(wù),使用AI、機(jī)器學(xué)習(xí)、UEBA、情報(bào)等技術(shù)量化分析威脅、預(yù)防并挖掘潛在的主機(jī)安全風(fēng)險(xiǎn)。
堡壘機(jī)
堡壘機(jī) (Bastion Host)是一種安全運(yùn)維審計(jì)平臺(tái)。在特定的網(wǎng)絡(luò)環(huán)境下,為了保障網(wǎng)絡(luò)和數(shù)據(jù)不受外部和內(nèi)部用戶的威脅,通過(guò)部署各種技術(shù)手段,監(jiān)控和記錄運(yùn)維人員對(duì)網(wǎng)絡(luò)內(nèi)的服務(wù)器、數(shù)據(jù)庫(kù)等資源的運(yùn)維操作,以實(shí)現(xiàn)集中的帳號(hào)、授權(quán)、認(rèn)證和審計(jì)管理服務(wù)。
圖像識(shí)別
圖像識(shí)別 (Image Recognition),基于深度學(xué)習(xí)和大數(shù)據(jù),利用計(jì)算機(jī)對(duì)圖像進(jìn)行分析和理解,以識(shí)別各種不同模式的目標(biāo)和對(duì)象的技術(shù)?;谏疃葘W(xué)習(xí)技術(shù),可準(zhǔn)確識(shí)別圖像中的視覺內(nèi)容,提供多種物體、場(chǎng)景和概念標(biāo)簽,具備目標(biāo)檢測(cè)和屬性識(shí)別等能力,幫助客戶準(zhǔn)確識(shí)別和理解圖像內(nèi)容,打造智能化業(yè)務(wù)系統(tǒng),提升業(yè)務(wù)效率。
- 1
- ...
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10
- 11
- 12
- 13
- 14
- 15
- 16
- 17
- 18
- 19
- 20
- 21
- 22
- 23
- 24
- 25
- 26
- 27
- 28
- 29
- 30
- 31
- 32
- 33
- 34
- 35
- 36
- 37
- 38
- 39
- 40
- 41
- 42
- 43
- 44
- 45
- 46
- 47
- 48
- 49
- 50
- 51
- 52
- 53
- 54
- 55
- 56
- 57
- 58
- 59
- 60
- 61
- 62
- 63
- 64
- 65
- 66
- 67
- 68
- 69
- 70
- 71
- 72
- 73
- 74
- 75
- 76
- 77
- 78
- 79
- 80
- 81
- 82
- 83
- 84
- 85
- 86
- 87
- 88
- 89
- 90
- 91
- 92
- 93
- 94
- 95
- 96
- 97
- 98
- 99
- 100
- 101
- 102
- 103
- 104
- 105
- 106
- 107
- 108
- 109
- 110
- 111
- 112
- 113
- 114
- 115
- 116
- 117
- 118
- 119
- 120
- 121
- 122
- 123
- 124
- 125
- 126
- 127
- 128
- 129
- 130
- 131
- 132
- 133
- 134
- 135
- 136
- 137
- 138
- 139
- 140
- 141
- 142
- 143
- 144
- 145
- 146
- 147
- 148
- 149
- 150
- 151
- 152
- 153
- 154
- 155
- 156
- 157
- 158
- 159
- 160
- 161
- 162
- 163
- 164
- 165
- 166
- 167
- 168
- 169
- 170
- 171
- 172
- 173
- 174
- 175
- 176
- 177
- 178
- 179
- 180
- 181
- 182
- 183
- 184
- 185
- 186
- 187
- 188
- 189
- 190
- 191
- 192
- 193
- 194
- 195
- 196
- 197
- 198
- 199
- 200
- 201
- 202
- 203
- 204
- 205
- 206
- 207
- 208
- 209
- 210
- 211
- 212
- 213
- 214
- 215
- 216
- 217
- 218
- 219
- 220
- 221
- 222
- 223
- 224
- 225
- 226
- 227
- 228
- 229
- 230
- 231
- 232
- 233
- 234
- 235
- 236
- 237
- 238
- 239
- 240
- 241
- 242
- 243
- 244
- 245
- 246
- 247
- 248
- 249
- 250
- 251
- 252
- 253
- 254
- 255
- 256
- 257
- 258
- 259
- 260
- 261
- 262
- 263
- 264
- 265
- 266
- 267
- 268
- 269
- 270
- 271
- 272
- 273
- 274
- 275
- 276
- 277
- 278
- 279
- 280
- 281
- 282
- 283
- 284
- 285
- 286
- 287
- 288
- 289
- 290
- 291
- 292
- 293
- 294
- 295
- 296
- 297
- 298
- 299
- 300
- 301
- 302
- 303
- 304
- 305
- 306
- 307
- 308
- 309
- 310
- 311
- 312
- 313
- 314
- 315
- 316
- 317
- 318
- 319
- 320
- 321
- 322
- 323
- 324
- 325
- 326
- 327
- 328
- 329
- 330
- 331
- 332
- 333
- 334
- 335
- 336
- 337
- 338
- 339
- 340
- 341
- 342
- 343
- 344
- 345
- 346
- 347
- 348
- 349
- 350
- 351
- 352
- 353
- 354
- 355
- 356
- 357
- 358
- 359
- 360
- 361
- 362
- 363
- 364
- 365
- 366
- 367
- 368
- 369
- 370
- 371
- 372
- 373
- 374
- 375
- 376
- 377
- 378
- 379
- 380
- 381
- 382
- 383
- 384
- 385
- 386
- 387
- 388
- 389
- 390
- 391
- 392
- 393
- 394
- 395
- 396
- 397
- 398
- 399
- 400
- 401
- 402
- 403
- 404
- ...
- 405
- 406
- 407
- 408
- 409
- 410
- 411
- 412
- 413
- 414
- 415
- 416
- 417
- 418
- 419
- 420
- 421
- 422
- 423
- 424
- 425
- 426
- 427
- 428
- 429
- 430
- 431
- 432
- 433
- 434
- 435
- 436
- 437
- 438
- 439
- 440
- 441
- 442
- 443
- 444
- 445
- 446
- 447
- 448
- 449
- 450
- 451
- 452
- 453
- 454
- 455
- 456
- 457
- 458
- 459
- 460
- 461
- 462
- 463
- 464
- 465
- 466
- 467
- 468
- 469
- 470
- 471
- 472
- 473
- 474
- 475
- 476
- 477
- 478
- 479
- 480
- 481
- 482
- 483
- 484
- 485
- 486
- 487
- 488
- 489
- 490
- 491
- 492
- 493
- 494
- 495
- 496
- 497
- 498
- 499
- 500
- 501
- 502
- 502