Article Center - 第319页

首页 - Article Center

Spark踩坑记——初试

[TOC] Spark简介整体认识 Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架。最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一。 Spark在整个大数据系统中处于中间偏上层的地位，如下图，对hadoop起到了补充作用：基本概念 Fork/Join框架是Java7提供了的一个用于并行执行任务的框架，
- 互联网
- 2026年05月04日
Spark踩坑记——数据库（Hbase+Mysql）

前言在使用Spark Streaming的过程中对于计算产生结果的进行持久化时，我们往往需要操作数据库，去统计或者改变一些值。最近一个实时消费者处理任务，在使用spark streaming进行实时的数据流处理时，我需要将计算好的数据更新到hbase和mysql中，所以本文对spark操作hbase和mysql的内容进行总结，并且对自己踩到的一些坑进行记录。 Spark
- 互联网
- 2026年05月04日
Servlet输出PDF文档方法

概述 Java Servlet 编程可以很方便地将 HTML 文件发送到客户端的 Web 浏览器。然而许多站点还允许访问非 HTML 格式的文档，包括 Adobe PDF、Microsoft Word 和 Micorsoft Excel 等。事实上这些非 HTML 格式只要能用 MIME 类型表示，就可以利用 servlet 来发送。本文将以 PDF为例
- 互联网
- 2026年05月04日
Spark机器学习4·分类模型(spark

线性模型逻辑回归--逻辑损失(logistic loss) 线性支持向量机（Support Vector Machine, SVM）--合页损失(hinge loss) 朴素贝叶斯(Naive Bayes) 决策树 0 准备数据 kaggle2.blob.core.windows.net/competitions-data/kaggle/3526/train.tsv sed 1d train
- 互联网
- 2026年05月04日
shutdown immediate执行不了

shutdown immediate执行不了 2024-09-07 在sqlplus 里登录后使用shutdown immediate 关闭数据库后若没有使用startup重启数据库就退出窗口则会出现下一次重启sqlplus窗口时无法登录的现象,解决方法如下一.启动数据库的方法启动数据库实例的方法有很多种,分别介绍如下: 1.使用SQLPLUS
- 互联网
- 2026年05月04日
Spark入门实战系列

【注】该系列文章以及使用到安装包/测试数据可以在《》获取、Spark Streaming简介 1.1 概述 Spark Streaming 是Spark核心API的一个扩展，可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据，包括Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及TCP sockets，从数据源获取数据之后，可以使用诸如map
- 互联网
- 2026年05月04日
setenforce作用

setenforce作用 2024-08-31 SELinux(Security-Enhanced Linux) 是美国国家安全局(NSA)对于强制访问控制的实现,是 Linux历史上最杰出的新安全子系统. 关闭SELinux 临时生效: 命令临时生效: setenforce 0 (临时生效可以直接用setenforce 0 ) 1 启用 0 告警,不启用永久生效: # 操作前先备份 cp
- 互联网
- 2026年05月04日
Spring 事务——源码分析

【事务环境搭建工作】：链接注解 @EnableTransactionManagement：在配置类中添加注解 @EnableTransactionManagement ，便开启了事务功能。此注解也是了解Spring事务源码的入口。 @EnableTransactionManagement public class TxConfig { 【1】
- 互联网
- 2026年05月04日
sicily 1007 To and Fro （基地称号）

链接：http://soj.me/show_problem.php?pid=1007 Description Mo and Larry have devised a way of encrypting messages. They first decide secretly on the number of columns and write the message (letters only)
- 互联网
- 2026年05月04日
setMouseCallback 封装类

setMouseCallback 封装类 2024-11-03 鼠标操作:setMouseCallback 函数借助回调函数,实现对鼠标每次操作的相应,即每进行一步鼠标操作,都会执行一次回调函数. void setMouseCallback(const string& window_name, MouseCallback on_Mouse, void* userdata = 0);
- 互联网
- 2026年05月04日

first-page 1 ... 318 319 320 ... 1000 last-page