当前位置: 首页 > news >正文

大数据技术概述(三)——编程语言的选择

文章目录

    • 1.6编程语言的选择
      • 1.6.1java和Scala
      • 1.6.2Python
      • 1.6.3SQL

1.6编程语言的选择

大数据编程一般会使用Java、Scala和python等编程语言,Flink目前也支持上述3种语言。

1.6.1java和Scala

Java支持多线程,其生态圈中可用的第三方库众多。Java虚拟机(Java Virtval Machine,JVM)保证了程序的可移植性,可以快速部署到不同计算机上,是很多分布式系统首选的编程语言,比如Hadoop和Flink的绝大多数代码都是用Java编写的,这些框架提供了丰富的文档,网络社区的支持。

Scala是一门基于JVM的编程语言。Scala的特色是函数式编程。在并行计算方面,Scala支持Actor模型,Actor模型是一种更为先进的并行计算编程模型,很多大数据框架都基于Actor模型。Spark、Flink和Kafka都是基于Actor模型的大数据框架。Scala可以直接调用Java的代码,相比Java,Scala代码更为简洁和紧凑。

1.6.2Python

Python有大量第三方库,支持Web、科学计算和机器学习,被广泛应用到人工智能领域。大数据生态圈的各项技术对Python支持力度也很大,Hadoop、Spark、Kafka、HBase等技术都有Python版本的API。Flink的Python API名为PyFlink,相比于Java和Scala还不够完善,且PyFlink在不断迭代、完善。

1.6.3SQL

SQL并不是一种全能的编程语言,而是一种在数据库上对数据进行操作的语言。Flink把面向结构化查询的需求封装成了表(Table),对外提供Table API和SQL的调用接口,提供了非常成熟的SQL支持。

http://www.lryc.cn/news/136849.html

相关文章:

  • Flutter对象状态动态监听Watcher
  • 期权分仓开户资金是否安全?具体保障措施有哪些?
  • Unity Mac踩坑日记
  • 什么是负载均衡
  • 尽管价格走势平淡,但DeFi领域仍然非常有趣
  • RCU安全引用计数
  • Linux 可重入、异步信号安全和线程安全
  • WPF中手写地图控件(3)——动态加载地图图片
  • 智慧充电桩物联网方案架构
  • C语言基础之——操作符(上)
  • 手写链式调用
  • DETRs with Collaborative Hybrid Assignments Training论文笔记
  • 慧程HiperM3系列工业物联网、MES平台
  • SHELL 基础 入门(三) Bash 快捷键 命令执行顺序,详解通配符
  • nvm安装使用教程
  • 【Android】JUnit和Espresso单元测试新手快速入门
  • 8.4 【C语言】通过指针引用字符串
  • 【广州华锐视点】AR配电所巡检系统:可视化巡检利器
  • 微服务中间件--http客户端Feign
  • C语言学习系列-->【关于qsort函数的详解以及它的模拟实现】
  • Linux系统安全:NAT(SNAT、DNAT)
  • 【数据库】MySQL存储过程:提升数据库性能和操作效率的利器
  • rust写一个多线程和协程的例子
  • react18+antd5.x(1):Notification组件的二次封装
  • jenkins运行pytest测试用例脚本报错:没有权限,无法写日志PermissionError:[Error 13]Permission denied
  • 数据结构 day1
  • 湖北咸宁农业三维扫描数字化农业3d打印制造应用-CASAIM中科广电
  • Jenkins的定时任务配置
  • THINKPHP 微联云投票系统源码独立版 + 支持刷礼物
  • Mongodb两种启动方法