streaming相关内容

MySQL Binary Storage using BLOB VS OS File System:大文件、大数量、大问题

我正在运行的版本(基本上最新的): PHP:5.3.1 MySQL:5.1.41 阿帕奇:2.2.14 操作系统:CentOS(最新) 情况如下. 我有数千份非常重要的文件,从客户合同到语音签名(合同客户授权记录),文件类型包括但不限于 jpg、gif、png、tiff、doc、docx、xls、wav、mp3、pdf等 所有这些文档目前都存储在多个服务器上,包括 Win ..
发布时间:2022-01-17 17:10:36 PHP

“HTTP Streaming"的跨浏览器实现(推)AJAX 模式

客户端从服务器请求网页.然后 Clent 要求进行额外的计算;服务器执行一系列计算并在部分结果可用时立即发送(文本格式,每行包含单独的完整项目).客户端使用服务器提供的信息更新网页(使用 JavaScript 和 DOM). 这似乎适合 HTTP Streaming (当前 版本)模式来自 Ajaxpatterns 站点. 问题是如何以跨浏览器(与浏览器无关)的方式进行,最好不使用 J ..
发布时间:2022-01-15 21:27:26 前端开发

Hadoop 流作业在 Python 中失败(不成功)

我正在尝试使用 Python 脚本在 Hadoop Streaming 上运行 Map-Reduce 作业,并遇到与 Hadoop Streaming Job failed error in python 但这些解决方案对我不起作用. 当我运行“cat sample.txt | ./p1mapper.py | sort | ./p1reducer.py"时,我的脚本运行良好 但是当我运 ..
发布时间:2022-01-14 08:13:51 Python

Hadoop 中的流式处理或自定义 Jar

我正在使用 Python 编写的映射器和缩减器在 Hadoop(在 Amazon 的 EMR 上)运行流式作业.我想知道如果我在 Java 中(或使用 Pig)实现相同的映射器和减速器,我会体验到的速度提升. 特别是,我正在寻找人们从流式迁移到自定义 jar 部署和/或 Pig 的经验,以及包含这些选项的基准比较的文档.我发现了这个问题,但答案对我来说不够具体.我不是在寻找 Java 和 P ..
发布时间:2022-01-13 23:40:34 Java开发

在 Hadoop Streaming 中生成单独的输出文件

只使用一个映射器(一个 Python 脚本)而不使用 reducer,我怎样才能为每一行输出输出一个以键作为文件名的单独文件,而不是输出长文件? 解决方案 您可以使用 python 文件函数写入本地文件系统上的文本文件,或者如果您想使用 HDFS,请使用 Thrift API. ..
发布时间:2022-01-13 23:34:52 Python

MongoDb 实时(或接近实时)流出插入的数据

我有许多 MongoDB 集合,它们从各种流式源中获取许多 JSON 文档.换句话说,有许多进程不断地将数据插入到一组 MongoDB 集合中. 我需要一种将数据从 MongoDB 流式传输到下游应用程序的方法.所以我想要一个概念上看起来像这样的系统: App Stream1 -->应用 Stream2 -->MONGODB --->聚合流应用 Stream3 --> 或者这个: Ap ..
发布时间:2022-01-13 14:09:11 Java开发

RestSharp AddFile 使用 Stream

我正在使用 RestSharp(Visual Studio 2013 中的版本 105.2.3.0,.net 4.5)来调用 NodeJS 托管的 Web 服务.我需要拨打的电话之一是上传文件.使用 RESTSharp 请求,如果我将流从我的一端检索到一个字节数组中并将其传递给 AddFile,它就可以正常工作.但是,我更愿意流式传输内容,而不是将整个文件加载到服务器内存中(文件可以是 100 M ..
发布时间:2022-01-09 23:22:45 C#/.NET

将大文件上传到 ASP.NET MVC

对于我正在开发的应用程序,我需要允许用户通过我们的网站上传非常大的文件(即可能有很多千兆字节).不幸的是,ASP.NET MVC 似乎在开始为它提供服务之前将整个请求加载到 RAM 中——对于这样的应用程序来说并不完全理想.值得注意的是,试图通过如下代码来规避这个问题: if (request.Method == "POST"){request.ContentLength = clientReq ..
发布时间:2022-01-09 22:38:24 C#/.NET

Hadoop Streaming:映射器“包装"二进制可执行文件

我有一个管道,目前在一个大型大学计算机集群上运行.出于发布目的,我想将其转换为 mapreduce 格式,以便任何人都可以在使用 hadoop 集群(如 amazon webservices (AWS))时运行它.该管道目前由一系列 python 脚本组成,这些脚本包装不同的二进制可执行文件并使用 python 子进程和 tempfile 模块管理输入和输出.不幸的是,我没有编写二进制可执行文件, ..
发布时间:2022-01-09 19:53:08 Python

未知内容长度的 HTTP 标头

我目前正在尝试在转码过程后将内容流式传输到网络.这通常可以通过将二进制文件写入我的 Web 流来正常工作,但是某些浏览器(特别是 IE7、IE8)不喜欢在 HTTP 标头中没有定义 Content-Length.我相信“有效"的标题应该有这个设置. 当您的 Content-Length 未知时,将内容流式传输到网络的正确方法是什么?转码过程可能需要一段时间,所以我想在它完成后开始流式传输. ..
发布时间:2022-01-09 19:24:41 C#/.NET

我可以使用 AVFoundation 将下载的视频帧流式传输到 OpenGL ES 纹理中吗?

我已经能够使用 AVFoundation 的 AVAssetReader 类将视频帧上传到 OpenGL ES 纹理中.但是,它有一个 警告与指向远程媒体的 AVURLAsset 一起使用时失败.这个失败没有很好的记录,我想知道是否有任何方法可以解决这个缺点. 解决方案 iOS 6 中发布了一些 API,我可以使用这些 API 让这个过程变得轻而易举.它根本不使用 AVAssetReade ..
发布时间:2022-01-09 09:03:32 移动开发

PHP 从视频中提取音频

我需要一种方法来从一些视频中提取音频(在 PHP 中).我有来自 YouTube 的视频流,所以如果它是实时流媒体,我真的很喜欢它,而不是我必须将它保存到临时目录并在那里处理它(尽管这是可以接受的.)谢谢,艾萨克沃勒 编辑:更具体地说,我有一个 MP4,我希望它是 MP3. 解决方案 你会想要使用类似 ffmpeg 并使用 php 的 exec 命令调用它.如果您在文档中环顾四周,我相信 ..
发布时间:2022-01-06 16:39:20 PHP

如何在不先读取整个图像的情况下就地缩放流位图?

我有一个图像密集型的 Android 应用程序.我目前正在使用 Bitmap.createScaledBitmap() 将图像缩放到所需的大小.但是,这种方法要求我在内存中已经有原始位图,可以相当大. 如何在不先将整个内容写入本地内存或文件系统的情况下缩放我正在下载的位图? 解决方案 这个方法会从图片中读取头信息来确定它的大小,然后读取图片并将其缩放到所需的大小,而不需要为图片分配内 ..
发布时间:2022-01-06 11:21:29 移动开发

如何使用 Hapi 将数据流式传输到浏览器?

我正在尝试使用流将数据发送到带有 Hapi 的浏览器,但无法弄清楚我们的方法.具体来说,我正在使用 request 模块.根据文档,reply 对象接受一个流,所以我尝试过: reply(request.get('https://google.com')); 抛出错误.在文档中它说流对象必须与 streams2 兼容,所以我尝试了:> reply(streams2(request.get(' ..
发布时间:2022-01-05 15:29:12 其他开发

Android 上的实时蓝牙 SPP 数据流仅工作 5 秒

我有一个自制的蓝牙设备,以 500Hz 的频率测量心电图:设备每 2 毫秒发送 9 个字节的数据(标题、心电图测量、页脚).所以这大概是一个 9*500=4.5kbytes/s 的数据流. 我有一个 C++ Windows 程序能够连接设备并检索数据流(用 Qt/qwt 显示它).在这种情况下,我使用 Windows 控制面板来绑定设备,并使用 boost serial_port 接口通过虚 ..
发布时间:2022-01-04 20:02:23 Java开发

Play Framework Scala:如何流式传输请求正文

我正在使用 Scala 使用 Play Framework 2.3.x 构建微服务(我是这两个方面的初学者),但我无法找到一种方法来流式传输我的请求正文. 问题来了: 我需要一个端点 /transform 在那里我可以接收一个巨大的 TSV 文件,我将解析并以另一种格式呈现:简单转换.问题是我的控制器中的每个命令都“太晚了".它在启动代码之前等待接收完整文件. 示例: def ..
发布时间:2022-01-02 21:58:09 其他开发