背景故事
我维护并正在重新设计几个基于 PHP 的网络应用程序,并且有一个主题我还没有找到一个优雅的解决方案,所以我正在寻找一些可能引导我的输入更好的方法。
当前状态
除了大量数据之外,我的几个应用程序还允许用户存储图像。所有数据最终都在 PostgreSQL 集群中,但是为了性能和可维护性,我选择不将图像本身存储在数据库中。图像将其元数据存储在数据库中(例如原始文件名、宽度/高度等),一旦数据库事务成功,我将文件系统上的图像移动到图像目录中(存储为 .jpg)。
问题
所有这些功能都很好,但是由于应用程序被大量使用,并且被多人同时使用,并且通过互联网,并且 PHP 的错误/异常处理并不是在所有情况下都是最可靠的,所以我偶尔会担心关于无法将图像(在文件系统上)存储在数据库的事务中(因为它发生在文件系统上)。我也很担心,因为如果图像文件在文件系统上被损坏/更改/删除,数据库的记录将无法正确更新(没有参照完整性)。
解决方案
到目前为止我想出的是:
选项 A) 在数据库中存储实际图像(不仅仅是元数据,而是整个二进制文件)。 -- 我不喜欢这个,因为目前数据库虽然相当复杂,但仍然非常小(不超过 60MB 左右)。相关图像总计很多很多 GB,所以它会大量增加我的 PostgreSQL 安装的占用空间。此外,它会使我的数据库备份和复制方案复杂化。
选项 B) 保留当前设计(文件系统中的图像,postgres 中的数据),并尝试在应用程序级别的每个使用点考虑损坏的数据。 -- 它使应用程序更加复杂和容易出错。
选项 C) 我找到了一个名为 Flourishlib 的 PHP ORM 框架它包含一个模拟文件系统事务的文件系统类(基本上如果你调用 $file->rename() 它会检查这是否可能,但在你提交事务之前不会真正重命名)——这是我找到的最好的解决方案到目前为止,但是我已经在使用另一个 ORM 框架 (Propel),对于这种规模的项目我更喜欢它,所以我需要 2 个功能大部分重叠的框架。
太好了
所以,我想这里的许多其他人以前也遇到过同样的“问题”,而且我敢肯定,有些人提出了一些我还没有想到的解决方案。感谢任何指点、建议或批评。
最佳答案
在我看来,这是两个不同的问题。
第一个:您如何保证完整性,您已经以某种方式解决了这个问题。我唯一要考虑的是在数据库事务期间执行文件系统操作,如果出现问题则回滚。这里的权衡是性能,因为文件系统操作相当慢但不是那么慢;) 你可以试试……
第二个:如何在外部文件操作后保持完整性。在这里我建议用 php 查看 inotofy PHPInotify .它允许您实现观察者模式,以便在文件系统发生变化时得到通知。
关于php - 保持数据库与文件系统上的图片同步 [PHP/Postgresql/Linux],我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/9600404/
我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i
我想设置一个默认日期,例如实际日期,我该如何设置?还有如何在组合框中设置默认值顺便问一下,date_field_tag和date_field之间有什么区别? 最佳答案 试试这个:将默认日期作为第二个参数传递。youcorrectlysetthedefaultvalueofcomboboxasshowninyourquestion. 关于ruby-on-rails-date_field_tag,如何设置默认日期?[rails上的ruby],我们在StackOverflow上找到一个类似的问
我将我的Rails应用程序部署到OpenShift,它运行良好,但我无法在生产服务器上运行“Rails控制台”。它给了我这个错误。我该如何解决这个问题?我尝试更新rubygems,但它也给出了权限被拒绝的错误,我也无法做到。railsc错误:Warning:You'reusingRubygems1.8.24withSpring.UpgradetoatleastRubygems2.1.0andrun`gempristine--all`forbetterstartupperformance./opt/rh/ruby193/root/usr/share/rubygems/rubygems
我正在尝试从Postgresql表(table1)中获取数据,该表由另一个相关表(property)的字段(table2)过滤。在纯SQL中,我会这样编写查询:SELECT*FROMtable1JOINtable2USING(table2_id)WHEREtable2.propertyLIKE'query%'这工作正常:scope:my_scope,->(query){includes(:table2).where("table2.property":query)}但我真正需要的是使用LIKE运算符进行过滤,而不是严格相等。然而,这是行不通的:scope:my_scope,->(que
有时我需要处理键/值数据。我不喜欢使用数组,因为它们在大小上没有限制(很容易不小心添加超过2个项目,而且您最终需要稍后验证大小)。此外,0和1的索引变成了魔数(MagicNumber),并且在传达含义方面做得很差(“当我说0时,我的意思是head...”)。散列也不合适,因为可能会不小心添加额外的条目。我写了下面的类来解决这个问题:classPairattr_accessor:head,:taildefinitialize(h,t)@head,@tail=h,tendend它工作得很好并且解决了问题,但我很想知道:Ruby标准库是否已经带有这样一个类? 最佳
我是Rails的新手,所以请原谅简单的问题。我正在为一家公司创建一个网站。那家公司想在网站上展示它的客户。我想让客户自己管理这个。我正在为“客户”生成一个表格,我想要的三列是:公司名称、公司描述和Logo。对于名称,我使用的是name:string但不确定如何在脚本/生成脚手架终端命令中最好地创建描述列(因为我打算将其设置为文本区域)和图片。我怀疑描述(我想成为一个文本区域)应该仍然是描述:字符串,然后以实际形式进行调整。不确定如何处理图片字段。那么……说来话长:我在脚手架命令中输入什么来生成描述和图片列? 最佳答案 对于“文本”数
我正在尝试使用Curbgem执行以下POST以解析云curl-XPOST\-H"X-Parse-Application-Id:PARSE_APP_ID"\-H"X-Parse-REST-API-Key:PARSE_API_KEY"\-H"Content-Type:image/jpeg"\--data-binary'@myPicture.jpg'\https://api.parse.com/1/files/pic.jpg用这个:curl=Curl::Easy.new("https://api.parse.com/1/files/lion.jpg")curl.multipart_form_
无论您是想搭建桌面端、WEB端或者移动端APP应用,HOOPSPlatform组件都可以为您提供弹性的3D集成架构,同时,由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台(桌面/WEB/APP,而且某些客户端是“瘦”客户端)快速、方便地将数据接入到3D应用系统的解决方案,并且当访问数据时,在各个平台上的性能和用户体验保持一致,HOOPSPlatform将帮助您完成。利用HOOPSPlatform,您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品,HOOPSSDK包含的技术有:快速且准确的CAD
本教程将在Unity3D中混合Optitrack与数据手套的数据流,在人体运动的基础上,添加双手手指部分的运动。双手手背的角度仍由Optitrack提供,数据手套提供双手手指的角度。 01 客户端软件分别安装MotiveBody与MotionVenus并校准人体与数据手套。MotiveBodyMotionVenus数据手套使用、校准流程参照:https://gitee.com/foheart_1/foheart-h1-data-summary.git02 数据转发打开MotiveBody软件的Streaming,开始向Unity3D广播数据;MotionVenus中设置->选项选择Unit
文章目录一、概述简介原理模块二、配置Mysql使用版本环境要求1.操作系统2.mysql要求三、配置canal-server离线下载在线下载上传解压修改配置单机配置集群配置分库分表配置1.修改全局配置2.实例配置垂直分库水平分库3.修改group-instance.xml4.启动监听四、配置canal-adapter1修改启动配置2配置映射文件3启动ES数据同步查询所有订阅同步数据同步开关启动4.验证五、配置canal-admin一、概述简介canal是Alibaba旗下的一款开源项目,Java开发。基于数据库增量日志解析,提供增量数据订阅&消费。Git地址:https://github.co