我们正在构建工具来从网络中挖掘信息.我们有几件,比如
从网络抓取数据
根据模板和业务规则提取信息
将结果解析为数据库
应用规范化和过滤规则
等等
问题在于解决问题并对每个阶段发生的事情有一个很好的"高级图片".
哪些技术可以帮助您理解和管理复杂的流程?
使用Windows Workflow Foundation等工作流程工具
将单独的函数封装到命令行工具中,并使用脚本工具将它们链接在一起
编写特定于域的语言(DSL)以指定在更高级别发生的事情.
只是好奇你如何处理具有许多交互组件的系统.我们希望记录/理解系统如何在比追踪源代码更高的层次上工作.