Los costos del Big Data

El gran costo del Big Data

 Forbes


Post invitado escrito por John Bantleman

John Bantleman es CEO de RainStor, que vende software de base de datos utilizado para proyectos de Big Data.

Hemos entrado en la era de Big Data donde se descubren nuevas oportunidades de negocios todos los días porque las tecnologías innovadoras de administración de datos ahora permiten a las organizaciones analizar todo tipo de datos. Los datos semiestructurados y no estructurados que se generan en grandes cantidades a la velocidad de la red son fuentes ricas de información que le dicen a las organizaciones exactamente lo que los clientes necesitan y quieren y cómo o por qué compran. Pero con las nuevas oportunidades de negocio viene el costo, y los verdaderos costos aún no se han apreciado del todo.

Big Data no es exactamente nuevo. Los líderes del mercado han estado almacenando y analizando tipos de datos múltiples no solo para obtener una ventaja competitiva, sino también para lograr una visión más profunda de los patrones de comportamiento del cliente que impactan directamente en su negocio.

Dos sectores específicos - telecomunicaciones y venta minorista - han invertido en soluciones de data warehousing donde se acumulan grandes cantidades de transacciones e interacciones de los clientes para determinar los indicadores de rendimiento clave, como los ingresos por año o por cliente o el costo de adquisición de clientes a través de Internet promociones o picos estacionales. Sin embargo, incluso los líderes del mercado no pueden permitirse almacenar y administrar datos detallados sin procesar a escala de petabytes a lo largo del tiempo en almacenes de datos tradicionales. A menudo almacenan, digamos, los últimos cuatro trimestres y luego descargan el historial a la cinta sin conexión, que no es de fácil acceso. El desafío empresarial se produce cuando la Navidad cae en sábado, y necesitan analizar datos de hace siete años para comprender patrones específicos. La reinstalación de datos más antiguos y voluminosos en el almacén no solo es muy desafiante, sino también costoso.



Dos factores clave entran en juego con respecto a la gestión y análisis Big Data a escala empresarial. Primero, los innovadores web, como Facebook, Google y Yahoo, han desarrollado una arquitectura de almacenamiento y computación escalable para administrar Big Data: Hadoop, que paraleliza grandes conjuntos de datos a través de hardware básico de bajo costo para una escala fácil y reduce drásticamente el costo de petabyte ambientes.

En segundo lugar, los requisitos tecnológicos para administrar Big Data se han trasladado del dominio de unos pocos mercados distintos al aumento de la demanda y los requisitos únicos en una amplia gama de sectores. Los operadores de comunicaciones que administran la escala de petabytes hoy esperan un crecimiento de datos de 10-100x debido al cambio a 4G y LTE con el aumento de los dispositivos de punto final conectados para aprovechar miles de aplicaciones móviles. La red inteligente de servicios públicos se está sumergiendo en Big Data mientras las ciudades de todo el mundo se unen a la nueva "red digitalizada". Las instituciones de servicios financieros están viendo crecimientos compuestos del 100 por ciento en los datos de negociación y opciones, que deben almacenarse durante más de 7 años. Durante los próximos 3 a 5 años, Big Data será una estrategia clave para las organizaciones del sector público y privado. De hecho, en los próximos 5 años, se espera que el 50 por ciento de los proyectos de Big Data se ejecuten en Hadoop.

La realidad es que los enfoques de bases de datos tradicionales no escalan ni escriben datos lo suficientemente rápido para mantenerse al día con la velocidad de creación. Además, los almacenes de datos diseñados para el propósito son excelentes para manejar datos estructurados, pero el hardware tiene un alto costo para escalar a medida que crecen los volúmenes.

Un habilitador clave para Big Data es la escalabilidad de bajo costo de Hadoop. Por ejemplo, un cluster Petabyte Hadoop requerirá entre 125 y 250 nodos que cuestan ~ $ 1 millón. El costo de una distribución Hadoop compatible tendrá costos anuales similares (~ $ 4,000 por nodo), que es una pequeña fracción de un almacén de datos empresarial ($ 10- $ 100s de millones). En la evaluación inicial, Big Data en Hadoop parece ser una gran oferta. Las empresas innovadoras tienen Hadoop en la actualidad: la pregunta es ¿cómo lo aprovecharán ya qué ritmo se convertirá en una misión crítica y central para el enfoque de TI?

Sin embargo, el costo real se encuentra en la operación y administración general o integración de Big Data dentro del ecosistema existente. A medida que los entornos de Big Data escalan, como en Yahoo, la gestión de 200 petabytes en 50,000 nodos requiere que se agreguen más para brindar capacidad de almacenamiento adicional. Muchas organizaciones Web 2.0 que ejecutan Hadoop dependen completamente de la redundancia de datos, pero si usted es un banco empresarial o un operador de comunicaciones, debe cumplir con la seguridad basada en estándares, la recuperación ante desastres y la disponibilidad. Como Hadoop existe hoy, introduce una administración más compleja y la necesidad de recursos especializados.

Detrás de la superficie de Big Data en las implementaciones de Hadoop, muchos innovadores de la plataforma de código abierto han invertido y creado el "Científico de datos", esencialmente un estadístico que puede programar de forma nativa y aprovechar los marcos MapReduce. Para integrar MapReduce, la mayoría de las empresas necesita desarrollar una base de habilidades completamente nueva, y la inversión en capital humano superará rápidamente a la inversión en infraestructura. Además, deben aprovechar el almacén de datos existente y la infraestructura de inteligencia empresarial donde Big Data en Hadoop necesita integrarse para aprovechar las herramientas y habilidades existentes. La imposibilidad de aprovechar los estándares en Hadoop como SQL requiere una mayor inversión sin reducir el costo del almacén de datos.

Big Data ofrece ganancias para las grandes empresas, pero los costos ocultos y la complejidad presentan barreras con las que las organizaciones tendrán problemas. Aunque Hadoop es relativamente nuevo en la empresa, está haciendo grandes avances para mejorar la confiabilidad y la facilidad de uso. No hay escasez de innovación proveniente de las nuevas empresas y los principales contribuyentes al proyecto de código abierto Apache. Las dos áreas que tendrán el mayor impacto tanto en la facilidad de adopción como en el costo son:

• aprovechar el lenguaje de consulta SQL existente y las herramientas de BI existentes contra datos dentro de Hadoop; y
• la capacidad de comprimir datos al nivel más granular, lo que no solo reducirá los requisitos de almacenamiento, sino que reducirá el número de nodos y simplificará la infraestructura.

Sin estas dos capacidades, el aprendizaje de habilidades requerirá tiempo y dinero, y no se adaptará a las demandas de la empresa. Las tasas de crecimiento de los datos simplemente superarán el costo de la escala para administrar cientos de terabytes a petabytes de Big Data que llegan todos los días.

Los CIO y los CTO deben analizar de cerca el verdadero costo de Big Data. Sabemos que una cosa está comprobada: los beneficios de aprovechar Big Data superarán la inversión en TI, y por eso agradecemos a nuestros innovadores de base. Costo por cuánto es la pregunta.

Read more »

Costos de producción y beneficios de la firma

Production Costs and Firm Profits

The firm's primary objective in producing output is to maximize profits. The production of output, however, involves certain costs that reduce the profits a firm can make. The relationship between costs and profits is therefore critical to the firm's determination of how much output to produce.

Explicit and implicit costs. A firm's explicit costs comprise all explicit payments to the factors of production the firm uses. Wages paid to workers, payments to suppliers of raw materials, and fees paid to bankers and lawyers are all included among the firm's explicit costs.

A firm's implicit costs consist of the opportunity costs of using the firm's own resources without receiving any explicit compensation for those resources. For example, a firm that uses its own building for production purposes forgoes the income that it might receive from renting the building out. As another example, consider the owner of a firm who works along with his employees but does not draw a salary; the owner forgoes the opportunity to earn a wage working for someone else. These implicit costs are not regarded as costs in an accounting sense, but they are a part of the firm's costs of doing business, nonetheless. When economists discuss costs, they have in mind both explicit and implicit costs.

Accounting profits, economic profits, and normal profits. The difference between explicit and implicit costs is crucial to understanding the difference between accounting profits and economic profits. Accounting profits are the firm's total revenues from sales of its output, minus the firm's explicit costs. Economic profitsare total revenues minus explicit and implicit costs. Alternatively stated, economic profits are accounting profits minus implicit costs. Thus, the difference between economic profits and accounting profits is that economic profits include the firm's implicit costs and accounting profits do not.

A firm is said to make normal profits when its economic profits are zero. The fact that economic profits are zero implies that the firm's reserves are enough to cover the firm's explicit costs and all of its implicit costs, such as the rent that could be earned on the firm's building or the salary the owner of the firm could earn elsewhere. These implicit costs add up to the profits the firm would normally receive if it were properly compensated for the use of its own resources—hence the name, normal profits.

Fixed and variable costs. In the short-run, some of the input factors the firm uses in production are fixed. The cost of these fixed factors are the firm's fixed costs. The firm's fixed costs do not vary with increases in the firm's output.

The firm also employs a number of variable factors of production. The cost of these variable factors of production are the firm's variable costs. In order to increase output, the firm must increase the number of variable factors of production that it employs. Therefore, as firm output increases, the firm's variable costs must also increase.

To illustrate the concepts of fixed and variable costs, consider again the example of a single firm operating in the short-run with a fixed amount of capital, 1 unit, and a variable amount of labor. Suppose the cost of the single unit of capital is $100 and the cost of hiring each worker is $20. The firm's fixed and variable costs are reported in Table 1 . 

TABLE 1 Firm Output and Costs Labor input Capital input Total product Variable cost Fixed cost Total cost Marginal cost 0 1 0 $0 $100 $100 - 1 1 5 20 100 120 $4.0 2 1 15 40 100 140 2.0 3 1 23 60 100 160 2.5 4 1 27 80 100 180 5.0 5 1 29 100 100 200 10.0 6 1 30 120 100 220 20.0

The fourth column of Table 1 reports the variable cost that the firm incurs from hiring 1 to 6 workers at $20 each, while the fifth column reports the fixed cost of the single unit of capital that the firm employs. The fixed cost of $100 is the same—no matter how many units of output the firm produces.

Total and marginal costs. The firm's total cost of production is the sum of all its variable and fixed costs. The firm's marginal cost is the per unit change in total cost that results from a change in total product. The concepts of total and marginal cost are illustrated in Table 1 . The sixth column of this table reports the firm's total costs, which are simply the sum of its variable and fixed costs. The seventh column reports the marginal cost associated with different levels of output.

For example, when the firm increases its total product from 0 to 5 units of output, the change in the firm's total costs is $120 – $100 = $20. The marginal cost for the first 5 units of output is therefore $20/5 = $4. Similarly, when the firm increases its total product by 10 units, from 5 to 15 units of output, its total costs increase by $140 - $120 = $20. The marginal cost for the next 10 units produced is therefore $20/10 = $2.

Marginal cost and marginal product. The firm's marginal cost is related to itsmarginal product. If one calculates the change in total cost for each different level of total product reported and divides by the corresponding marginal product of labor reported, one arrives at the marginal cost figure. The marginal cost falls at first, then starts to rise. This behavior is a consequence of the relationship between marginal cost and marginal product and the law of diminishing returns. As the marginal product of the variable input–labor– rises, the firm's total product incresses at a rate that is greater than the rate of new workers hired. Consequently, the firm's marginal costs will be decreasing. Eventually, however, by the law of diminishing returns, the marginal product of the variable factor will begin to decline; the firm's total product will increase at a rate less than the rate at which new workers are hired. The result is that the firm's marginal costs will begin rising.

Average variable, average fixed, and average total costs. The firm's variable, fixed, and total costs can all be calculated on an average or per unit basis. Table 2reports the average variable costs, average fixed costs, and average total costs for the numerical example of Table 1 . 

TABLE 2 Firm Output and Average Costs Total product Average variable cost Average fixed cost Average total cost 0 — — — 5 $4.00 $20.00 $24.00 15 2.66 6.66 9.33 23 2.61 4.35 6.96 27 2.96 3.70 6.66 29 3.45 3.45 6.90 30 4.00 3.33 7.33

When the firm produces 27 units of output, for example, the firm's variable costs from Table 1 are $80. The average variable cost per unit of output is therefore $80/27 = $2.96, as reported in Table 2 . The fixed cost corresponding to 27 units of output is $100; therefore, the average fixed cost per unit of output is $100/27 = $3.70. The total cost of 27 units of output is $180; so, the average total cost is $180/27 = $6.66.

Graphical depiction of costs. The variable, fixed, and total costs reported in Table1 are shown in Figure 1 . The marginal cost reported in Table 1 along with the average variable, average fixed, and average total costs reported in Table 2 are shown in the graph in Figure 1 (b). 

Figure 1 Cost Curves

When costs are depicted graphically, they are referred to as cost curves. Figures 1(a) and 1 (b) reveal some of the interesting relationships that exist among the various cost curves. Note first that the total cost curve is just the vertical summation of the variable cost curve and the fixed cost curve. This also holds true for the average total cost curve, which is just the vertical summation of theaverage variable cost curve and the average fixed cost curve.

Second, note the relationship between the marginal cost curve and the total and variable cost curves. The marginal cost curve reaches its minimum at the inflection point of the total and variable cost curves. This should not be surprising because the slope of the total and variable cost curves reveals the rate at which the firm's costs change as output increases, which is precisely what marginal cost measures.

Finally, notice that the marginal cost curve intersects both the average variable cost curve and the average total cost curve at the minimum points of both curves. This is in accordance with the marginal-average rule, which states that when marginal cost lies below average cost, average cost is falling. When marginal cost lies aboveaverage cost, average cost is rising. It follows, then, that the marginal cost curve will intersect the average variable and average total cost curves at each of these curves' minimum points.

Cliff Notes

Read more »

Costos económicos: Corto Plazo

Costos a corto plazo

Si usted piensa de una empresa en un punto dado del tiempo, como una instantánea, todo queda fijo. La empresa está produciendo una cantidad determinada mediante el uso de una cantidad dada de insumos y los ingresos se pagan por sus precios. Todos los costos están dados o fijos. Pero si nos imaginamos el funcionamiento de una empresa durante un período relativamente corto de tiempo (como una película), podemos distinguir entre costos fijos y los que no lo son. Supongamos que se maneja una tienda de ropa. En un lapso de, digamos, uno o dos meses, es probable que el costo de alquiler de las instalaciones que usted utiliza queden fijos en el sentido de que lo que se paga como renta no depende de lo mucho que se venda o produzca. Es posible que haya firmado un contrato con el propietario durante seis meses con una alquiler y el dueño (a menos que sea muy bueno) va a cargar esos costos a usted, independientemente de lo bien que le vaya yendo en su negocio o incluso si usted decide no producen nada. Por eso, en general, el costo de alquiler se considera fijo en el corto plazo. Pero normalmente los costes laborales no son fijos porque los trabajadores pueden ser contratados y despedidos en un corto plazo por una empresa. Los costos de las materias primas (por ejemplo, tejidos comprados en el mercado al por mayor) dado que usted puede comprar más o menos de ellas en función de como le esté yendo a su negocio.

Figura 15.  CM, CVMe, CMe y CT

 Como otro ejemplo, supongamos que el Dr. López posee un centro de diagnóstico. Está situado en un piso de una planta, heredada de su padre. Él emplea a unas 30 personas, incluyendo a enfermeras, técnicos, empleados administrativos y trabajadores manuales. Al tomar préstamos de un banco ha podido comprar varias máquinas de alta tecnología para  hacer tomografías computadas, resonancias magnéticas, pruebas de ultrasonido y así sucesivamente. Cada mes se paga el banco 2 mil pesos por su préstamo más los intereses. Este es un ejemplo de costo fijo, ya que es independiente del número de pacientes que vienen al centro del Dr. López para el servicio. También existe un costo implícito de alquiler del consultorio, debido a la renta sacrificada por no haber alquilado el piso y usarlo como centro de diagnóstico. Este es también un costo fijo. Sin embargo, dependiendo de cómo esta empresa se va, el Dr. López puede contratar a más o menos de las enfermeras o trabajadores manuales en un corto plazo. Por lo tanto, el pago a los enfermeros y otros trabajadores no son fijos.

Read more »

Costos económicos: Introducción

Costos de producción

En esta sección se estudian en detalle los distintos tipos de costos y su relación con la producción.

Para empezar, hay costos explícitos y costos implícitos. Los costos explícitos son aquellos que se pagan directamente a las demás partes por un empresario o una empresa de gestión de una empresa. Incluyen, por ejemplo, los costos de mano de obra, materia prima, maquinaria comprada y así sucesivamente. Los costos implícitos son aquellos para los que no hay pago directo pero indirectamente hay un costo involucrado.

Supongamos que usted es dueño de un edificio de dos plantas. Usted vive en el primer piso y operar una pequeña editorial en la planta baja. Obviamente, usted no tiene ningún costo de alquiler de operación del negocio. Pero hay un costo implícito. Si hubiese alquilado la planta baja a alguna otra persona, habría obtenido unos ingresos por alquiler. Al usarlo para su propio negocio, en realidad está perdiendo ese ingreso, y eso es un costo implícito. Del mismo modo, si utiliza sus propios ahorros en el negocio, los ingresos por intereses no percibidos es un costo implícito.

Los costos explícitos son más comúnmente llamados costos contables. La contabilidad de costos, más los costos implícitos de los tipos descritos anteriormente reflejan el verdadero costo de funcionamiento de una empresa y se llaman costes económicos. En el análisis de costos económicos, siempre se refieren a los costes económicos.

Costo de oportunidad

El costo de oportunidad de cualquier acción es la renuncia a alternativas de mayor valor. La acción que se decide no hacer - es la alternativa de mayor valor no percibido - el coste de la acción que usted elige hacer. Para una empresa, el costo de oportunidad de la producción es el valor del mejor uso alternativo de la empresa de sus recursos.

El costo de oportunidad es una alternativa real no percibidos. Pero para que podamos comparar el costo de una acción con la de otra acción, expresamos costo de oportunidad en unidades monetarias. los costos de una empresa de oportunidad son:

-Costos explícitos

-Costos implícitos

Los costos explícitos

Los costos explícitos se pagan en dinero. La cantidad pagada por un recurso que podría haberse gastado en otra cosa, por lo que es el costo de oportunidad de utilizar los recursos. Para una empresa, sus gastos en alimentos, servicios públicos, los salarios y los intereses bancarios son los costos explícitos.

Los costos implícitos

Una empresa incurre en costos implícitos cuando renuncia a una acción alternativa pero no hace un pago. Una empresa incurre en costos implícitos cuando:

1. Utiliza su propio capital.

2. Utiliza el tiempo de su propietario o recursos financieros.

El costo de usar su propio capital es un costo implícito - y un costo de oportunidad - porque la empresa podría alquilar la capital a otra empresa. El descenso de la renta de alquiler es el costo de la empresa la oportunidad de usar su propio capital. Este costo de oportunidad se llama la tasa implícita de alquiler del capital.

Las personas alquilan casas, apartamentos, coches, teléfonos y cintas de vídeo. Las empresas fotocopiadoras alquiler, equipo de movimiento de tierras, servicios de lanzamiento de satélites-y así sucesivamente. Si una firma alquila el capital, se incurre en un costo explícito. Si una empresa compra el capital que utiliza, incurre en un costo implícito. La tasa implícita de alquiler del capital se compone de:

1. Depreciación económica.

2. Intereses no percibidos.

La depreciación económica es el cambio en el valor de mercado de capital en un período determinado. Se calcula como el precio de mercado de la capital al comienzo del período de menos su precio de mercado al final del período. Por ejemplo, supongamos que el propietario de una firma podría haber vendido unos edificios de restaurantes el 31 de diciembre de 2003, por $ 400.000. Si ella puede vender el mismo capital el 31 de diciembre de 2004, por $ 375.000, la depreciación económica durante el año 2004 es de $ 25,000 - la caída en el valor de mercado de los equipos. $ 25.000 es un costo implícito de utilizar el capital durante el año 2004.

Los fondos para la compra de capital podrían haberse utilizado para otros fines. Y en su siguiente mejor uso, se habría producido un retorno - un ingreso por intereses. Esta renuncia de interés es parte del costo de oportunidad de utilizar el capital. Por ejemplo, el propietario podría haber comprado bonos del gobierno en lugar de un restaurante. Los intereses no percibidos sobre los bonos del gobierno es un costo implícito de operar, por ejemplo, un restaurante.

Read more »